在此Python数据科学教程中,大家将使用Eric Grinstein抓取的数据,使用Pandas分析来自流行的视频游戏评论网站IGN的视频游戏评论。哪个主机赢得了“控制台大战”(就游戏的审查而言)?该数据集将帮助大家找出答案。
当大家分析视频游戏评论时,大家将了解关键的Pandas概念,例如索引。您可以继续进行下去,并在大家的许多其他Python教程之一中或通过注册Python Pandas课程来了解有关Python和Pandas的更多信息。大家的许多其他数据科学课程也都使用Pandas。
谨记一下,本教程使用Python 3.5编写,并使用Jupyter Notebook构建。您可能使用的是Python,pandas和Jupyter的更新版本,但结果应该基本相同。
用Pandas导入数据
如果您正在使用本教程,则需要下载数据集,您可以在此处进行操作。
大家将采取的第一步是读取数据。数据以逗号分隔的值或csv文件存储,其中每行用换行分隔,每列用逗号(,)分隔。这是ign.csv文件的前几行:
如您在上方看到的,文件中的每一行代表一个游戏,该游戏已经过IGN审查。这些列包含有关该游戏的信息:
1)score_phrase— IGN如何用一个词形容游戏。这链接到它收到的分数。
2)title -游戏名称。
3)url —您可以在其中查看完整评论的URL。
4)platform -审查游戏的平台(PC,PS4等)。
5)score—游戏的得分,从1.0到10.0。
6)genre —游戏类型。
7)editors_choice- N如果游戏不是编辑选择的Y话,那么是。这与得分息息相关。
8)release_year -游戏发布的年份。
9)release_month -游戏发布的月份。
10)release_day -游戏发布的那天。
还有一个前导列,其中包含行索引值。大家可以放心地忽略此列,但稍后将深入探讨哪些索引值。
为了在Python和pandas中有效地处理数据,大家需要将csv文件读取到Pandas DataFrame中。DataFrame是表示和处理表格数据的一种方式,表格数据是表格形式的数据,例如电子表格。表格数据具有行和列的格式,就像大家的csv文件一样,但是如果大家可以将其作为表格查看,则对大家来说更易于阅读和排序。
为了读入数据,大家需要使用pandas.read_csv函数。此函数将接收一个csv文件并返回一个DataFrame。以下代码将:
a.导入pandas库。大家将其重命名为,pd以便更快地输入。这是数据分析和数据科学中的标准约定,您经常会看到导入的Pandas就像pd其他人的代码一样。
b.读ign.csv入一个DataFrame,并将结果分配给一个名为的新变量,reviews以便大家可以reviews用来引用大家的数据。
读完DataFrame后,以更直观的方式看一下大家所获得的内容将很有帮助。Pandas方便地为大家提供了两种方法,可以快速地将数据打印到表中。这些功能是:
1)DataFrame.head()—打印DataFrame的前N行,其中N是您作为参数传递给函数的数字,即DataFrame.head(7)。如果不传递任何参数,则默认值为5。
2)DataFrame.tail()—打印DataFrame的最后N行。同样,默认值为5。
大家将使用该head方法查看其中的内容reviews:
大家还可以访问pandas.DataFrame.shape属性,以查看以下行reviews:
如大家所见,所有内容均已正确读取-大家有18,625行和11列。
与类似的NumPy这样的Python软件包相比,使用Pandas的一大优势是Pandas允许大家拥有具有不同数据类型的列。在大家的数据集中,reviews大家有存储浮点值(如)score,字符串值(如score_phrase)和整数(如)的列release_year,因此在此处使用NumPy会很困难,但Pandas和Python可以很好地处理它。
现在大家已经正确地读取了数据,让大家开始建立索引reviews以获取所需的行和列。
用Pandas索引DataFrames
之前,大家使用了该head方法来打印的第一5行reviews。大家可以使用pandas.DataFrame.iloc方法完成同样的事情。该iloc方法允许大家按位置检索行和列。为此,大家需要指定所需行的位置以及所需列的位置。下面的代码将reviews.head()通过选择行0到5,以及数据集中的所有列来复制大家的结果:
让大家更深入地研究大家的代码:大家指定了想要的rows 0:5。这意味着大家想要从position 0到(但不包括)position的行5。
第一行被认为是在位置0,所以选择行0:5给了大家行的位置0,1,2,3,和4。大家也需要所有列,并且使用快捷方式来选择它们。它的工作方式是这样的:如果大家不喜欢第一个位置值,例如:5,那是假设大家的意思0。如果大家忽略了最后一个位置值(如)0:,则假定大家是指DataFrame中的最后一行或最后一列。大家需要所有列,因此只指定了一个冒号(:),没有任何位置。这使大家的列从0到最后一列。以下是一些索引示例以及结果:
1)reviews.iloc[:5,:]—第一5行,以及这些行的所有列。
2)reviews.iloc[:,:] —整个DataFrame。
3)reviews.iloc[5:,5:]—从位置5开始的行,从位置开始的列5。
4)reviews.iloc[:,0] —第一列,以及该列的所有行。
5)reviews.iloc[9,:] —第十行,以及该行的所有列。
按位置索引与NumPy索引非常相似。如果您想了解更多信息,可以阅读大家的NumPy教程。现在大家知道了如何按位置索引,让大家删除第一列,该列没有任何有用的信息:
在Pandas中使用标签在Python中建立索引
既然大家知道如何按位置检索行和列,那么值得研究使用DataFrames的另一种主要方法,即按标签检索行和列。与NumPy相比,Pandas的主要优势在于,每一列和每一行都有一个标签。可以处理列的位置,但是很难跟踪哪个数字对应于哪个列。
大家可以使用pandas.DataFrame.loc方法处理标签,该方法允许大家使用标签而不是位置进行索引。大家可以reviews使用以下loc方法显示前五行:
上面的内容实际上与并没有太大的不同reviews.iloc[0:5,:]。这是因为尽管行标签可以采用任何值,但大家的行标签与位置完全匹配。您可以在上方表格的最左侧看到行标签(它们以粗体显示)。您还可以通过访问DataFrame 的index属性来查看它们。大家将显示的行索引reviews:
reviews.index
Int64Index([0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55, 56, 57, 58, 59, 60, 61, 62, 63, 64, 65, 66, 67, 68, 69, 70, 71, 72, 73, 74, 75, 76, 77, 78, 79, 80, 81, 82, 83, 84, 85, 86, 87, 88, 89, 90, 91, 92, 93, 94, 95, 96, 97, 98, 99, …], dtype=’int64′)
不过,索引不一定总是与位置匹配。在下面的代码单元中,大家将:
a.获取行10至行20的reviews,并分配结果some_reviews。
b.显示的第一5行some_reviews。
如上所示,在中some_reviews,行索引始于,10结束于20。因此,尝试loc使用小于10或大于的数字20将导致错误:
some_reviews.loc[9:21,:]
如前所述,在使用数据时,列标签可以使工作变得更加轻松。大家可以在loc方法中指定列标签,以按标签而不是按位置检索列。
大家还可以通过传入列表来一次指定多个列:
Pandas系列对象
大家可以通过几种不同的方式在Pandas中检索单个列。到目前为止,大家已经看到了两种语法:
1)reviews.iloc[:,1] —将检索第二列。
2)reviews.loc[:,”score_phrase”] —还将检索第二列。
还有第三种甚至更容易的方法来检索整列。大家可以在方括号中指定列名称,例如使用字典:
大家还可以通过以下方法使用列列表:
当大家检索单个列时,实际上是在检索Pandas Series对象。DataFrame存储表格数据,而Series存储数据的单列或单行。
大家可以验证单个列是否为系列:
大家可以手动创建系列以更好地了解其工作原理。要创建一个Series,大家在实例化它时将一个列表或NumPy数组传递给Series对象:
系列可以包含任何类型的数据,包括混合类型。在这里,大家创建一个包含字符串对象的系列:
在Pandas中创建一个DataFrame
大家可以通过将多个Series传递到DataFrame类中来创建DataFrame。在这里,大家传入刚刚创建的两个Series对象,
s1作为第一行,s2作为第二行:
大家还可以使用列表列表完成同样的事情。每个内部列表在结果DataFrame中被视为一行:
大家可以在创建DataFrame时指定列标签:
以及行标签(索引):
还请注意,不需要缩进和单独的行。大家已经以这种方式编写了代码,以使其更易于解析,但是您经常会遇到将它们全部写成一行的情况。例如,以下代码将产生与大家在本段上方的表中看到的结果完全相同的结果:
无论如何,添加标签后,便可以使用它们对DataFrame进行索引:
columns如果将字典传递给DataFrame构造函数,则可以跳过指定关键字参数的操作。这将自动设置列名称:
PandasDataFrame方法
如前所述,pandas DataFrame中的每一列都是Series对象:
大家可以在Series对象上调用与在DataFrame上可以调用的大多数相同的方法,包括head:
Pandas Series和DataFrames还具有其他使计算更简单的方法。例如,大家可以使用pandas.Series.mean方法来查找Series的均值:
大家还可以调用类似的pandas.DataFrame.mean方法,该方法默认情况下将查找DataFrame中每个数字列的平均值:
大家可以修改axis关键字参数以mean计算每行或每列的平均值。默认情况下,axis等于0,并将计算每列的平均值。大家还可以将其设置1为计算每行的平均值。请注意,这只会计算每行中数值的平均值:
reviews.mean(axis=1)
0 510.500
1 510.500
2 510.375
3 510.125
4 510.125
5 509.750
6 508.750
7 510.250
8 508.750
9 509.750
10 509.875
11 509.875
12 509.500
13 509.250
14 509.250
…
18610 510.250
18611 508.700
18612 509.200
18613 508.000
18614 515.050
18615 515.050
18616 508.375
18617 508.600
18618 515.025
18619 514.725
18620 514.650
18621 515.000
18622 513.950
18623 515.000
18624 515.000
Length: 18625, dtype: float64
Series和DataFrames上有很多类似的方法mean。这里有一些方便的东西:
1)pandas.DataFrame.corr —查找DataFrame中各列之间的相关性。
2)pandas.DataFrame.count —计算每个DataFrame列中非空值的数量。
3)pandas.DataFrame.max —在每一列中找到最大值。
4)pandas.DataFrame.min —查找每一列中的最小值。
5)pandas.DataFrame.median —查找每列的中位数。
6)pandas.DataFrame.std —查找每列的标准偏差。
例如,大家可以使用该corr方法查看是否有任何列与关联score。这可以告诉大家最近发布的游戏获得了更高的评价(release_year),还是在年底之前发布的游戏获得了更好的评分(release_month):
正如大家在上面看到的那样,大家的数字列都没有与关联score,因此大家知道发布时间与评论评分并不线性相关。
DataFrame Math与Pandas
大家还可以使用pandas在Python中的Series或DataFrame对象上执行数学运算。例如,大家可以将score列中的每个值除以2以将刻度从0– 切换10到0– 5:
reviews[“score”] / 2
0 4.50
1 4.50
2 4.25
3 4.25
4 4.25
5 3.50
6 1.50
7 4.50
8 1.50
9 3.50
10 3.75
11 3.75
12 3.50
13 4.50
14 4.50
…
18610 3.00
18611 2.90
18612 3.90
18613 4.00
18614 4.60
18615 4.60
18616 3.75
18617 4.20
18618 4.55
18619 3.95
18620 3.80
18621 4.50
18622 2.90
18623 5.00
18624 5.00
Name: score, Length: 18625, dtype: float64
所有常用的数学运算符在Python的工作,如+,-,*,/,和^将在系列或DataFrames大Pandas的工作,并且将适用于每一个元素在一个数据帧或一个系列。
Pandas中的布尔索引
现在大家已经了解了一些Pandas的基础知识,让大家继续进行分析。大家前面看到的,平均都在值的score列reviews左右7。如果大家想找到所有得分都高于平均水平的游戏怎么办?
大家可以先进行比较。比较会将“系列”中的每个值与指定值进行比较,然后生成一个“系列”,其中包含表示比较状态的布尔值。使用Python Pandas分析视频游戏数据https://www.aaa-cg.com.cn/data/2310.html例如,大家可以看到哪些行的score值大于7:
score_filter = reviews[“score”] > 7
score_filter
0 True
1 True
2 True
3 True
4 True
5 False
6 False
7 True
8 False
9 False
10 True
11 True
12 False
13 True
14 True…
18610 False
18611 False
18612 True
18613 True
18614 True
18615 True
18616 True
18617 True
18618 True
18619 True
18620 True
18621 True
18622 False
18623 True
18624 True
Name: score, Length: 18625, dtype: bool
有了布尔系列后,大家可以使用它来选择DataFrame中该系列包含value的行True。所以,大家只能选择行reviews,其中score大于7:
可以使用多个条件进行过滤。假设大家要查找针对发行Xbox One的得分超过的游戏7。在下面的代码中,大家:
a.设置两个条件的过滤器:
1)检查是否score大于7。
2)检查是否platform相等Xbox One
b.应用过滤器以reviews仅获取所需的行。
c.使用head方法打印的第一5行filtered_reviews。
在使用多个条件进行过滤时,将每个条件放在括号中并用一个&符号(&)分隔是很重要的。
Pandas图
现在大家知道如何过滤,大家可以创建图以观察的回顾分布Xbox One与的回顾分布PlayStation 4。这将帮助大家确定哪个控制台具有更好的游戏。
大家可以通过直方图来做到这一点,该直方图将绘制不同得分范围内的频率。大家可以使用pandas.DataFrame.plot方法为每个控制台制作一个直方图。该方法利用幕后的流行Python绘图库matplotlib生成美观的绘图。
该plot方法默认为绘制折线图。大家需要传入关键字参数kind=”hist”来绘制直方图。在下面的代码中,大家:
a.致电%matplotlib inline以在Jupyter笔记本中设置绘图。
b.过滤reviews以仅包含有关的数据Xbox One。
c.绘制score列。
大家也可以对PS4:
从大家的直方图中可以看出,与相比,PlayStation 4具有更高评级的游戏Xbox One。
显然,这只是冰山一角,涉及到大家可以用来分析该数据集的潜在方向,但大家已经有了一个很好的开端:大家已经使用Python和pandas导入了数据集,并学会了使用各种不同的索引方法选择大家想要的数据点,并进行了一些快速的探索性数据分析,以回答大家开始时遇到的问题。
https://www.toutiao.com/i6832518344541733380/
powerdesigner与mysql,mysql登录空密码,linux下mysql的配置,Mysql查询表最后数据,mysql sum 除法,mysql的wait timeout生成随机数python,python 并发库,python可变参数个数,python保存图像,python取出复数虚部,ml python,python scpi,python 本地环境,python 程序技术,python操作运算,linux python脚本生成随机数python,python 并发库,python可变参数个数,python保存图像,python取出复数虚部,ml python,python scpi,python 本地环境,python 程序技术,python操作运算,linux python脚本生成随机数python,python 并发库,python可变参数个数,python保存图像,python取出复数虚部,ml python,python scpi,python 本地环境,python 程序技术,python操作运算,linux python脚本