欧美一区二区三区,国内熟女精品熟女A片视频小说,日本av网,小鲜肉男男GAY做受XXX网站

mysql 根據分數查詢,Pandas模塊讀取各類型文件

錢瀠龍2年前25瀏覽0評論
mysql 根據分數查詢,Pandas模塊讀取各類型文件?

Python的pandas庫是使Python成為用于數據分析的出色編程語言的一件事。Pandas使導入,分析和可視化數據變得更加容易。它建立在NumPy和matplotlib之類的軟件包的基礎上,使您可以方便地進行大部分數據分析和可視化工作。

在此Python數據科學教程中,我們將使用Eric Grinstein抓取的數據,使用Pandas分析來自流行的視頻游戲評論網站IGN的視頻游戲評論。哪個主機贏得了“控制臺大戰”(就游戲的審查而言)?該數據集將幫助我們找出答案。

當我們分析視頻游戲評論時,我們將了解關鍵的Pandas概念,例如索引。您可以繼續進行下去,并在我們的許多其他Python教程之一中或通過注冊Python Pandas課程來了解有關Python和Pandas的更多信息。我們的許多其他數據科學課程也都使用Pandas。

謹記一下,本教程使用Python 3.5編寫,并使用Jupyter Notebook構建。您可能使用的是Python,pandas和Jupyter的更新版本,但結果應該基本相同。

用Pandas導入數據

如果您正在使用本教程,則需要下載數據集,您可以在此處進行操作。

我們將采取的第一步是讀取數據。數據以逗號分隔的值或csv文件存儲,其中每行用換行分隔,每列用逗號(,)分隔。這是ign.csv文件的前幾行:

如您在上方看到的,文件中的每一行代表一個游戲,該游戲已經過IGN審查。這些列包含有關該游戲的信息:

1)score_phrase— IGN如何用一個詞形容游戲。這鏈接到它收到的分數。

2)title -游戲名稱。

3)url —您可以在其中查看完整評論的URL。

4)platform -審查游戲的平臺(PC,PS4等)。

5)score—游戲的得分,從1.0到10.0。

6)genre —游戲類型。

7)editors_choice- N如果游戲不是編輯選擇的Y話,那么是。這與得分息息相關。

8)release_year -游戲發布的年份。

9)release_month -游戲發布的月份。

10)release_day -游戲發布的那天。

還有一個前導列,其中包含行索引值。我們可以放心地忽略此列,但稍后將深入探討哪些索引值。

為了在Python和pandas中有效地處理數據,我們需要將csv文件讀取到Pandas DataFrame中。DataFrame是表示和處理表格數據的一種方式,表格數據是表格形式的數據,例如電子表格。表格數據具有行和列的格式,就像我們的csv文件一樣,但是如果我們可以將其作為表格查看,則對我們來說更易于閱讀和排序。

為了讀入數據,我們需要使用pandas.read_csv函數。此函數將接收一個csv文件并返回一個DataFrame。以下代碼將:

a.導入pandas庫。我們將其重命名為,pd以便更快地輸入。這是數據分析和數據科學中的標準約定,您經常會看到導入的Pandas就像pd其他人的代碼一樣。

b.讀ign.csv入一個DataFrame,并將結果分配給一個名為的新變量,reviews以便我們可以reviews用來引用我們的數據。

讀完DataFrame后,以更直觀的方式看一下我們所獲得的內容將很有幫助。Pandas方便地為我們提供了兩種方法,可以快速地將數據打印到表中。這些功能是:

1)DataFrame.head()—打印DataFrame的前N行,其中N是您作為參數傳遞給函數的數字,即DataFrame.head(7)。如果不傳遞任何參數,則默認值為5。

2)DataFrame.tail()—打印DataFrame的最后N行。同樣,默認值為5。

我們將使用該head方法查看其中的內容reviews:

我們還可以訪問pandas.DataFrame.shape屬性,以查看以下行reviews:

如我們所見,所有內容均已正確讀取-我們有18,625行和11列。

與類似的NumPy這樣的Python軟件包相比,使用Pandas的一大優勢是Pandas允許我們擁有具有不同數據類型的列。在我們的數據集中,reviews我們有存儲浮點值(如)score,字符串值(如score_phrase)和整數(如)的列release_year,因此在此處使用NumPy會很困難,但Pandas和Python可以很好地處理它。

現在我們已經正確地讀取了數據,讓我們開始建立索引reviews以獲取所需的行和列。

用Pandas索引DataFrames

之前,我們使用了該head方法來打印的第一5行reviews。我們可以使用pandas.DataFrame.iloc方法完成同樣的事情。該iloc方法允許我們按位置檢索行和列。為此,我們需要指定所需行的位置以及所需列的位置。下面的代碼將reviews.head()通過選擇行0到5,以及數據集中的所有列來復制我們的結果:

讓我們更深入地研究我們的代碼:我們指定了想要的rows 0:5。這意味著我們想要從position 0到(但不包括)position的行5。

第一行被認為是在位置0,所以選擇行0:5給了我們行的位置0,1,2,3,和4。我們也需要所有列,并且使用快捷方式來選擇它們。它的工作方式是這樣的:如果我們不喜歡第一個位置值,例如:5,那是假設我們的意思0。如果我們忽略了最后一個位置值(如)0:,則假定我們是指DataFrame中的最后一行或最后一列。我們需要所有列,因此只指定了一個冒號(:),沒有任何位置。這使我們的列從0到最后一列。以下是一些索引示例以及結果:

1)reviews.iloc[:5,:]—第一5行,以及這些行的所有列。

2)reviews.iloc[:,:] —整個DataFrame。

3)reviews.iloc[5:,5:]—從位置5開始的行,從位置開始的列5。

4)reviews.iloc[:,0] —第一列,以及該列的所有行。

5)reviews.iloc[9,:] —第十行,以及該行的所有列。

按位置索引與NumPy索引非常相似。如果您想了解更多信息,可以閱讀我們的NumPy教程。現在我們知道了如何按位置索引,讓我們刪除第一列,該列沒有任何有用的信息:

在Pandas中使用標簽在Python中建立索引

既然我們知道如何按位置檢索行和列,那么值得研究使用DataFrames的另一種主要方法,即按標簽檢索行和列。與NumPy相比,Pandas的主要優勢在于,每一列和每一行都有一個標簽。可以處理列的位置,但是很難跟蹤哪個數字對應于哪個列。

我們可以使用pandas.DataFrame.loc方法處理標簽,該方法允許我們使用標簽而不是位置進行索引。我們可以reviews使用以下loc方法顯示前五行:

上面的內容實際上與并沒有太大的不同reviews.iloc[0:5,:]。這是因為盡管行標簽可以采用任何值,但我們的行標簽與位置完全匹配。您可以在上方表格的最左側看到行標簽(它們以粗體顯示)。您還可以通過訪問DataFrame 的index屬性來查看它們。我們將顯示的行索引reviews:

reviews.index

Int64Index([0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55, 56, 57, 58, 59, 60, 61, 62, 63, 64, 65, 66, 67, 68, 69, 70, 71, 72, 73, 74, 75, 76, 77, 78, 79, 80, 81, 82, 83, 84, 85, 86, 87, 88, 89, 90, 91, 92, 93, 94, 95, 96, 97, 98, 99, ...], dtype='int64')

不過,索引不一定總是與位置匹配。在下面的代碼單元中,我們將:

a.獲取行10至行20的reviews,并分配結果some_reviews。

b.顯示的第一5行some_reviews。

如上所示,在中some_reviews,行索引始于,10結束于20。因此,嘗試loc使用小于10或大于的數字20將導致錯誤:

some_reviews.loc[9:21,:]

如前所述,在使用數據時,列標簽可以使工作變得更加輕松。我們可以在loc方法中指定列標簽,以按標簽而不是按位置檢索列。

我們還可以通過傳入列表來一次指定多個列:

Pandas系列對象

我們可以通過幾種不同的方式在Pandas中檢索單個列。到目前為止,我們已經看到了兩種語法:

1)reviews.iloc[:,1] —將檢索第二列。

2)reviews.loc[:,"score_phrase"] —還將檢索第二列。

還有第三種甚至更容易的方法來檢索整列。我們可以在方括號中指定列名稱,例如使用字典:

我們還可以通過以下方法使用列列表:

當我們檢索單個列時,實際上是在檢索Pandas Series對象。DataFrame存儲表格數據,而Series存儲數據的單列或單行。

我們可以驗證單個列是否為系列:

我們可以手動創建系列以更好地了解其工作原理。要創建一個Series,我們在實例化它時將一個列表或NumPy數組傳遞給Series對象:

系列可以包含任何類型的數據,包括混合類型。在這里,我們創建一個包含字符串對象的系列:

在Pandas中創建一個DataFrame

我們可以通過將多個Series傳遞到DataFrame類中來創建DataFrame。在這里,我們傳入剛剛創建的兩個Series對象,

s1作為第一行,s2作為第二行:

我們還可以使用列表列表完成同樣的事情。每個內部列表在結果DataFrame中被視為一行:

我們可以在創建DataFrame時指定列標簽:

以及行標簽(索引):

還請注意,不需要縮進和單獨的行。我們已經以這種方式編寫了代碼,以使其更易于解析,但是您經常會遇到將它們全部寫成一行的情況。例如,以下代碼將產生與我們在本段上方的表中看到的結果完全相同的結果:

無論如何,添加標簽后,便可以使用它們對DataFrame進行索引:

columns如果將字典傳遞給DataFrame構造函數,則可以跳過指定關鍵字參數的操作。這將自動設置列名稱:

PandasDataFrame方法

如前所述,pandas DataFrame中的每一列都是Series對象:

我們可以在Series對象上調用與在DataFrame上可以調用的大多數相同的方法,包括head:

Pandas Series和DataFrames還具有其他使計算更簡單的方法。例如,我們可以使用pandas.Series.mean方法來查找Series的均值:

我們還可以調用類似的pandas.DataFrame.mean方法,該方法默認情況下將查找DataFrame中每個數字列的平均值:

我們可以修改axis關鍵字參數以mean計算每行或每列的平均值。默認情況下,axis等于0,并將計算每列的平均值。我們還可以將其設置1為計算每行的平均值。請注意,這只會計算每行中數值的平均值:

reviews.mean(axis=1)

0 510.500

1 510.500

2 510.375

3 510.125

4 510.125

5 509.750

6 508.750

7 510.250

8 508.750

9 509.750

10 509.875

11 509.875

12 509.500

13 509.250

14 509.250

...

18610 510.250

18611 508.700

18612 509.200

18613 508.000

18614 515.050

18615 515.050

18616 508.375

18617 508.600

18618 515.025

18619 514.725

18620 514.650

18621 515.000

18622 513.950

18623 515.000

18624 515.000

Length: 18625, dtype: float64

Series和DataFrames上有很多類似的方法mean。這里有一些方便的東西:

1)pandas.DataFrame.corr —查找DataFrame中各列之間的相關性。

2)pandas.DataFrame.count —計算每個DataFrame列中非空值的數量。

3)pandas.DataFrame.max —在每一列中找到最大值。

4)pandas.DataFrame.min —查找每一列中的最小值。

5)pandas.DataFrame.median —查找每列的中位數。

6)pandas.DataFrame.std —查找每列的標準偏差。

例如,我們可以使用該corr方法查看是否有任何列與關聯score。這可以告訴我們最近發布的游戲獲得了更高的評價(release_year),還是在年底之前發布的游戲獲得了更好的評分(release_month):

正如我們在上面看到的那樣,我們的數字列都沒有與關聯score,因此我們知道發布時間與評論評分并不線性相關。

DataFrame Math與Pandas

我們還可以使用pandas在Python中的Series或DataFrame對象上執行數學運算。例如,我們可以將score列中的每個值除以2以將刻度從0– 切換10到0– 5:

reviews["score"] / 2

0 4.50

1 4.50

2 4.25

3 4.25

4 4.25

5 3.50

6 1.50

7 4.50

8 1.50

9 3.50

10 3.75

11 3.75

12 3.50

13 4.50

14 4.50

...

18610 3.00

18611 2.90

18612 3.90

18613 4.00

18614 4.60

18615 4.60

18616 3.75

18617 4.20

18618 4.55

18619 3.95

18620 3.80

18621 4.50

18622 2.90

18623 5.00

18624 5.00

Name: score, Length: 18625, dtype: float64

所有常用的數學運算符在Python的工作,如+,-,*,/,和^將在系列或DataFrames大Pandas的工作,并且將適用于每一個元素在一個數據幀或一個系列。

Pandas中的布爾索引

現在我們已經了解了一些Pandas的基礎知識,讓我們繼續進行分析。我們前面看到的,平均都在值的score列reviews左右7。如果我們想找到所有得分都高于平均水平的游戲怎么辦?

我們可以先進行比較。比較會將“系列”中的每個值與指定值進行比較,然后生成一個“系列”,其中包含表示比較狀態的布爾值。使用Python Pandas分析視頻游戲數據https://www.aaa-cg.com.cn/data/2310.html例如,我們可以看到哪些行的score值大于7:

score_filter = reviews["score"] > 7

score_filter

0 True

1 True

2 True

3 True

4 True

5 False

6 False

7 True

8 False

9 False

10 True

11 True

12 False

13 True

14 True...

18610 False

18611 False

18612 True

18613 True

18614 True

18615 True

18616 True

18617 True

18618 True

18619 True

18620 True

18621 True

18622 False

18623 True

18624 True

Name: score, Length: 18625, dtype: bool

有了布爾系列后,我們可以使用它來選擇DataFrame中該系列包含value的行True。所以,我們只能選擇行reviews,其中score大于7:

可以使用多個條件進行過濾。假設我們要查找針對發行Xbox One的得分超過的游戲7。在下面的代碼中,我們:

a.設置兩個條件的過濾器:

1)檢查是否score大于7。

2)檢查是否platform相等Xbox One

b.應用過濾器以reviews僅獲取所需的行。

c.使用head方法打印的第一5行filtered_reviews。

在使用多個條件進行過濾時,將每個條件放在括號中并用一個&符號(&)分隔是很重要的。

Pandas圖

現在我們知道如何過濾,我們可以創建圖以觀察的回顧分布Xbox One與的回顧分布PlayStation 4。這將幫助我們確定哪個控制臺具有更好的游戲。

我們可以通過直方圖來做到這一點,該直方圖將繪制不同得分范圍內的頻率。我們可以使用pandas.DataFrame.plot方法為每個控制臺制作一個直方圖。該方法利用幕后的流行Python繪圖庫matplotlib生成美觀的繪圖。

該plot方法默認為繪制折線圖。我們需要傳入關鍵字參數kind="hist"來繪制直方圖。在下面的代碼中,我們:

a.致電%matplotlib inline以在Jupyter筆記本中設置繪圖。

b.過濾reviews以僅包含有關的數據Xbox One。

c.繪制score列。

我們也可以對PS4:

從我們的直方圖中可以看出,與相比,PlayStation 4具有更高評級的游戲Xbox One。

顯然,這只是冰山一角,涉及到我們可以用來分析該數據集的潛在方向,但我們已經有了一個很好的開端:我們已經使用Python和pandas導入了數據集,并學會了使用各種不同的索引方法選擇我們想要的數據點,并進行了一些快速的探索性數據分析,以回答我們開始時遇到的問題。

https://www.toutiao.com/i6832518344541733380/