|
大數(shù)據(jù)文摘出品 來源：medium 編譯：張大筆茹 十年前，你說你是做數(shù)據(jù)的，大家的反應就是——用Excel做做表。 現(xiàn)在，要成為一個合格的數(shù)據(jù)分析師，你說你不會Python，大概率會被江湖人士恥笑。 Medium上一位博主就分享了他一步步用Python替換掉十年前的“老情人”Excel的過程，一起來學習一下吧！ 在Excel成為我的“初戀”十年之后，是時候找一個更好的“另一半”了，在這個技術日新月異的時代，更好更薄更輕更快處理數(shù)據(jù)的選擇就在身邊！我希望用Python取代幾乎所有的excel功能，無論是簡單的篩選還是相對復雜的創(chuàng)建并分析數(shù)據(jù)和數(shù)組。我將展示從簡單到復雜的計算任務。強烈建議你跟著我一起做這些步驟，以便更好地理解它們。擬寫此文的靈感來自于人人可訪問的免費教程網(wǎng)站，我曾認真閱讀并一直嚴格遵守這篇Python文檔，鏈接如下，相信你也會從該網(wǎng)站中找到很多干貨。https://github.com/ank0409/Ditching-Excel-for-Python一、將excel文件導入Panda DataFrame初始步驟是將excel文件導入DataFrame，以便我們執(zhí)行所有任務。我將演示支持xls和xlsx文件擴展名的Pandas的read_excel方法。read_csv與read_excel相同，就不做深入討論了，但我會分享一個例子。盡管read_excel方法包含數(shù)百萬個參數(shù)，但我們只討論那些在日常操作中最常見的那些。我們使用Iris樣本數(shù)據(jù)集，出于教育目的，該數(shù)據(jù)集可在線免費使用。請按照以下鏈接下載數(shù)據(jù)，并將其放在與存儲Python文件的同一文件夾中。https://archive.ics./ml/datasets/iris 可以使用以下代碼將電子表格數(shù)據(jù)導入Python：pandas.read_excel(io, sheet_name=0, header=0, names=None, index_col=None, parse_cols=None, usecols=None, squeeze=False, dtype=None, engine=None, converters=None, true_values=None, false_values=None, skiprows=None, nrows=None, na_values=None, keep_default_na=True, verbose=False, parse_dates=False, date_parser=None, thousands=None, comment=None, skip_footer=0, skipfooter=0, convert_float=True, mangle_dupe_cols=True, **kwds)
有大量可用的參數(shù)，我們來看一下最常用的一些參數(shù)。2、一些重要的Pandas read_excel選項如果默認使用本地文件的路徑，用“\”表示，接受用“/”表示，更改斜杠可以將文件添加到Python文件所在的文件夾中。如果需要有關上述內容的詳細說明，請參閱以下文章。https:///@ageitgey/Python-3-quick-tip-the-easy-way-to-deal-with-file-paths-on-windows-mac-and-linux-11a072b58d5f 默認情況下，文件中的第一個工作表將按原樣導入到數(shù)據(jù)框中。使用sheet_name參數(shù)，可以明確要導入的工作表。文件中的第一個表默認值為0。可以用工作表的名字，或一個整數(shù)值來當作工作表的index。除非明確提到，否則索引列會添加到DataFrame中，默認情況下從0開始。使用index_col參數(shù)可以操作數(shù)據(jù)框中的索引列，如果將值0設置為none，它將使用第一列作為index。默認的read_excel參數(shù)假定第一行是列表名稱，會自動合并為DataFrame中的列標簽。使用skiprows和header之類的函數(shù)，我們可以操縱導入的DataFrame的行為。使用usecols參數(shù)，可以指定是否在DataFrame中導入特定的列。這只是個開始，并不是所有的功能，但已足夠你“嘗鮮”了。現(xiàn)在我們有了DataFrame，可以從多個角度查看數(shù)據(jù)了。Pandas有很多我們可以使用的功能，接下來將使用其中一些來看下我們的數(shù)據(jù)集。查看第一行或最后五行。默認值為5，也可以自定義參數(shù)。查看DataFrame的數(shù)據(jù)屬性總結：6、查看DataFrame中的數(shù)據(jù)類型描述性報告是關于數(shù)據(jù)子集和聚合的，當需要初步了解數(shù)據(jù)時，通常使用過濾器來查看較小的數(shù)據(jù)集或特定的列，以便更好的理解數(shù)據(jù)。Python提供了許多不同的方法來對DataFrame進行分割，我們將使用它們中的幾個來了解它是如何工作的。這里使用的方法是loc函數(shù)，其中我們可以指定以冒號分隔的起始行和結束行。注意，索引從0開始而不是1。輸入應為列一個表，此方法相當于excel中的高級過濾器功能：如果想要用特定值查看整個DataFrame，可以使用drop_duplicates函數(shù)：描述性統(tǒng)計，總結數(shù)據(jù)集分布的集中趨勢，分散程度和正態(tài)分布程度，不包括NaN值：輸出結果是一個系列。稱為單列數(shù)據(jù)透視表：統(tǒng)計每列或每行的非NA單元格的數(shù)量：8、多條件求和，即Excel中的Sumif函數(shù)13、Groupby：即Excel中的小計函數(shù)六、DataFrame中的數(shù)據(jù)透視表功能誰會不喜歡Excel中的數(shù)據(jù)透視表呢？它是分析數(shù)據(jù)的最佳方式，可以快速瀏覽信息，使用超級簡單的界面分割數(shù)據(jù)，繪制圖表，添加計算列等。現(xiàn)在沒有了工作界面，必須用編寫代碼的方式來輸出結果，且沒有生成圖表功能，但需要我們充分理解數(shù)據(jù)透視表的精華。簡單的數(shù)據(jù)透視表，顯示SepalWidth的總和，行列中的SepalLength和列標簽中的名稱。用fill_value參數(shù)將空白替換為0：可以使用dictionary函數(shù)進行單獨計算，也可以多次計算值：Excel中的vlookup是一個神奇的功能，是每個人在學習如何求和之前就想要學習的。會用vlookup是很迷人的，因為輸出結果時像變魔術一樣?？梢苑浅Ｗ孕诺卣f它是電子表格上計算的每個數(shù)據(jù)的支柱。由于Pandas中沒有“Vlookup”函數(shù)，因此Merge用與SQL相同的備用函數(shù)。有四種合并選項：left——使用左側DataFrame中的共享列并匹配右側DataFrame，N/A為NaN； right——使用右側DataFrame中的共享列并匹配左側DataFrame，N/A為NaN； inner——僅顯示兩個共享列重疊的數(shù)據(jù)。默認方法； outer——當左側或右側DataFrame中存在匹配時，返回所有記錄。
以上可能不是解釋這個概念的最好例子，但原理是一樣的。
|
