基于Pandas实现Excel文件的批量导入与分析
作者：马孝宗
来源：《现代信息科技》2020年第01期
摘; 要：文章以驻马店卷烟厂综合合格率分析为例，详细阐述了基于Pandas对Excel文件进行批量导入与分析的实现过程。该方法实现了Excel数据导入与分析的自动化，有效避免了由于数据量大、表格结构复杂造成的人工操作多、数据汇总难、易出错、效率低等难点，该程序也适用于CSV、SQL、TXT、HTML等文件的批量导入与分析，具有良好的实用性与推广价值。
关键词：Pandas;Excel;批量导入;数据分析
中图分类号：TP391; ; ; ;文献标识码：A 文章编号：2096-4706（2020）01-0060-03
Abstract：Combined with practical application，taking the comprehensive qualification rate analysis of Zhumadian Cigarette Factory as an example，this paper elaborates the implementation process of batch input and analysis of Excel files based on Pandas. This method realizes the automation of Excel data input and analysis，effectively avoids the difficulties of manual operation，data collection，error prone and low efficiency caused by large amount of data and complex table structure. The program is also suitable for batch input and analysis of CSV，SQL，TXT，HTML and other files，which has good practicability and promotion value.
Keywords：Pandas;Excel;batch input;data analysis
0; 引; 言
在企业数据分析的过程中，经常要对大量Excel表进行数据汇总，再计算出综合的指标。这些Excel表命名类似、结构一致，通常采用复制、粘贴的办法将各表数据粘贴至总表，再对总表进行数据核算。由于Excel表数量多、数据结构复杂，数据汇总的过程既占用统计人员大量的时间，又无法避免人工操作导致的数据缺失、数据错误、格式错误等，严重影响数据分析的及时性、准确性。为此，需要借助数据分析工具对Excel数据进行批量导入与分析。Pandas 是Python下最强大的数据分析和探索工具，提供了高效操作大型数据集所需的工具。Pandas 不仅提供了计数、筛选、排序、分组、绘图、方差分析、数据透视、数据合并与重塑等常用的统计分析功能，还提供了自定义函数功能以满足用户个性化的需求。下文介绍如何基于Pandas 实现Excel文件的批量导入与分析，提高企业数据分析的工作效率。