第一、检查数据表
Python中使用shape函数来查看数据表的维度，也就是行数和列数。你可以使用info函数查看数据表的整体信息，使用dtypes函数来返回数据格式。Lsnull是Python中检查空置的函数，你可以对整个数据进行检查，也可以单独对某一列进行空置检查，返回的结果是逻辑值，包括空置返回True，不包含则返回False。使用unique函数查看唯一值，使用Values函数用来查看数据表中的数值。
第二，数据表清洗
Python中处理空值的方法比较灵活，可以使用Dropna函数用来删除数据表中包括空值的数据，也可以使用fillna函数对空值进行填充。Python中dtype是查看数据格式的函数，与之对应的是asstype函数，用来更改数据格式，Rename是更改名称的函数，drop_duplicate函数函数重复值，replace函数实现数据转换。
第三，数据预处理
数据预处理是对清洗完的数据进行整理以便后期统计和分析工作，主要包括数据表的合并、排序、数值分列、数据分组以及标记等工作。在Python中可以使用merge函数对两个数据表进行合并，合并的方式为inner，此外还有left、right和outer方式。使用ort_values函数和sort_index函数完成排序，使用where函数完成数据分组，使用split函数实现分列。
第四，数据提取
主要是使用三个函数：loc、iloc和ix，其中loc函数按标准值进行提取，iloc按位置进行提取，ix可以同时按标签和位置进行提取。除了按标签和位置提取数据意外，还可以按照具体的条件进行提取。
第五，数据筛选汇总
Python中使用loc函数配合筛选条件来完成筛选功能，配合sum和count函数还能实现Excel中sumif和countif函数的功能。Python中使用的主要函数是groupby和pivot_table。
究其原因，主要有以下几点：
①Python的语法简单，代码可读性高，易于上手，有利于初学者学习当我们处理数据时，我们希望使数据数字化并将其转换为计算机可以操作的数字形式。我们可以直接使用一个行列表推导来完成，这非常简单。
②Python在数据分析和交互，探索性计算和数据可视化方面拥有非常成熟的库和活跃的社区，这使Python成为数据任务处理的重要解决方案。在数据处理和分析方面，Python具有numpy，pandas，Matplotlib，scikit-learn，IPython和其他出色的库和工具，尤其是pandas在数据处理方面具有绝对优势。
③Python具有很强的通用编程能力，这与别的编程语言不同。Python不仅在数据分析方面功能强大，而且在爬虫，web，运维甚至游戏等领域也发挥着非常重要的作用。公司只需一项技术即可完成所有服务，这有利于业务整合并可以提高工作效率。
④Python是人工智能的首选编程语言。在人工智能时代，Python已成为最受欢迎的编程语言。得益于Python语法简洁，丰富的库和社区，大多数深度学习框架都优先支持Python语言。
利用python进行数据分析
链接: https://pan.baidu.com/s/15VdW4dcuPuIUEPrY3RehtQ
?pwd=3nfn 提取码: 3nfn本书也可以作为利用Python实现数据密集型应用的科学计算实践指南。本书适合刚刚接触Python的分析人员以及刚刚接触科学计算的Python程序员。
