想学python进行数据分析,请问要学多久

想学python进行数据分析,请问要学多久,第1张

五个月左右的时间,这是培训的时间。如果自学的话,是个不确定的时间,但是可以稍加估算一下,会多花一倍时间。

主要有以下几个方向:

一、检查数据

Python中使用shape函数来查看数据表的维度,也就是行数和列数。你可以使用info函数查看数据表的整体信息,使用dtypes函数来返回数据格式。Isnull是Python中检验空值的函数,你可以对整个数据表进行检查,也可以单独对某一列进行空值检查,返回的结果是逻辑值,包含空值返回True,不包含则返回False。使用unique函数查看唯一值,使用Values函数用来查看数据表中的数值。

二、数据表清洗

Python中处理空值的方法比较灵活,可以使用Dropna函数用来删除数据表中包含空值的数据,也可以使用fillna函数对空值进行填充。Python中dtype是查看数据格式的函数,与之对应的是astype函数,用来更改数据格式,Rename是更改列名称的函数,drop_duplicates函数删除重复值,replace函数实现数据替换。

3、数据预处理

数据预处理是对清洗完的数据进行整理以便后期的统计和分析工作,主要包括数据表的合并、排序、数值分列、数据分组及标记等工作。在Python中可以使用merge函数对两个数据表进行合并,合并的方式为inner,此外还有left、right和outer方式。使用ort_values函数和sort_index函数完成排序,使用where函数完成数据分组,使用split函数实现分列。

4、数据提取

主要是使用三个函数:loc、iloc和ix,其中loc函数按标签值进行提取,iloc按位置进行提取,ix可以同时按标签和位置进行提取。除了按标签和位置提起数据以外,还可以按具体的条件进行数据,比如使用loc和isin两个函数配合使用,按指定条件对数据进行提取。

5、数据筛选汇总

Python中使用loc函数配合筛选条件来完成筛选功能,配合sum和 count函数还能实现excel中sumif和countif函数的功能。Python中使用的主要函数是groupby和pivot_table。groupby是进行分类汇总的函数,使用方法很简单,制定要分组的列名称就可以,也可以同时制定多个列名称,groupby 按列名称出现的顺序进行分组。

聚合函数为每个组返回单个聚合值。当创建了分组(group by)对象,就可以对分组数据执行多个聚合 *** 作。

一个比较常用的是通过聚合或等效的agg方法聚合

运行之后得到以下结果

链接:https://panbaiducom/s/1FJZAznKSbwv-X52AM7uSfg

提取码:7234

炼数成金:Python数据分析。Python是一种面向对象、直译式计算机程序设计语言。也是一种功能强大而完善的通用型语言,已经具有十多年的发展历史,成熟且稳定。Python 具有脚本语言中最丰富和强大的类库,足以支持绝大多数日常应用。 Python语法简捷而清晰,具有丰富和强大的类库。它常被昵称为胶水语言,它能够很轻松的把用其他语言制作的各种模块(尤其是C/C++)轻松地联结在一起。

课程将从Python的基本使用方法开始,一步步讲解,从ETL到各种数据分析方法的使用,并结合实例,让学员能从中借鉴学习。

课程目录:

Python基础

Python的概览——Python的基本介绍、安装与基本语法、变量类型与运算符

了解Python流程控制——条件、循环语句与其他语句

常用函数——函数的定义与使用方法、主要内置函数的介绍

做数据分析,首先你要知道有哪些数据分析的方法,然后才是用Python去调用这些方法

那Python有哪些库类是能做数据分析的,很多,pandas,sklearn等等

所以你首先要装一个anaconda套件,它包含了几乎所有的Python数据分析工具,

之后再学怎么分析。

 在介绍GROUP BY 和 HAVING 子句前 我们必需先讲讲sql语言中一种特殊的函数:聚合函数 例如SUM COUNT MAX AVG等 这些函数和其它函数的根本区别就是它们一般作用在多条记录上 SELECT SUM(population) FROM bbc

 这里的SUM作用在所有返回记录的population字段上 结果就是该查询只返回一个结果 即所有国家的总人口数

 通过使用GROUP BY 子句 可以让SUM 和 COUNT 这些函数对属于一组的数据起作用 当你指定 GROUP BY region 时 属于同一个region(地区)的一组数据将只能返回一行值 也就是说 表中所有除region(地区)外的字段 只能通过 SUM COUNT等聚合函数运算后返回一个值

 HAVING子句可以让我们筛选成组后的各组数据 WHERE子句在聚合前先筛选记录 也就是说作用在GROUP BY 子句和HAVING子句前

 而 HAVING子句在聚合后对组记录进行筛选

 让我们还是通过具体的实例来理解GROUP BY 和 HAVING 子句 还采用第三节介绍的bbc表

 SQL实例:

 一 显示每个地区的总人口数和总面积: SELECT region SUM(population) SUM(area)FROM bbcGROUP BY region

 先以region把返回记录分成多个组 这就是GROUP BY的字面含义 分完组后 然后用聚合函数对每组中的不同字段(一或多条记录)作运算

 二 显示每个地区的总人口数和总面积 仅显示那些面积超过 的地区 SELECT region SUM(population) SUM(area)FROM bbcGROUP BY regionHAVING SUM(area)>

 在这里 我们不能用where来筛选超过 的地区 因为表中不存在这样一条记录

lishixinzhi/Article/program/Oracle/201311/18006

要看你按什么来统计总数了,如果只是单纯的对某一列进行统计总数,不用加group by。 如果统计的这一列数据有重复行 就要加group by。 使用聚合函数以后如果你select 中除了有聚合函数以外还有别的字段,就要对那个字段进行分组的

欢迎分享,转载请注明来源:内存溢出

原文地址: https://outofmemory.cn/langs/11668913.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-05-17
下一篇 2023-05-17

发表评论

登录后才能评论

评论列表(0条)

保存