数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,将它们加以汇总和理解并消化,以求最 大化地开发数据的功能,发挥数据的作用。数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,将它们加以汇总和理解并消化,以求最 大化地开发数据的功能,发挥数据的作用。数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。
数据分析的数学基础在20世纪早期就已确立,但直到计算机的出现才使得实际操作成为可能,并使得数据分析得以推广。数据分析是数学与计算机科学相结合的产物。
从行业需求来看,互联网金融、O2O、数据服务、教育、电子商务、文化娱乐领域对数据分析师需求量相比其他行业更大。
不管是在企业还是社会,数据都已经开始扮演越来越重要的“角色”。在这种大势之下,数据分析思维已经不只是数据分析师的“专业”了,包括销售、市场、运营、策划、产品等等前端的职位都需要通过数据分析来帮助自己的工作,甚至连后台的财务、法务、人事等也开始需要通过数据分析来提升效率。可以这么说,如果你在企业之中工作,你未来会开始越来越多的和数据打交道,这个时候数据分析已经成为工作的必要条件。
1、数据分析入门
2、数据分析的意义
3、数据分析的流程控制
4、数据分析的思路与方法
数据分析入门——逻辑为先——XMIND
1、xmind简介与基本使用
2、学习方法课堂案例
3、滴答拼车实战演练
4、其他思维导图介绍
数据分析入门——专业展现——PPT
1、专业展现——PPT
2、基本简介
3、几个不得不说的真相
4、经验分享
5、实战动画
数据分析工具安装与环璄配置
1、Excel工具的安装、配置与环璄测试
2、Power BI工具的安装、配置与环璄测试
3、Tableau工具的安装、配置与环璄测试
4、MySQL数据库的安装、配置与环璄测试
5、SPSS数据挖掘工具安装、配置与环璄测试
6、SAS数据挖掘工具安装、配置与环璄测试
7、Python开发工具的安装、配置与开发环璄测试
Linux基础应用之大数据必知必会
1、虚拟机的安装配置
2、虚拟机网络配置
3、安装Linux
4、利用SSH连结Linux
5、Linux基础命令
6、Linux系统管理
数据分析的Python语言基础
1、python课程的目的
2、使用JupyterLab
3、python数据类型
4、元组、列表、字典
5、python分支结构
6、python字符串处理+随机函数
7、pthon循环结构
8、python面向过程函数操作
9、python面向对象
数据分析项目流程
问题界定
问题拆分
指标确定
数据收集
报告方案
趋势预测
数据分析
趋势预测
报告方案
问题的定义
边界:明确问题的边界
逻辑:确定业务的关键指标和逻辑
定性分析与定量分析
分析问题的模型 基于经典的模型-1:5W2H、SWORT、4P管理模型、CATWOE、STAR原则、波士顿5力模型
基于业务的模型-2:用户画像、销售影响因素、市场变化因素、AARRR流量模型、金定塔思考方法
数据清洗与处理
数据科学过程
数据清洗定义
数据清洗任务
数据清洗流程
数据清洗环境
数据清洗实例说明
数据标准化
数据格式与编码
数据清洗常用工具
数据清洗基本技术方法
数据抽取
数据转换与加载
内部数据的获取
产品数据
用户数据
行为数据
订单数据
外部公开数据
开放网站
政务公开数据
数据科学竞赛
数据交易平台
行业报告
指数平台
Web网站数据抓取
财经数据抓取
投资数据抓取
房产数据抓取
舆情数据抓取
娱乐数据抓取
新媒体数据抓取
实战-1:51job招聘网站数据抓取与清洗
实战-2:链家网数据的抓取与数据清洗
SQL基础操作
建库
建表
建约束
创建索引
添加、删除、修改数据
利用SQL完成数据的预处理
缺失值处理:对缺失数据行进行删除或填充
重复值处理:重复值的判断与删除
异常值处理:清除不必要的空格和极端、异常数据
利用SQL进行业务数据查询
利用SQL进行简单的业务数据查询
利用SQL完成复杂条件查询
利用多表关联完成复杂业务查询
利用嵌套子查询完成复杂业务数据分析
高级SQL分析
聚合、分组、排序
函数
行列切换
视图与存储过程
业务指标统计分析
业务数据表关联查询及查询
结果纵向融合
日常业务需求数据宽表构建
应用子查询处理复杂业务
实战-1:利用SQL进行某零售公司销售业务分析
实战-2:电商网站流量指标SQL数据分析
数据分析的统计学基础
基本统计量-1:均值、中位数、众数、异常值 .......
概率论基础-2:独立事件、条件概率、全概率公式、贝叶斯定律 ......
数据分布-3:几何分布、正态分布、二项分布、泊松分布.....
统计抽样
置信区间
假设检验
数据分析的数学基础
极限的计算和连续函数的性质
导数/微分的概念和运算法则
积分的概念和运算法则
幂级数、泰勒级数、傅里叶级数、傅里叶变换
向量的概念和运算
矩阵的转置、乘法、逆矩阵、正交矩阵、SVD奇异值分解、特征值
行列式的计算和性质
凸优化
基于Numpy库的Python数据科学计算
创建数组
切片索引
数组操作
字符串函数
数学函数
统计函数
......
案例-1:Numpy在金融领域中的分析应用
案例-2:基于Numpy的股价统计分析应用
基于Pandas库的Python数据处理与分析
利用Pandas重成数据表
利用Pandas进行数据查看
Pandas数据清洗
基于Pandas的数据预处理:数据表合并、数据表拆分与排序
利用Pandas进行数据提取
Pandas数据统计
......
案例-1:抖音用户行为分析
案例-2:淘宝天猫乐高的全国销售情况分析
利用Matplotlib/Seaborn/pyechart进行Python数据可视化
直方图:探索变量的分布规律
条形图:展示数值变量的集中趋势
散点图:表示整体数据的分布规律
箱线图:表示数据分散性,极值,中位数
提琴图:分位数的位置及数据密度
回归图:寻找数据之间的线性关系
热力图:表未数值的大小或者相关性的高低
案例-1:抖音用户行为可视化分析
案例-2:淘宝天猫乐高的全国销售情况可视化分析
实战-1:基于Python实现的链家网业务数据分析
实战-2:基于Python实现的51JOB简历分析
HIVE大数据查询平台搭建 大数据概述
⼤数据集群 Hadoop 架构
Hive开发环璄搭建
HIVE与MySQL进行数据交换
从MySQL中导入数据到Hive
从Hive导出数据到MySQL
HQL 海量业务数据需求查询
Hive数仓
HQL 数据查询基础语法
HQL 海量业务数据需求查询
从MySQL中导入数据到Hive
从Hive导出数据到MySQL
HQL 业务数据指标统计分析
分区表
分桶表
关联表
数据查询
HQL 海量数据查询优化
常⽤内置函数及开窗函数
特殊类型数组查询⽅式
HQL 查询语句优化技巧
实战-1:基于Hive的电商日志点击流量分析案例
实战-2:基于Hive的企业员工行为大数据分析
数据挖掘与分析算法
描述统计
相关分析
判别分析
方差分析
时间序列分析
主成分分析
信度分析
因子分析
回归分析
对应分析
列联表分析
聚类分析
数据挖掘工具——SPSS
课程规划与简介
数据挖掘项目生命周期
简单必备的统计学基础
用Modeler试手挖掘流程
数据挖掘的知识类型
商业分析基础简介
回归模型
决策树模型
支持向量机
聚类模型
关联规则
数据挖掘工具——SAS SAS概述:SAS简介与教育版安装
SAS概述:教育版基本使用
SAS编程基础
SAS编程基础7-循环
SAS数据集操作1-合并
SAS数据集操作2-排序与对比
SAS数据集操作3-查重与筛选
练习-斐波那契数列
练习-百元百鸡问题
实战:证券业市场绩效与市场结构关系的实证分析
人工智能:实战十大预测数据算法
机器学习入门
sk-learn机器学习库
十大预测算法原理与使用场景
算法调用、参数设置
特征选择、特征工程
回归预测模型实战
分类预测试模型实战
聚类模型实战
集成学习
模型优化
实战-1:天池大赛之天猫用户重复购买行为分析及预测
实战-2:天池大赛之O2O优惠券使用预测
商业智能与可视化分析实战
案例-1:BI电商数据市场分析项目实战
案例-2:BI电商数据客户分析项目实战
案例-3:BI可视化关于公司运营情况的相关分析
案例-4:基于Tableau的客户主题对客户进行合理分群
案例-5:基于Tableau实现的营销主题分析
案例-6:基于Tableau的保公司索赔情况分析
数据可视化报告撰写
数据可视化的概念
数据可视化的意义
数据可视化的对比
数据可视化的分类
数据可视化图表举例
数据可视化应用领域
数据可视化步骤
数据可视化工具梯度
图标呈现流程
数据报告撰写
实战:O2O电商平台功能优化效果评估及可视化数据分析报告撰写
了解电商业务背景
基于客户分析场景的数据加载、清洗、分析及模型建立
以货品分析为应用场景,针对品类销售及商品销售进行分析
以流量分析为应用场景,针对流量渠道及关键词做有效分析
根据业务实际背景做舆情分析
将分析结果及建议制成报告进行发布
五大商业项目实战
商业项目实战01:电商数据分析——分析方式之漏斗模型及数据量化
商业项目实战02:电商用户行为与营销模型实战
商业项目实战03:金融风控模型的构建与分析实战
商业项目实战04:展会电话邀约项目数据分析实战
商业项目实战05:零售行业数据分析
资深教育专家
中科大计算机专业,工信部大数据专家评委,十年技术开发经验,十年教学管理经验,中国最早的一批在线教育践行者。近些年专注于大数据、人工智能及区块链等方面的研究与落地教学实践工作。长期与企业一线技术总监、项目经理,互联网企业接触合作进行课程联合研制,产品的落地实践工作,对技术、架构和教育与商业有极深的理解和敏锐洞察力。
51Testing 中国软件测试人才的摇篮
51Testing(股票代码:836392),中国软件测试人才培训领域的先行者,面向全球的一站式软件测试服务供应商,专注并致力于为应届毕业生和职场新人提供软件测试职业培训,为企事业单位和机构客户提供软件测试整体解决方案。
2004年,51Testing在国内率先推出软件测试就业培训,十七年来已累计开班上干期,累计为7000多家国内外用人企业输送了70000余名优秀的软件测试人才,其中已有数干名学员晋升为项目经理、测试总监乃至CEO,成为软件测试领域的中坚力量。