网站建设投标书免费,自己做网站选什么好,wordpress 载入特别慢,上海城隍庙必吃美食第一章 数据分析概况 1.1数据分析定义 数据分析是指根据分析目的#xff0c;用适当的分析方法及工具#xff0c;对数据进行处理分析#xff0c;提取有价值的信息#xff0c;形成有效结论的过程。 1.2数据分析作用 数据分析在我们日常工作中主要有三大作用#xff0c;…第一章 数据分析概况 1.1数据分析定义 数据分析是指根据分析目的用适当的分析方法及工具对数据进行处理分析提取有价值的信息形成有效结论的过程。 1.2数据分析作用 数据分析在我们日常工作中主要有三大作用分别是现状分析、原因分析、预测分析。 1.3数据分析步骤 明确分析目的和思路》数据收集》数据处理》分析数据》数据展现》报告撰写 数据分析师一般采用sql语句对数据库中的数据进行处理、分析。 select count(*) from user; 数据收集来源主要有数据库、出版物、互联网、市场调查 数据处理主要包括数据导入导出、数据清洗、数据转换、数据抽取、数据合并、数据计算 SQL是结构化查询语言。简单来说他就是让数据库根据我们的要求进行查询并得到相应数据的操作语言。SQL是一种通用的关系型数据库操作语言这类数据库包括MySQLOracle、SQL Server、Access等。 第2章 数据库与SQL概况 2.1数据库简介 数据库是按照数据结构组织、存储和管理数据的仓库。通过数据库可以对数据进行存储、处理和分析。 2.1.2常用数据库 如今最常见的数据库主要有两种关系型数据库和非关系型数据库。 关系型数据库 采用关系模型组织数据的数据库以行和列的形式存储数据形成数据表一组数据表组成了数据库。 非关系型数据库 在严格意义上不是一种数据库应该是一种数据结构化存储方法的集合可以是文档或者键值对等。 处理大数据Hadoop所使用的Hive语言Hive也与SQL基本一致掌握了SQL再学习HQL就非常容易了。 使用SQL进行数据分析在数据库中主要的操作就是数据去重、数据合并、数据拆分、数据分组、数据统计等数据处理及分析工作这些操作都是通过SELECT语句来完成的。 select字段 from表 where过滤行条件 group by字段 having过滤组条件 order by字段 需要将前几条数据记录查询出来 mysql数据库limit用法 select字段 from表 limit n 创建表语法 create table 表名字段1 数据类型1……字段n 数据类型n mysql数据库常用的数据类型 字符型varchar、char、text 整数型int、smallint、bigint 浮点型float、double 日期、时间型time、date、datetime、timestamp mysql数据库将查询结果保存至新表用法 create table 新表 as select 字段 from 数据源表或查询 SQL语句中SELECT、FROM等关键字使用大写或小写形式均可。在编写SQL语句时建议尽量统一关键字的大小写。例如以大写字母的形式输入关键字一小写字母的形式输入表名或字段名。清晰明了。 第3章 数据处理 在日常工作中受系统bug或人为等原因影响难免会出现数据错误、数据缺失、数据重复等问题。具有此类问题的数据通常被称为脏数据库。我们可以按照一定的规则将脏数据处理干净这个操作被称为数据清洗。 数据清洗的目的就是将原始数据转化为可以进行分析的数据使数据保持准确性、一致性、有效性。 where子句用法 select字段 from表 where条件表达式 条件表达式常用运算符 类型说明算数运算符 - * / %取余关系运算符 ! in not in between and not between and like not like is null is not null逻辑运算符and or not 第4章 数据分析 数据分析作用、方法对应表 数据分析作用基本方法 数据分析方法 现状分析对比 对比分析 描述性分析 分组分析 结构分析 分布分析 交叉分析 矩阵分析 RFM分析 综合评价分析 留存分析 生命周期价值分析 原因分析细分 结构分解法 因素分解法 转化分析 预测分析预测 相关分析 回归分析 时间序列