什么是大数据分析师？

大数据分析师对应的是CDA二级大数据分析师考试。他们专注于构建管理数据模型的技术，仔细检查数据，并提供报告和可视化来解释数据隐藏的见解，岩旦模型的优化渣旁和改进等。你能拿到的薪水：大数据分析师作为架构的搭建者，在编程框架中举足轻重，月薪一般为25k-50k理论基础：统计学、概率论和数据库、数据挖掘、JAVA基础、Linux基础软件要求：必粗梁扰要 SQL、Hadoop、HDFS、Mapreduce、Mahout、Hive、Spark；可选R、Hadoop、Hbase、ZooKeeper、Pig等业务分析能力：熟悉hadoop+hive+spark进行大数据分析的架构设计，并能针对不同的业务提出大数据架构的解决思路。掌握hadoop+hive+ Spark+tableau平台上Spark MLlib、SparkSQL的功能与应用场景，根据不同的数据业务需求选择合适的组件进行分析与处理。并对基于Spark框架提出的模型进行对比分析与完善。结果展现能力：报告能体现大数据分析的优势，能清楚地阐述数据采集、大数据处理过程及最终结果的解读，同时提出模型的优化和改进之处，以利于提升大数据分析的商业价值。

大数据与大数据分析

数据分析是用包括检查、清洗、转换和建模等方法对数据进行处理。其目的是探索有用的信息、给出有建设凳姿性的意见，从而辅助压制决策。

数据挖掘是一个特别的数据分析技术，与传统的以纯描述为目的的技术相比，它专注于预测模型和对潜在知识的挖掘。

大数据分析师就是一群玩数据的人，玩出枣手绝数据的商业价值，让数据变成生产力。而大数据和传统数据的最大区别在于，它是在线的、实时的、规模海量且形式不规整，无章法可循，因此“会玩”这些数据的人就很重薯亮要

大数据分析师。一年以上数据分析岗位工作经验，或通过 CDA Level Ⅰ认证。专指互联网、零售、金融、电信、医学、旅游等行 业专门从事数据分析与云端大数哪迟据的人员。在 LevelⅠ的基础上要求掌握 Python 语言和 Linux 操作系统知识，能够掌握运用 Hadoop、Hive、Spark 等慧运专业大数据架构及软件，李碧李从海量数据中提取相关信息，结合相关机器学习算法，进行大数据分析并形成严密的大数据分析报告。

随着电子信息、物联网、互联网等产业的高速发展，智能手机、平板电脑、可穿戴设备与物联网设备已经渗入到现代生产生活的方方面面，每时每刻都产生着大量的数据，当今社会已经进入数据爆炸的时代。各领域中的相关数据不仅量大，而且种类繁多、变化速度快、价值密度低,面对海量数据就需要大数据技术了,CDA课程设计比较完善,大数据技术和分析都有.
第一部分是大数据技术：
1.1采集层：Sqoop可用来采集导入传统关系型数据库的数据、Flume对于日志型数据采集，另外使用Python一类的语言开发网络爬虫获取网络数据；
1.2储存层：分布式文件系统HDFS最为常用；
1.3计算层：有不同的计算框架可以选择，常见的如MapReduce、Spark等，一般来讲，如果能使用计算框架的“原生语言”，运算效率会最颤瞎高（MapReduce的原生支持Java，而Spark原生支持Scala）；
1.4应用层：包括结果数据的可视化、交互界面开发以及应用管理工具的开发等，更多的用到Java、Python等通用IT开发前端、后端的能力；
第二部分是大数据分析：
大数据挖掘指的是利用算法和模型提高数据处理效率、挖掘数据价值、实现从数据到知识的转换
2.1数据分析方法论：统计基础 微积分（求敬乎导）代数（矩阵运算）等
2.2统计模型：方差分析、线亮洞悉性回归、逻辑回归、列联分析、聚类分析、面板模型等
2.3数据挖掘模型：决策树 关联分析、SVM、神经网络 贝叶斯网络等