数据分析师的具体工作职责和工作内容有哪些?

论坛 期权论坛 期权     
怀穆   2018-9-27 22:16   8197   10
如何成为一位优秀的数据分析师?
分享到 :
0 人收藏

10 个回复

倒序浏览
2#
IT168企业级  4级常客 | 2018-9-27 22:16:14 发帖IP地址来自
最近《福布斯》发表了一篇关于对2018“人工智能、大数据和分析”10大预测的文章中指出,数据工程师即将取代数据科学家的角色,成为炙手可热的新一代职位。Gil
Press写道,http://Indeed.com上有13%的岗位是关于数据工程师的,而数据科学家所占的比例还不到1%。
有趣的是,笔者在LinkedIn上查到如亚马逊和Facebook这样的领先数据驱动公司发布的数据工程师职位描述。具备数据抽取、转换、加载(ETL)流程和数据管道建设专业知识的全面了解,丰富的数据仓库技能,是理想数据工程师的必备和基本素质。






什么是数据工程师?
如果建筑工程涉及到建筑、道路和轨道等物理基础设施的设计、规划、建设和管理,数据工程也要应用同样复杂的数据。
数据工程师计划、设计、构建和维护一个可靠的体系架构,以确保稳定的清洁和结构化数据流,以便进行进一步分析,并适用于生产环境。
数据工程之所以越来越引人注目,是因为企业被大量非结构化的有价值的商业信息数据所淹没了。
随着数据科学家和公民数据科学的统计和编程能力开始激增,管理和维护大量的数据成了他们共同的痛点。分析和构建模型的数据科学家,近80%的时间都花费在查找和清理数据。
数据工程师通过了解企业所需的数据、识别相关的新数据源、提取可用的格式数据,确保数据不出错并将数据加载到数据科学家和分析师的工作中,从而实现对数据的救援计划。
数据工程师必备工具集
数据工程师的工作内容常常与数据架构师、数据库管理员和软件工程师的工作重叠,这意味着他们需要预先熟悉这些工作的内容。数据架构师或管理员只局限于数据基础架构的规划和维护的位置上,但从起源到最终分析展览的过程中,数据工程师都要参与在内。
因此,数据工程师的技能包括:
* 精通R或Python编程
* 强大的SQL技能
* 基于Hadoop的技术,如MapReduce、Hive和Pig
* ETL和数据仓库专业知识
除上述以外,数据工程师还应为传统的ETL过程提供新的重新配置选项。在并行处理方法之后,为复制数据构建数据管道,将其转移到存储解决方案上,重新格式化和加入数据。
随着多条数据流水线开始出现,Airflow和Luigi等开源工作流管理工具可用于创建和监控数据流水线。因此,对这些工具的了解又是一个优势。数据工程师也可以使用机器学习来自动化数据管道流程。
如果能在一些领先的大公司发出的招聘中多留心,那你一定会有所收获!
3#
分享成就你我  1级新秀 | 2018-9-27 22:16:15 发帖IP地址来自
主要工作职责:为某行业、政府或公司等单位政策制定、产业产品战略决策等提供科学依据。
主要工作:统计、总结分析、调查、结论、结论验证等。!
4#
陈杰  4级常客 | 2018-9-27 22:16:16 发帖IP地址来自
我说一下数据分析带来的好处:
1.第一步,手动变自动。之前都是手工统计分析,现在人力成本得到降低
2.发现问题和异常值。如对于员工工时统计,发现有的员工工时经常比其他人要少,那说明工作的积极性存在问题
5#
李德凯  4级常客 | 2018-9-27 22:16:17 发帖IP地址来自
常规数据分析报告、专项数据分析报告
数据报表、数据产品等和技术部门的需求对接
常规数据指标监测、异常数据排查、负责业务线五花八门问题的答疑
公司重点项目的数据支持
6#
芝士圈  3级会员 | 2018-9-27 22:16:18 发帖IP地址来自
文章首发自
芝士圈:美国数据分析师Data Analyst就业情况及求职规划21世纪是数据的时代,大概从2009年一月份左右,全美对于数据分析师的需求开始大幅度的增加。因此在美国,数据分析师已经成为了最热门的职业之一。
[h1]成为一名合格的Data Analyst需要哪些技术背景呢[/h1]成为一名数据分析师需要很多硬性和软性的技能。总的来说,需要的技能大致可以分为四个类别。

第一个是对行业的知识和兴趣。作为一名合格的数据分析师,除了能够有分析数据的能力,更看重的是有“Business Sense”,能够帮客户解决实际的问题。
第二点是要有基础的统计分析和模型知识。因为数据分析师每天的工作都是用他们的统计数学技能去解释一些问题。在数据分析里面,线性回归和决策树是两个常用的基础统计模型。
第三点就是会使用数据处理软件。这一技能能够帮数据分析师节省一些人为检测、分析的时间,能够留出更多的时间来进行商业上的分析。另外一方面,也可以减少一些人为的误差。SQL和EXCEL便是我们平常经常提起的数据处理的软件,通常适用于一些数据量较小的分析。而R和Python更加开源和灵活,如今越来越多的企业希望他们的数据分析师不仅仅会使用SQL和EXCEL,还希望他们能够有使用R和Python写代码的能力以此进行更多的高级分析。
最后一点便是普通数据分析师与优秀数据分析师的分界线,那就是沟通交流能力。面对自己的老板,我们需要积极的分享我们的想法,说服他并且证明我们的分析是正确的和有价值的。面对客户,沟通能力显得更为重要。因为很多客户并没有相应的学术背景,他们可能并不了解数学和统计,那么在这种情况下,我们需要使用更加通俗易懂的语言来解释我们的数据分析结果。
[h1]成为一名合格的Data Analyst需要哪些教育背景呢[/h1]数据分析师每天都在和数字打交道,因此第一件事,便是数据的采集和维护。一些错误的数据需要修复或者移除,这些都是数据分析师每天需要做的事情。
第二部分是为客户制作和提交周期性的报告,周期为每周或者每月,例如为客户提供KPI。主要是在数字上的呈现,通常使用的软件是PowerPoint或者Excel。
第三部分是检测和检验模型,这一部分在各个不同的行业会有不同。在检测模型之后,会有后续的更加细化的分析。根据模型的结果,为客户进行优化和预测。
最后一部分是与客户的日常沟通,数据分析师需要根据客户要求进行有针对性的各种分析。
[h1]数据分析师的薪水问题[/h1]
这一点也是大家比较关心的话题,从上图来看,工资的中位数大概为65000美金左右。因为数据分析师在各个行业都有,因此不同的企业工资幅度更大。比如谷歌、苹果这样的企业,就会高出很多,达到了100000美元一年的薪水。
[h1]求职经历分享——我的求职时间线[/h1]2015年暑假:上海普华永道暑假实习
2015年9月-12月:校外unpaid相关实习,校内grader
2016年1月-3月:修改简历,参加学习各种企业宣讲,面试培训,模拟面试
2016年3月-5月:主要使用第三方网站和公司官网海投简历,开始加深对行业的了解,对未来的规划和自我管理有了更好地认识
2016年5月:哥大研究生毕业
2016年5月-8月:主要试用Linkedin进行networking和简历投递
2016年8月:得到Offer
[h1]什么样的课程对求职数据分析师最有帮助?[/h1]根据笔者的经历来说,统计软件学习类的课程是对求职数据分析师最有帮助的。因为这一类的课程的作业通常都是以Project的形式,这样能够将学到的数据统计理论转化为实际上的操作。
数学、统计相关理论课程也是不可缺少的根基。在学习这一课程的时候,笔者建议同学们可以关注在三个方面:认识了解重要的数学、统计相关概念;学习不同种类的模型以及不同的用途;训练独立完成模型和分析模型结果的能力。
第三部分就是专业领域课程。不仅仅是从大学课程,在求职之前可以应该积累不同行业的专业知识。
[h1]一些笔者用过的求职类网站和工具[/h1]在简历修改方面,同学们一定要好好利用学校的求职中心。笔者建议同学在找工作之前,可以将简历带去求职中心让专业的职员辅导修改。除了免费的求职中心,还有一些提供简历修改服务的网站,例如Monster。
第二类就是简历海投类的网站。公司官网是最官方的方式,还有一些美国第三方的简历投递网站,例如Indeed、Monster和MyVisajobs。这些公司会在这些网站上写出需要的职位和要求。通常来说,笔者建议同学们可以利用这些网站做Job Search,之后再去公司官网或者是LinkedIn投递。
最后一类就是有针对的Networking和工作申请的网站,比如LinkedIn和猎头公司。相信LinkedIn大家已经很熟悉,在上面提交自己的个人信息,也可以搜寻自己同校的校友以此寻求帮助。
[h1]Insights & Takeaways[/h1]笔者建议各位同学,一定要今早开始准备,多花时间打磨自己的简历。因为你的求职方向可能会在求职中转换,而且不同简历修改网站的提供修改建议都不相同,更多的人帮助你打磨简历会为你的第一印象加分。
第二就是在求职初期不要放过任何一个面试的机会。笔者建议同学尽量能多参加面试,因为面试的过程是对行业知识的积累和提升自己面试水平。将它们用来锻炼自己的面试技巧和口语交流水平。
第三是善用各种求职渠道,走出舒适圈,寻找新机会。在自己找工作的过程中,一定要打开自己的方式方法,打通各种渠道。一定要走出舒适圈,多和人社交,会给自己找工作提供很大的帮助。
最后一点就是放平心态了,不要着急,有时候运气也是找到好工作的一部分。
[h1]一些经验和学习资源[/h1]因为数据分析师的要求较高,所以有些同学可能会担心自己的学术背景不足。Coursera在美国是一个很火的在线学习平台,如果在数学统计上有困难的同学可以在Coursera上寻找相应的课程。
Lynda、Udacity和Udemy更关注于Industry的部分。而MarTechApe提供了更多商业上的实例。
7#
低下头喘口气  1级新秀 | 2018-9-27 22:16:19 发帖IP地址来自
我现在在的这个互联网公司里 数据分析多是在做运营。。除了运营就是日报周报月报
8#
曹淼  4级常客 | 2018-9-27 22:16:20 发帖IP地址来自
两个大类:描述性分析(饼图,柱图),预测性分析(线性回归和非线性回归)
9#
MDA研究院  3级会员 | 2018-9-27 22:16:21 发帖IP地址来自
数据分析师的方向有很多,可以针对自己喜欢的公司、行业百度下相关招聘岗位。
可以关注一下国内首张工信部颁发的数据分析师证书,提高下自己应聘竞争力


10#
cici茜  1级新秀 | 2018-9-27 22:16:22 发帖IP地址来自
排开客观的工作,数据分析师需要的就是洞察力和判断力,而不是一味的问,你们需要什么数据~哈哈哈~楼主莫要介意,本人只是来吐个小槽
11#
丁德智  3级会员 | 2018-9-27 22:16:23 发帖IP地址来自
数据分析师可以给企业规划BI系统么,我一直做BI项目,想转行做数据分析,给企业规划BI系统
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

积分:
帖子:
精华:
期权论坛 期权论坛
发布
内容

下载期权论坛手机APP