在线客服
扫描二维码
下载博学谷APP
扫描二维码
关注博学谷微信公众号
大数据开发工程师招聘要求高吗?大数据开发工程师该岗位对于技术要求较高,有一定的技术门槛。大数据工程师不少细分方向,不同的方向需要具备不同的知识结构,分别是大数据底层平台研发、大数据应用开发、大数据分析和大数据运维。

大数据开发工程师负责数据仓库建设、ETL开发、数据分析、数据指标统计、大数据实时计算平台及业务开发、平台建设及维护等内容。必须数据仓库、hadoop生态体系、计算及二次开发、大数据平台工具的开发:开发平台、调度系统、元数据平台等工具。
大数据开发工程师招聘要求较高,接下来下边分享下一些企业对于该岗位的要求:
A公司大数据开发工程师招聘要求:
工作职责:
1、基于海量数据,支持业务对数据的分析和使用;
2、支持业务处理数据的流式处理、分析客户行为等。
任职要求:
1、精通至少一门编程语言,熟练运用各种常用算法和数据结构,有独立的实现能力 ;
2、熟悉常用的开源组件:Hadoop/Hive/Spark/Storm,并了解其特性和使用场景优先;
3、熟悉机器学习、数据挖掘、数据分析、分布式计算至少某一方面,有较深的理论研究和实践经验优先;
4、数据分析、推荐、机器学习、数据挖掘相关的开发工作优先。
B公司大数据开发工程师招聘要求:
职责描述:
1.负责大数据接入、存储、分析、监控等系统的开发工作。
2.负责业务数据的采集、存储、清洗、分析和数据逻辑接口开发。
3.负责Hive、Spark、HBase、Kafka等组件的性能优化工作。
4.大规模数据分析、数据挖掘和机器学习算法的实现。
任职要求:
1、本科以上学历,计算机、数学相关专业,1年以上基于大数据开发经验;
2、理解分布式系统概念、思想,扎实的编程基础,熟悉Hadoop(HDFS/MapReduce/Hive/HBase)、Spark、Kafka、Flume、Dubbo等类框架两种以上,至少有1个以上成熟项目经验;
3、熟悉Java、python至少一种开发语言,熟悉SQL开发和调优,熟悉Linux操作系统;
4、能独立开展离线数据分析、流数据计算、海量数据实时查询等相关应用的开发工作;
5、能独立分析和解决问题,有较强的书面与口头沟通表达能力;
6、工作踏实,良好的团队工作和协作能力;
大数据工程师的工作内容简单通俗的来说就是分析历史、预测未来、优化选择。要具备大数据基础知识、大数据平台知识和大数据场景知识三方面的知识结构。大数据基础知识:数学基础、统计学基础和计算机基础。具备数学基础、统计学基础知及计算机基础。能够搭建与优化大数据基础平台、大数据能力开放平台、大数据交易平台;基于大数据平台的数据仓库工具Hive/Spark/HBase, ETL调度工具,数据同步工具的开发、使用、集成和自动化运维,以及多租户与权限控制策略的实现;研发基于大数据平台的数据仓库平台产品。
— 申请免费试学名额 —
在职想转行提升,担心学不会?根据个人情况规划学习路线,闯关式自适应学习模式保证学习效果
讲师一对一辅导,在线答疑解惑,指导就业!
相关推荐 更多
怎样学习spark
现在一提到云计算大数据,就会想到spark。要怎样学习spark呢?首先我们需要简单了解一下它:Spark 是一种与 Hadoop 相似的开源集群计算环境,甚至在某些工作负载方面表现得更加优越。Spark采用一个统一的技术堆栈解决了云计算大数据的如流处理、图技术、机器学习、NoSQL查询等方面的所有核心问题,具有非常完善的生态系统,这直接奠定了其一统云计算大数据领域的霸主地位;
9195
2019-08-06 10:20:49
大数据核心技术:spark学习总结
想要学习大数据,一定要充分掌握大数据的核心技术:Hadoop、Strom、spark等等。Spark是一种与Hadoop像是的开源集群计算环境。它启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。
15343
2019-06-19 17:37:43
分布式系统学习笔记
分布式系统其实就是为了处理更多数据而存在的。对于大数据学习者来讲,分布式系统入门还是很容易的。本文为大家总结整理了一篇关于分布式系统的学习笔记,主要内容有分布式系统的定义、常用分布式方案以及分布式和集群的对比,下面一起来看看吧~
7037
2020-06-09 11:12:49
数据分析师获取数据的方式有哪些?
数据分析师工作的第一步就是获取数据,也就是数据采集。获取数据的方式有很多,本文将着重介绍一下数据分析中的数据来源。一般来讲,数据来源主要分为两大类,企业外部来源和内部来源。其中外部来源包括外部购买、网络爬取、免费开源数据等,内部数据来源包括销售数据、考勤数据、财务数据等。
9925
2020-08-07 18:19:53
如何获取大数据行业高薪岗位offer?
想要拿到高薪就要成为站在金字塔的人,在互联网行业需要保持不断的学习。学习大数据先思考自身未来想往哪个方向发展,想要入门快、基础深厚,并且需求多应用广建议从JAVA开始学起,找到适合自己的学习方法。
5969
2021-03-31 16:13:39
