职位详情

大数据开发工程师

上海 -上海 5年以上经验 本科学历
15k-25k
更新:2021-06-21 浏览:180 投递:0份
职位福利
法定节假日 综合补贴 奖励计划 年终奖金
职位详情

职责描述:
1. 基于Hadoop与Spark,进行海量数据模型设计、数据ETL开发;
2. 负责基于开源框架的大数据的数据开发,包括数据提取、分析与结果整理;
3. 负责分布式数据平台框架下的数据架构设计与开发,以及数据产品开发;
4. 参与公安大数数据模型体系构建及算法模型的设计和开发;
5. 开发大数据自动化运维、监控、故障处理工具,监控所有基础设施组件、应用程序,提供紧急应急措施。

任职要求:
1. 计算机、数学、统计或相关专业本科及以上学历,三年以上软件开发工作经验,数据挖掘和BI分析领域优先;
2. 至少熟悉一种关系型数据库如Oracle、mysql等,熟练掌握Hive/SQL,熟悉Spark/Map-Reduce/MPI分布式计算框架,进行海量数据模型设计、数据ETL开发;熟悉实时数据处理者优先;
3. 熟练使用Java,熟悉常用的java类库以及框架;
4. 熟练使用Python/Shell/Perl/R语言等其中一种语言优先;
5. 熟悉回归分析模型、关联规则挖掘、分类和聚类算法、协同过滤算法等数据统计模型和挖掘算法,了解完整的数据挖掘过程方法论,并有独立完整的建模实践经验,优先;
6.有轨迹分析算法、推荐算法相关的实际项目经验,优先考虑;
7. 具有良好的沟通、团队协作、解决问题和创新的能力;
8.有CCA开发员认证者优先。

温馨提示
求职过程请勿缴纳费用,谨防诈骗!若信息不实请举报。 立即举报
公司信息
湖南碧茂信息技术服务有限公司
民营企业 10-50人 计算机/互联网/IT
万坤图财富广场2栋24楼2418号
竞争力分析
180 职位浏览数
0投递人数
公司问答 我要提问
对此职位有疑问?快来问问吧 !
推荐职位
在线聊