返回上一页

高级大数据工程师

2020-02-12 更新 被浏览: 6 次
20-30k | 上海 | 3年以上经验 | 本科学历
申请职位
提示:求职过程请勿缴纳费用,谨防诈骗!若信息不实请举报。
职位发布者
崔先生
电话:18816881248
职位描述
|年龄不限 |性别不限 |婚况不限
招聘若干

【岗位职责】
1.参与公司大数据平台相关项目的技术开发实现,参与大数据相关系统架构设计并负责产品的实时业务和离线业务的研发;
2.正确理解业务需求,使用ETL工具(如Sqoop/Flume/Kafka等)完成各类数据源的数据整合、抽取工作;使用大数据组件(如Azkaban/Oozie等)完成资源、系统任务调度及数据监控;使用SparkSQL、HiveSQL等完成数据的逻辑处理及数据清洗工作; 
3.根据业务需求设计模型并按照模型设计完成开发工作并完成单元测试、集成测试和用户测试工作,并持续进行模型的优化; 
4.负责大数据平台与各个应用系统接口的设计与开发;
5.参与相关培训和项目文档的编写工作,参与建立集团大数据平台开发规范;
6.持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。

【岗位要求】
1.本科及以上学历,计算机相关专业,至少5年大数据应用产品研发经验;
2.精通kafka、ElasticSearch,mongodb,redis熟练使用hbase。具有分布式系统架构开发能力,精通strom、spark、flink等流或批处理引擎中的一种或多种;
3.熟悉企业级Linux/Unix操作系统,熟悉Shell脚本编程;
4.能够使用实时计算平台,进行实时业务数据的研发;能够基于已有平台进行离线业务的开发;
5.关注大数据前沿技术,各大大数据技术社区活跃者、有自己的开源项目者优先;
6.有较好的撰写技术文档的能力,具备敏捷、持续集成、DevOps经验优先;
7.有大型互联网公司系统开发经验,熟悉业内知名云计算服务产品、技术者优先;


联系我们

Tel: 0570-3358809

Email: qiye001@vbooster.cn

Address: 衢州柯城区衢时代创新大厦16楼

关于我们

成为个体新经济时代崛起的加速器

砖助科技服务 成就个人梦想

衢州砖助科技有限责任公司

Copyright © 2019 VBooster Technology Co., Ltd. All rights reserved. 浙ICP备19046747号-1