岗位职责
1、负责Hadoop集群的安装、配置、维护与性能优化,保障系统高可用性与稳定性。
2、基于HDFS、Spark、Hive、HBase、Kafka、Flink等组件开展数据采集、清洗、存储、分析及挖掘工作。
3、参与企业级数据仓库建设与ETL开发,支持报表生成与业务指标分析。
4、开展Yarn调度优化、HDFS存储治理、HiveSpark作业调优(如小文件、数据倾斜等)。
5、编写技术文档(操作手册、故障指南等),配合团队完成数据治理、元数据管理、数据质量监控体系建设。
岗位要求
1、熟悉Hadoop生态核心组件(HDFS、YARN、MapReduce、Hive、HBase、Spark、Flink、Kafka、ZooKeeper、Sqoop、Flume等)。
2、熟练掌握JavaPythonShell至少一门语言,具备Linux系统操作与脚本开发能力。
3、熟悉MySQL等关系型数据库及SQL开发与性能优化;了解数据仓库建模理论与数据治理方法。
4、具备2年以上大数据平台开发、运维或交付经验;有CDHCDPTDH华为MRS等平台经验者优先。
5、责任心强,逻辑清晰,具备良好的沟通协作能力与问题解决能力。
工作地址
山东省济南市·山东省济南市历下区经十路9777号鲁商国奥大厦
HR信息
李文
3日内活跃
与HR聊聊
安全警示
立即投诉
在求职过程中如果遇到扣押证件、收取押金、提供担保、强迫入股集资、解冻资金、诈骗传销、求职歧视、黑中介、人身攻击、恶意骚扰、恶意营销、虚假宣传或其他违法违规行为。请及时保留证据,立即向平台举报投诉,必要时可以报警、起诉,维护自己的合法权益。
公司其他职位 查看本公司更多职位
Hadoop大数据工程师
5-10K
潍坊市-奎文区 | 年龄不限 | 大专
专业服务(咨询/财会/法律)
股份制公司
少于50人
济南市山东省济南市历下区经十路9777号鲁商国奥大厦
感兴趣的职位
