岗位职责：
1、负责公司大数据平台的架构设计、开发、优化与维护，确保数据的高效处理与存储。
2、设计并实现高效的数据采集、清洗、转换、加载（ETL）流程，保证数据质量和准确性。
3、利用Hadoop、Spark、Kafka、Hive、HBase等大数据技术构建高性能的数据处理与分析系统。
4、参与数据仓库的建设，设计数据模型，优化数据查询性能，提升数据服务效率。
5、与产品、开发、运维等部门紧密合作，解决大数据处理中的技术难题，提升数据价值。
跟踪大数据领域的前沿技术，进行技术预研和引入，持续提升团队技术水平。

任职要求：
1、计算机科学或相关专业硕士及以上学历，3年以上大数据相关领域工作经验。
2、精通Java/Scala/Python等至少一种编程语言，具备良好的编程习惯和代码规范。
3、深入理解Hadoop生态系统，包括但不限于HDFS、YARN、MapReduce、Spark、Hive、HBase等组件，有实际项目经验。
4、熟悉数据仓库理论，了解数据建模方法，有实际数据仓库设计经验者优先。
5、熟练使用SQL及至少一种NoSQL数据库（如MongoDB、Cassandra等），了解SQL优化技术。
6、具备良好的问题解决能力、学习能力和团队合作精神，能够承受工作压力。
7、有大数据平台性能调优、故障排查、安全加固经验者优先。
8、了解机器学习、深度学习等AI技术，并有相关应用经验者优先。
9、持有大数据相关认证（如Hadoop认证、Spark认证等）者优先。