岗位职责
岗位职责: 1、负责大数据调度平台,大数据处理引擎,数据治理,数据服务等模块的设计和开发工作; 2、负责数据建模、ETL、数据产品及平台的设计与开发; 3、负责数据挖掘模型的工程开发。 任职要求: 1、精通SQL编写,熟悉数据库的各类函数使用 ,有离线和实时数据体系建设的实际经验者优先; 2、熟悉大模型使用,具备结构化提示词编写经验者优先; 3、熟悉Hive,Spark,具有Hive, Spark调优实战经验; 4、熟悉linux, 会shell,会java、python 或scala 一种或多种编程; 5、了解数据仓库知识,具备数据加工处理(ETL)相关经验优先; 6、能快速学习业务,比较强的问题分析和处理能力,有较强的执行力,勤奋好学。
