首页 旅游资讯 线路攻略 景点大全 国内游 境外游 美食特产
您的当前位置:首页正文

数据挖掘工程师的基本职责

2023-03-04 来源:锐游网

  职责:

  1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;

  2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;

  3、负责来自业务团队数据需求的研发支撑;

  4、大规模数据挖掘和机器学习算法的实现和维护;

  5、在线和离线海量数据分析平台的开发;

  6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;

  7、负责制定数据接入和采集规范制定。

  任职要求:

  1、从事数据仓库领域工作2年以上;

  2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 ;具有良好的编程习惯和文档编写习惯;

  3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;

  4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;

  5、了解大数据基础架构和平台 ,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;

  6、熟悉linux系统;

  7、熟练掌握python语言;

  8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;

  9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力

因篇幅问题不能全部显示,请点此查看更多更全内容