当前位置:首页 > 专题范文 > 公文范文 > 正文

大数据架构师岗位主要职责概述3篇

发布时间: 2023-01-24 12:30:09 来源:网友投稿

大数据架构师岗位的主要职责概述1  职责:  1、负责大数据*台及BI系统框架设计、规划、技术选型,架构设计并完成系统基础服务的开发;  2、负责海量埋点规则、SDK标准化、埋点数据采集、处理及存储下面是小编为大家整理的大数据架构师岗位主要职责概述3篇,供大家参考。

大数据架构师岗位主要职责概述3篇

大数据架构师岗位的主要职责概述1

  职责:

  1、负责大数据*台及BI系统框架设计、规划、技术选型,架构设计并完成系统基础服务的开发;

  2、负责海量埋点规则、SDK标准化、埋点数据采集、处理及存储,业务数据分布存储、流式/实时计算等应用层架构搭建及核心代码实现;

  3、开发大数据*台的核心代码,项目敏捷开发流程管理,完成系统调试、集成与实施,对每个项目周期技术难题的解决,保证大数据产品的上线运行;

  4、负责大数据*台的架构优化,代码评审,并根据业务需求持续优化数据架构,保证产品的可靠性、稳定性;

  5、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现,分享技术经验;

  6、有效制定各种突发性研发技术故障的应对预案,有清晰的隐患意识;

  7、深入研究大数据相关技术和产品,跟进业界先进技术;

  【任职要求】

  1、统计学、应用数学或计算机相关专业大学本科以上学历;

  2、熟悉互联网移动端埋点方法(点击和浏览等行为埋点),无埋点方案等,有埋点SDK独立开发经验者优选;

  3、熟悉Hadoop,MR/MapReduce,Hdfs,Hbase,Redis,Storm,Python,zookeeper,kafka,flinkHadoop,hive,mahout,flume,ElasticSearch,KafkaPython等,具备实际项目设计及开发经验;

  4、熟悉数据采集、数据清洗、分析和建模工作相关技术细节及流程

  5、熟悉Liunx/Unix操作系统,能熟练使用shell/perl等脚本语言,熟练掌握java/python/go/C++中一种或多种编程语言

  6、具备一定的算法能力,了解机器学习/深度学习算法工具使用,有主流大数据计算组件开发和使用经验者优先

  7、熟悉大数据可视化工具Tableau/echarts

  8、具有较强的执行力,高度的责任感、很强的学习、沟通能力,能够在高压下高效工作;

大数据架构师岗位的主要职责概述2

  职责:

  根据大数据业务需求,设计大数据方案及架构,实现相关功能;

  搭建和维护大数据集群,保证集群规模持续、稳定、高效*稳运行;

  负责大数据业务的设计和指导具体开发工作;

  负责公司产品研发过程中的数据及存储设计;

  针对数据分析工作,能够完成和指导负责业务数据建模。

  职位要求:

  计算机、自动化或相关专业(如统计学、数学)本科以上学历,3年以上大数据处理相关工作经验;

  精通大数据主流框架(如Hadoop、hive、Spark等);

  熟悉MySQL、NoSQL(MongoDB、Redis)等主流数据库,以及rabbit MQ等队列技术;

  熟悉hadoop/spark生态的原理、特性且有实战开发经验;

  熟悉常用的数据挖掘算法优先.

大数据架构师岗位的主要职责概述3

  职责:

  1.参与公司数据*台系统规划和架构工作,主导系统的架构设计和项目实施,确保项目质量和关键性能指标达成;

  2.统筹和推进制造工厂内部数据系统的构建,搭建不同来源数据之间的逻辑关系,能够为公司运营诊断、运营效率提升提供数据支持;

  3.负责数据系统需求对接、各信息化系统数据对接、软件供应商管理工作

  5.根据现状制定总体的数据治理方案及数据体系建立,包括数据采集、接入、分类、开发标准和规范,制定全链路数据治理方案;深入挖掘公司数据业务,超强的数据业务感知力,挖掘数据价值,推动数据变现场景的落地,为决策及业务赋能;

  6.定义不同的数据应用场景,推动公司的数据可视化工作,提升公司数据分析效率和数据价值转化。

  任职要求:

  1.本科以上学历,8年以上软件行业从业经验,5年以上大数据架构设计经验,熟悉BI*台、大数据系统相关技术架构及技术标准;

  2.熟悉数据仓库、熟悉数据集市,了解数据挖掘、数据抽取、数据清洗、数据建模相关技术;

  3.熟悉大数据相关技术:Hadoop、Hive、Hbase、Storm、Flink、Spark、Kafka、RabbitMQ;

  4.熟悉制造企业信息化系统及相关数据库技术;

  5.具备大数据*台、计算存储*台、可视化开发*台经验,具有制造企业大数据系统项目开发或实施经验优先;

  6.对数据敏感,具备优秀的业务需求分析和报告展示能力,具备制造企业数据分析和数据洞察、大数据系统的架构设计能力,了解主流的报表工具或新兴的前端报表工具;

  7.有较强的沟通和组织协调能力,具备结果导向思维,有相关项目管理经验优先。

最新文章

版权所有:博古范文网 2012-2024 未经授权禁止复制或建立镜像[博古范文网]所有资源完全免费共享

Powered by 博古范文网 © All Rights Reserved.。浙ICP备12018771号-1