百益文库网为您提供优质参考范文! 工作汇报 共同富裕 思想汇报 事迹材料 党课下载 不忘初心
当前位置:首页 > 专题范文 > 公文范文 >

2023年大数据运维工程师具体职责描述6篇

时间:2023-12-19 11:30:03 来源:网友投稿

大数据运维工程师具体职责描述职责:1、负责公司内部及项目中大数据集群的构建,任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;2、负责下面是小编为大家整理的大数据运维工程师具体职责描述6篇,供大家参考。

大数据运维工程师具体职责描述6篇

大数据运维工程师具体职责描述篇1

  职责:

  1、负责公司内部及项目中大数据集群的构建,任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;

  2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值守,参与大数据基础环境的架构设计与改进;

  3、深入研究大数据业务相关运维技术,探索新的运维技术及发展方向。

  任职要求:

  1、熟悉Linux基础命令操作,能够独立编写Shell脚本开展日常服务器的运维;

  2、熟悉Hadoop生态圈Hadoop、Kafka、Zookeeper、Hbase、Spark的安装与调优;

  3、熟悉软硬件设备,网络原理,有丰富的大数据平台部署,性能优化和运维经验;

  4、工作认真负责,有较强的学习能力,动手能力和分析解决问题的能力;

  5、能够利用各种开源监控工具、运维工具,HA、负载均衡软件完成工作任务;

  6、熟悉JVM虚拟机调优;

  8、1年及以上相关岗位经验,要有良好的安全和责任意识。

大数据运维工程师具体职责描述篇2

  职责:

  1. 负责网站维护、管理与推广,保证网站的安全运营。

  2. 负责网站资料的上传与更新,与其他网站运营事务。

  3. 独立制定网站的内容结构,设计并负责实施和后期维护。

  4. 处理公司内部其他的行政事务。

  任职要求:

  1. 有网站运营经验者优先。

  2. 良好的团队协作能力,踏实肯干。

  3. 熟练使用办公软件及其他相关软件技能。

  4. 熟练掌握和使用普通话。

大数据运维工程师具体职责描述篇3

  职责:

  1、负责大数据集群的日常维护、监控、异常处理等工作,保障集群稳定运行;

  2、负责大数据批处理管理以及运维;

  3、负责大数据集群的用户管理、权限管理、资源管理、性能优化等;

  4、深入理解数据平台架构,发现并解决重大故障及性能瓶颈,打造一流的数据平台;

  5、跟进大数据前沿技术,不断优化数据集群;

  6、有华为大数据平台运维经验优先;

  岗位要求:

  1、1年以上大数据运维或开发经验;

  2、有良好的计算机和网络基础,熟悉linux文件系统、内核、性能调优,TCP/IP、HTTP等协议;

  3、熟悉大数据生态,有相关(HDFS、Hive、Hbase、Sqoop、Spark、Flume、Zookeeper、ES、Kafka)的运维及开发经验;

  4、熟练使用shell、python等脚本语言开发相关运维管理工具;

  5、良好的文档撰写习惯;

大数据运维工程师具体职责描述篇4

  职责:

  1、负责分布式大数据平台产品的运维和运维开发,保证其高可用和稳定性;

  2、负责大数据系统架构的可运维性设计、容量规划、服务监控,持续优化服务架构、集群性能;

  3、通过技术手段控制和优化成本,通过自动化工具及流程提升大数据平台运维效率;

  4、为项目开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题;

  任职资格:

  1、三年以上大数据运维相关工作经验,有大型互联网公司工作经验者优先,全日制本科及以上学历;

  2、熟练掌握至少一门开发语言,有Java或Python语言开发经验优先;

  3、精通Hadoop生态及高性能缓存相关的各种工具并有实战经验,包括但不限于Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;

  4、熟悉Mysql等常用关系数据库,熟练编写SQL语句,有分布式nosql数据库应用、性能调优经验优先;

  5、熟悉Linux环境,能够熟悉使用shell脚本;

  6、对大数据技术有强烈兴趣,有志于往大数据方向深层次发展;

  7、具有很强的责任心、执行力、服务意识、学习能力和抗压能力;

  8、具备较好的沟通能力、主动性及责任感。

大数据运维工程师具体职责描述篇5

  职责

  1. 负责大数据ETL系统,运维及保障服务稳定可用;

  2. 负责数据采集交换方案以及联调测试;

  3. 负责采集交换任务的评审和上线;

  4. 负责及时排除ETL流程故障,形成知识库,完善运维文档;

  5. 负责监控和优化ETL的性能,持续性地提出改进自动化运维平台建议

  技能要求

  1. 计算机科学或相关专业本科及以上学历;

  2. 熟悉Linux系统,熟练编写shell/perl/python一种或多种脚本语言;

  3. 熟悉Hive、Hadoop、MapReduce集群原理,有hadoop大数据平台运维经验者优先;

  4. 熟悉数据库的性能优化、SQL调优,有相应经验;

  5. 抗压能力强,有强烈的责任心,良好的沟通能力、学习能力及团队合作能力。

大数据运维工程师具体职责描述篇6

  职责:

  1、负责公司信息技术的日常运行与维护、安全管理、软硬件及系统改造升级建设等工作

  2、负责公司网络线路与通讯设备的管理与维护

  3、负责公司国内与海外信息系统的畅通与安全

  4、公司机房网络系统、邮箱通讯系统等维护与管理

  5、公司运行的SAP主系统维护与对接,包括与外部开发商对接,内部后台更新维护、模块管理、问题处理

  任职要求:

  1、大专以上学历,信息管理与计算机相关专业

  2、熟悉OA、SAP系统,熟悉制造业各业务运行方式与流程

推荐访问:职责 描述 工程师 大数据运维工程师具体职责描述怎么写 大数据运维工程师具体职责描述正确的是 大数据运维工程师具体职责描述是什么 大数据运维工程师岗位职责 大数据运维工程师做什么 大数据运维工程师前景分析 大数据运维工程师需要哪些知识 大数据运维工程师就业和发展前景 大数据运维工程师任职资格 大数据运维工程师好学吗