2023年大数据运维工程师工作内容(17篇)
范文为教学中作为模范的文章,也常常用来指写作的模板。常常用于文秘写作的参考,也可以作为演讲材料编写前的参考。相信许多人会觉得范文很难写?这里我整理了一些优秀的范文,希望对大家有所帮助,下面我们就来了解一下吧。
大数据运维工程师工作内容篇一
1. 管理公司数据库,提供高可用、高性能数据库系统,并保障系统稳定运行。
2. 负责数据库性能监控与优化,故障处理,数据备份及灾难恢复。
3. 负责数据库自助平台的高可用架构设计和负载均衡的设计和实现。
4. 负责业务系统数据库管理,包括数据库日常维护,系统数据安全以及权限管理、故障处理、日常错误情况处理等。
5. 负责依据业务需求优化数据存储结构,负责数据库系统部署方案的计划、设计和实施。
6. 负责系统数据库定期检查,进行性能分析与调优,充分保证信息系统数据的安全及系统高效运行。
任职资格:
1. 全日制本科及以上学历,计算机或相关专业
2. 熟悉mysql实现原理,innodb,myisam,memory引擎,熟悉存储过程和事务。
3. 熟悉数据库原理、精通数据库核心参数的设置和调整,有规划、设计、部署以及数据库性能优化经验。
4. 具备数据库设计、sql优化能力,能根据业务需求,提供高可用、高性能、可扩展、稳定可靠的数据库解决方案。
5. 了解mongodb等非关系型数据库的特点。了解redis,memcache等内存数据库及缓存系统的原理及实现。
6. 熟悉linux操作系统,对主机、存储、网络有一定的了解, 会使用shell/perl/python中的一门脚本语言。
7. 有hadoop/kafka/spark/elasticsearch相关经验的优先考虑。
大数据运维工程师工作内容篇二
职责:
i、负责hadoop集群的安装部署、维护及调优:
2、负责spark的安装邮署、维护及调优:
3、负责基于大数据平台开发的应用系统的部署、日常维护、调优和问题处理
4、负责elk 平台的部署及维护。
技能要求:
1 、2年以上大数据运维工仵经验;
2、熟悉hadoop生态圈技术栈及各个组件原理:
⒊、熟练掌握hdfs、hive、hbase、sρark、sqooρ 等组件,具备部署、维护、调优的能力:
4、热悉kylin技术原理,有一定的维护经验优先:
5、掌掇elk的日常维护技能·有一定的维护.经验优先:
6、有一定的hql/sql 性能调优经验;
7、具备基本的 java、python等语言开发能力优先:
8、有较强的沟通、团队协作及学习能力。
大数据运维工程师工作内容篇三
职责:
1、负责公司大数据/hadoop/hive/hbase/flink等离线实时数据平台运维保障;
2、负责内部大数据自动化运维以及数据化运营平台开发工作;
3、负责hadoop/hbase等系统的业务监控、持续交付、应急响应、容量规划等;
4、深入理解数据平台架构,发现并解决故障及性能瓶颈,打造一流的数据平台;
5、持续的创新和优化能力,提升产品整体质量,改善用户体验,控制系统成本。
6、善于表达、理解客户数据服务需求,具备数据需求转化落地能力。
任职要求:
1、大学本科及以上学历,计算机或者相关专业;
2、深入理解linux系统,运维体系结构,精于容量规划、性能优化;
3、具备一定的开发能力,精通一门以上脚本语言;(shell/perl/python等),熟悉java等开发语言一种及以上优先;
4、具备很强的故障排查能力,有很好的技术敏感度和风险识别能力;
5、能够承受较大的工作压力,以结果和行动为准则,努力追求成功;
6、熟悉hadoop、hbase、hive、spark、tez等原理并具备管理,配置,运维经验;
7、熟悉分布式系统设计范型,有大规模系统设计和工程实现的了解者优先。
8、具有运营商流量数据加工处理经验者优先。
大数据运维工程师工作内容篇四
职责:
1. 负责大数据平台的规划、部署、监控、系统优化及运维等工作,保障系统7*24小时运营;
2. 为线上服务高效稳定运行负责,支撑业务和数据量的快速扩张,发现并能解决重大故障及性能瓶颈;
3. 深入理解系统平台及大数据相关运维技术,持续优化集群服务架构;
4. 对大数据体系下新技术的调研、应用、对内培训。
职位要求:
1. 至少3年以上大数据运维经验, 深入理解linux系统,运维体系结构;
2. 深度优化hadoop平台mr作业/计算框架/存储技术,提升集群吞吐并降低成本;
3. 具有cdh(或者hdp)/hdfs/yarn/hive/es/kylin/hbase/kafka/spark/storm/flume/impala/hue/kettle/flink等大数据系统的运维经验,有开发经验;
4. 熟悉hadoop生态,有数据安全相关工作经验, 并能对平台cpu/mem/io/网络/调度中一个或多个方面的性能调优;
5. 熟练掌握shell/python中的任意一门脚本语言;
6. 强烈责任感、缜密的逻辑思维能力,良好的团队协作能力,具备良好的项目管理及执行能力;
大数据运维工程师工作内容篇五
职责:
1,负责软件系统的部署运行;
2、负责业务数据系统接入的规划和实施;
3,理解行业业务,梳理业务数据模型;
4,完成项目实施过程中各类文档的编写、收集、整理、归档;
5,与客户保持密切沟通,建立良好的客户关系,保障良好的客户满意度;
有效的分析和控制客户需求,解决项目实施过程中遇到的质量问题和管理问题。
岗位要求:
1、全日制本科以上学历,软件工程、计算机科学相关专业;
2、3年以上的软件/项目管理实施经验;
3、熟悉linux操作,熟练编写shell/python脚本;
4、了解常用开源分布式系统hadoop/spark/hive/hbase;
5、熟练使用sql语句,熟悉etl工作;
6、熟悉oracle,mysql等关系型数据库;
7、具有强烈的责任感与团队合作精神,出色的沟通及学习能力;
8、有较强的分析问题能力,独立解决问题能力,能接受在客户公司办公。
大数据运维工程师工作内容篇六
职责:
1、负责运维自动化体系的架构优化及实现;
2、负责linux/windows操作系统的性能优化、疑难问题的定位和解决;
3、保障数据库、中间件、基础软件服务、操作系统、监控系统软件环境等的安全稳定运行;
4、负责建立完善的运维经验知识库及培训体系,并保持新技术的追踪和应用。
岗位要求:
1、计算机相关专业,2年以上it运维经验;
2、精通linux/windows操作系统的应用;
3、熟练使用linux,了解操作系统原理,在linux系统管理及优化有丰富经验;
4、熟悉web相关服务,熟悉nginx、apache、memcache、mysql等常用服务架设、管理维护和故障;
5、精通python/shell等任意一种脚本语言,能高效进行日常维护工具开发;
6、具有实际运维自动化架构设计经验及有大规模开源云计算平台运维经验者优先;
7、具有较强的分析、研究和解决问题的能力,良好表达能力和责任心。
大数据运维工程师工作内容篇七
职责
1、负责管理部门的网络及系统维护工作;
2、按照部门的业务需求, 管理部门的各种应用软件的安装、部署、发布和日常运维等工作;
3、负责管理部门的网络及系统维护工作;
4、按照部门的业务需求, 管理部门的各种应用软件的安装、部署、发布和日常运维等工作;
5、能够独立编写各类系统脚本,优化脚本;负责部门oracle、mysql数据库服务器日常维护。
任职资格
1、计算机及其他相关专业,大专及以上学历;
2、熟练掌握linux、windows系统运维;
3、熟悉linux下常用软件如weblogic apache nginx mysql lvs memcache等;
4、掌握oracle或mysql的sql关系型数据库原理,有数据库维护经验;
5、精通nginx/redis/zookeeper、iptables 配置,熟悉shell、ant脚本语言;
6、精通分布式编译系统,有大型编译系统运维经验;
7、具有自动化运维的经验,有配置管理经验优先考虑;
8、熟悉vmware虚拟机,会创建,安装,配置等;
9、至少熟悉一种版本控制工具的使用,如svn,gitlib工具等
大数据运维工程师工作内容篇八
职责:
1、负责公司产品及业务平台网络架构的规划与部署工作;
2、保证公司线上产品及业务平台的数据安全,为其稳定的运行提供技术支持;
3、负责服务器系统及网络设备的日常维护、服务监控和常规系统健康检查、处理运维事故;
4、对服务器进行日常维护,确保网络连续正常运行,无重大事故;
5、监控产品以及平台的运行状态,及时处理出现的故障;
6、配合数据分析、开发人员进行相关数据、参数配置、系统测试及系统监控;
【任职要求】:
1、1年以上运维工作经验,熟悉阿里云等管理、配置及调优,如:ecs/rds/drds等;
2、熟悉windows、linux操作系统和维护;
3、熟悉iis,tomcat,nginx等主流web服务器的配置与使用;
4、熟练掌握防火墙等常用网络设备的配置,熟悉tcp/ip协议;
5、熟悉mysql,mssql server数据库产品的安装部署;
6、熟悉脚本语言:shell,python等一种以上;
7、熟悉网络架构,具备基本的网络故障排错能力,对网络安全有一定的了解。
8、有高度的责任心、敬业精神和团队精神,善于沟通;
9、具有良好的职业道德和强烈的工作责任心。
大数据运维工程师工作内容篇九
职责:
1、负责系统故障的应急响应和问题处理;维护linux、windows服务器,监控服务器性能;
2、负责linux操作系统的安装、配置,系统监控和维护,问题处理,以及软件升级,安全优化,保证其稳定、高效运行;
3、负责公司平台及应用系统实施及维护工作;
4、负责linux 平台下的系统维护,提高系统的可用性及可维护性;
5、负责linux系统及应用程序进行性能分析,优化,问题跟踪;
6、负责windows server 20xx、20xx的运维技术支持;
7、负责windows ad域搭建维护。
任职资格:
1、三年以上主流操作系统安装、配置、管理、维护经验。
2、精通linux系统、精通oracle、mysql、ftp、dns、squid等常用服务的安装、配置和维护;
3、熟悉linux负载均衡技术;能熟练利用各种工具进行系统状态监控(cacti、nagios,bigsister等); 4、熟悉linux下不同数据库的安装和调试及简单优化;
5、熟悉ad域控;
6、有阿里云、华为云、七牛云、亚马逊等云服务器运维经验优先;
7、熟悉vmware vsphere虚拟化操作平台;
大数据运维工程师工作内容篇十
1. 负责项目版本管理和发布管理,实现环境版本迭代的顺利交付。
2. 参与制定配置管理规范,流程和策略,针对具体项目制定具体的配置管理计划。
3. 持续集成和持续交付管理模式的建设与优化,及相关平台的技术调研。
4. 配置管理平台维护,确保配置相关工具平台、site、beta及生产环境的稳定性。
5. 负责生产环境的巡检与问题排查,紧急问题的处理。
6. 项目日常支持,流程工具的培训指导,协助解决项目配置管理相关问题。
大数据运维工程师工作内容篇十一
职责:
1、 维护公司it系统的中间件等组件的日常运行维护和环境监控工作,保障系统的安全、稳定、可靠运行;
2、 协助判断系统故障,报告问题,回答技术咨询以及故障处理;
3、 为客户提供系统相关的技术咨询,撰写系统操作手册,维护技术文档;
4、 协助系统补丁部署与管理;
5、 协助桌面终端设备运维,提供高可用性的it系统环境;
6、 完成上级领导交办的其他工作。
任职资格:
1、 全日制大学本科或以上学历,计算机相关专业;
2、 具有3年以上系统运维相关工作经验,熟悉linux、windows的日常操作及系统优化,掌握tomcat、nginx、redis等中间件的安装配置和维护优化;
3、 具有良好的职业操守,强烈的责任心,具开拓进取精神,能承受工作压力。
大数据运维工程师工作内容篇十二
职责:
1、 负责服务器vpc网络的规划、可用性维护,以及混合云环境下的vpn网络的配置;
2、 负责本地服务器上架、本地服务器资源和云服务器资源的管理,负责备份策略的制定及执行。有zstack和云服务商(阿里云、腾讯云等)的使用经验优先;
3、 负责服务器的脚本管理、基础监控、磁盘管理、容量规划、应急响应等;
4、负责linux环境下常用软件的搭建和维护,比如时钟、dns、slb、tomcat、jenkins等。
5、 探索、研究自动化运维技术方向,有编程兴趣者优先(可培养)。
任职要求:
1、3-5年运维从业经验,熟悉常见的自动化配置管理工具,100台以上服务器运维经验者优先;
2、精通linux系统基本操作及配置,熟悉至少一款主流linux服务器发行版。有红帽认证者优先;
3、熟悉zabbix,falcon等主流监控系统的部署和配置;
4、熟悉shell和python,可以独立完成常用的脚本编写;
5、熟悉tomcat、nginx、dns、时钟、jenkins等常见软件的配置、以及常见问题处理方法;
6、 熟悉网络基础知识、熟悉tcp/ip的工作原理,会配交换机或路由器,能熟练的对网络情况进行分析
7、具有团队合作意识、良好的学习能力、沟通能力和亲和力、良好组织能力和协调工作能力,具有高度的工作责任心和良好的职业道德。
大数据运维工程师工作内容篇十三
职责:
1负责政务云平台、政务应用系统中数据库业务的日常运维,保障平台及应用系统服务7*24稳定可靠高效运行
2负责数据库性能调优,了解锁与隔离机制,协助客户解决数据库性能瓶颈
3制定数据库使用规范,制定数据库备份、升级、迁移规划并部署实施
4参与数据库设计工作,提高数据库维护自动化水平
5熟悉linux操作系统,熟练使用python,go,shell等至少一种语言
岗位要求:
1) 5年以上 oracle/mysql dba 从业经验;
2) 熟练掌握 oracle/mysql 数据库的基础理论知识、运行机制、体系架构、高可用方案、备份机制、容灾机制等;
3) 熟练掌握数据库性能优化,了解主流的分布式数据库 spanner/cassandra;
4) 熟悉 linux/unix 操作系统,对服务器硬件有一定了解;
5) 熟练掌握 golang、python、java 等语言中的一种;
6) 熟悉阿里云产品线,具备acp认证者优先考虑;
大数据运维工程师工作内容篇十四
职责:
1.负责弱电集成系统日常维护,解答客户提出的技术问题,负责产品工程安装,包括产品安装调试,故障排除,日常维护,产品演示等;
2.负责用户培训和指导等技术支持工作;收集、汇总用户的各种需求或建议,并及时提交需求任务或建议措施;
职位要求:
1、计算机、网络相关专业,大专以上学历,有技术支持服务工作经验者优先;
2、熟悉企业it环境,包括网络,操作系统,应用程序等,有华为、cisco等认证证书优先;
3、良好的沟通能力,有亲和力和强烈的责任感,以及很好的团队合作精神,具备独立分析问题和解决问题的能力。
4、具有较强的服务意识,时间观念、耐心和责任心、良好的团队合作精神。
大数据运维工程师工作内容篇十五
职责:
1、负责zabbix监控优化、日常告警分析处理;
2、协助开发构建管理系统环境,不断优化系统架构、提升部署效率、优化资源利用率;
3、虚拟化管理,主动协调资源推动问题解决;
4、参与系统的监控方案、容灾方案、自动化运维方案的制定和实施。
5、完成协作团队领导分配任务。
任职要求:
1、大专以上学历,具有5年以上运维工作经验;
2、专业知识与技能要求:
a、熟悉常用的linux命令,具有shell或python脚本编写能力;
b、熟悉mysql、mongodb、 ,elasticsearch 等数据库常用的操作;
c、熟悉zabbix,prometheus监控系统;
d、有腾讯云等云平台使用经验者优先。
3、有 ,k8s经验;
4、较好的抗压能力、问题分析与解决能力;
5、较强的责任感,良好的沟通与协调能力。
大数据运维工程师工作内容篇十六
职责:
1、协助实施运维部经理组织实施运维技术团队的管理、部门工作分配;
2、组织实施运维部人员履行项目内容,完整把控整个项目及实施各阶段,并调动组员积极能动性,对其工作进行监督检查;
3、做好与公司其它部门的协调工作;
4、组织安排部门工作所需的技能培训,提高团队的知识水平。
任职要求:
1、大学本科及以上学历;
2、高度的责任感和事业心,服从公司领导,坚决贯彻执行上级领导指示;
3、具有计算机sm系统运维技术经验,具有运维团队的管理经验;
4、有坚实的专业技术功底,具备解决技术难题的能力;
5、具备优秀的团队组织、协调沟通和综合管理能力;
6、具备良好的语言沟通、文字表达和独立处理问题能力;
7、具备良好的抗压能力;
大数据运维工程师工作内容篇十七
职责:
1、网络与电话线路搭建与维护;
2、机房设备、视频会议系统维护;
3、计算机、打印等日常办公设备维护与维修;
4、服务器、ad域、dns、文件共享、iis服务管理与维护;
5、固定资产日常管理及台账更新登记;
6、上级领导交办的其他工作。
任职资格:
1、本科及以上学历,计算机、网络维护等相关专业,两年以上大中型企业同岗位工作经验,熟悉建筑设计行业相关软件者优先。
2、工作责任心强,认真负责,具有良好的沟通协调及逻辑思维能力、踏实认真的工作态度。
3、具有良好的组织、协调能力和较强的团队管理能力。