大数据运维工程师工作内容(19篇)
无论是身处学校还是步入社会,大家都尝试过写作吧,借助写作也可以提高我们的语言组织能力。大家想知道怎么样才能写一篇比较优质的范文吗?以下是小编为大家收集的优秀范文,欢迎大家分享阅读。
大数据运维工程师工作内容篇一
i、负责hadoop集群的安装部署、维护及调优:
2、负责spark的安装邮署、维护及调优:
3、负责基于大数据平台开发的应用系统的部署、日常维护、调优和问题处理
4、负责elk 平台的部署及维护。
技能要求:
1 、2年以上大数据运维工仵经验;
2、熟悉hadoop生态圈技术栈及各个组件原理:
⒊、熟练掌握hdfs、hive、hbase、sρark、sqooρ 等组件,具备部署、维护、调优的能力:
4、热悉kylin技术原理,有一定的维护经验优先:
5、掌掇elk的日常维护技能·有一定的维护.经验优先:
6、有一定的hql/sql 性能调优经验;
7、具备基本的 java、python等语言开发能力优先:
8、有较强的沟通、团队协作及学习能力。
大数据运维工程师工作内容篇二
职责:
1,负责软件系统的部署运行;
2、负责业务数据系统接入的规划和实施;
3,理解行业业务,梳理业务数据模型;
4,完成项目实施过程中各类文档的编写、收集、整理、归档;
5,与客户保持密切沟通,建立良好的客户关系,保障良好的客户满意度;
有效的分析和控制客户需求,解决项目实施过程中遇到的质量问题和管理问题。
岗位要求:
1、全日制本科以上学历,软件工程、计算机科学相关专业;
2、3年以上的软件/项目管理实施经验;
3、熟悉linux操作,熟练编写shell/python脚本;
4、了解常用开源分布式系统hadoop/spark/hive/hbase;
5、熟练使用sql语句,熟悉etl工作;
6、熟悉oracle,mysql等关系型数据库;
7、具有强烈的责任感与团队合作精神,出色的沟通及学习能力;
8、有较强的分析问题能力,独立解决问题能力,能接受在客户公司办公。
大数据运维工程师工作内容篇三
职责:
1. 负责大数据平台的规划、部署、监控、系统优化及运维等工作,保障系统7*24小时运营;
2. 为线上服务高效稳定运行负责,支撑业务和数据量的快速扩张,发现并能解决重大故障及性能瓶颈;
3. 深入理解系统平台及大数据相关运维技术,持续优化集群服务架构;
4. 对大数据体系下新技术的调研、应用、对内培训。
职位要求:
1. 至少3年以上大数据运维经验, 深入理解linux系统,运维体系结构;
2. 深度优化hadoop平台mr作业/计算框架/存储技术,提升集群吞吐并降低成本;
3. 具有cdh(或者hdp)/hdfs/yarn/hive/es/kylin/hbase/kafka/spark/storm/flume/impala/hue/kettle/flink等大数据系统的运维经验,有开发经验;
4. 熟悉hadoop生态,有数据安全相关工作经验, 并能对平台cpu/mem/io/网络/调度中一个或多个方面的性能调优;
5. 熟练掌握shell/python中的任意一门脚本语言;
6. 强烈责任感、缜密的逻辑思维能力,良好的团队协作能力,具备良好的项目管理及执行能力;
大数据运维工程师工作内容篇四
职责:
1、负责公司大数据/hadoop/hive/hbase/flink等离线实时数据平台运维保障;
2、负责内部大数据自动化运维以及数据化运营平台开发工作;
3、负责hadoop/hbase等系统的业务监控、持续交付、应急响应、容量规划等;
4、深入理解数据平台架构,发现并解决故障及性能瓶颈,打造一流的数据平台;
5、持续的创新和优化能力,提升产品整体质量,改善用户体验,控制系统成本。
6、善于表达、理解客户数据服务需求,具备数据需求转化落地能力。
任职要求:
1、大学本科及以上学历,计算机或者相关专业;
2、深入理解linux系统,运维体系结构,精于容量规划、性能优化;
3、具备一定的开发能力,精通一门以上脚本语言;(shell/perl/python等),熟悉java等开发语言一种及以上优先;
4、具备很强的故障排查能力,有很好的技术敏感度和风险识别能力;
5、能够承受较大的工作压力,以结果和行动为准则,努力追求成功;
6、熟悉hadoop、hbase、hive、spark、tez等原理并具备管理,配置,运维经验;
7、熟悉分布式系统设计范型,有大规模系统设计和工程实现的了解者优先。
8、具有运营商流量数据加工处理经验者优先。
大数据运维工程师工作内容篇五
职责:
1. 管理公司数据库,提供高可用、高性能数据库系统,并保障系统稳定运行。
2. 负责数据库性能监控与优化,故障处理,数据备份及灾难恢复。
3. 负责数据库自助平台的高可用架构设计和负载均衡的设计和实现。
4. 负责业务系统数据库管理,包括数据库日常维护,系统数据安全以及权限管理、故障处理、日常错误情况处理等。
5. 负责依据业务需求优化数据存储结构,负责数据库系统部署方案的计划、设计和实施。
6. 负责系统数据库定期检查,进行性能分析与调优,充分保证信息系统数据的安全及系统高效运行。
任职资格:
1. 全日制本科及以上学历,计算机或相关专业
2. 熟悉mysql实现原理,innodb,myisam,memory引擎,熟悉存储过程和事务。
3. 熟悉数据库原理、精通数据库核心参数的设置和调整,有规划、设计、部署以及数据库性能优化经验。
4. 具备数据库设计、sql优化能力,能根据业务需求,提供高可用、高性能、可扩展、稳定可靠的数据库解决方案。
5. 了解mongodb等非关系型数据库的特点。了解redis,memcache等内存数据库及缓存系统的原理及实现。
6. 熟悉linux操作系统,对主机、存储、网络有一定的了解, 会使用shell/perl/python中的一门脚本语言。
7. 有hadoop/kafka/spark/elasticsearch相关经验的优先考虑。
大数据运维工程师工作内容篇六
职责:
1. 负责企业无人机光伏巡检系统云端专家系统的运行安全、平稳,为客户提供畅通、快速、良好的服务感受;
2. 负责服务器基础环境的部署、配置、办公软硬件、计算机网络的日常维护和管理,保障公司it设施运行平稳;
3. 负责办公软硬件、网络环境的故障排除、办公设施的规划与改造,不断提高办公it设施的易用性和安全性;
4. 负责公司网站、企业邮箱、业务系统等信息化系统的日常维护工作和基础用户支持;
5. 负责处理公司网络和服务器方面突发事件,紧急事件;
6. 负责公司软件产品的安装指导,承担部分软件售后技术支持工作。
7. 企业临时交办的相关任务。
任职要求
1. 计算机、信息it类专业本科或以上学历,两年以上工作经验;
2. 精通linux操作系统、windows操作系统、了解体系结构,以及邮件、网站等应用系统的维护、管理,熟练掌握python/shell/go/java等至少一门语言;
3. 熟悉业界主流技术,如nginx、tomcat、mysql、postgresq等;
4. 熟悉zabbix、nigos等监控工具,熟悉saltstack、ansible等自动化运维工具;
5. 熟悉最新的计算机配置和服务器配置,并能独立部署,掌握排除一般软硬件故障的办法;
6. 强烈的上进心和求知欲,善于分析和解决问题,较强的学习能力和沟通能力,良好的团队合作精神,能够熟练阅读涉及产品和技术的英文文档;
7. 各种公有、私有云公司工作过,从事相关维护工作优先;有大数据存储架构设计部署、分布式文件管理等经验的优先,有python编程能力的优先;有网站开发编程经验或从事过windows/linux平台上的编程,或了解oracle,mysql,sqi server等数据库中的一个或多个可以进行简单应用开发,或有参与过企业信息化项目经验者优先。
大数据运维工程师工作内容篇七
职责:
负责提供ibm/hp/sun等品牌的小型机、x86服务器、存储及相关操作系统、软件等产品的维保服务和技术支持工作。
负责ibm/hp/sun等品牌产品的故障维修,硬件更换以及现场排错。
负责售前和售后的安装,配置,巡检和交付工作;
负责日常客户的月度或者季度巡检并完成巡检报告。
任职要求:
大专及以上学历,具有3-5年相关小型机运维工作经验,sun小机或者hp小机工作经历优先考虑;
精通sun-solaris操作系统,有丰富的系统问题解决经验和系统维护经验;同时了解hp-unix、ibm-aix架构及运维技术的优先考虑;
精通sun、ibm、hp等软硬件操作,能独立进行操作系统安装配置,双机配置与维护,处理故障、变更操作、性能调优;
良好的硬件故障定位、分析以及问题解决能力;
责任心强,具有良好的沟通协调能力及团队协作精神,有较强的客户服务意识和创新学习能力,能接受短期出差;
大数据运维工程师工作内容篇八
职责:
1) 负责驻场保障拉萨机场的中航信离港前端软件桌面级运维,主要覆盖安装、调试、故障受理与解决;
2) 负责西藏分公司拉萨机场离港系统服务器、小型机、网络设备运维,主要工作包括日常监控、系统演练、应急流程处理、设备安装于调试;
3) 负责辖区支线机场弱电系统与网络设备运维,主要业务包括系统巡检、驻场保障、项目实施等;
4) 负责辖区航空公司弱电系统运维,主要负责桌面级运维;
5) 负责协助业务人员,提供必要的计算机应用技术支持,挖掘客户潜在需求;
6) 协助行政人员,提供必要的计算机应用技术支持;
任职要求:
1)全日制大专以上学历,计算机科学与技术及相关专业毕业
2) 适应高原气候,拉萨市海拔3500米,辖区支线机场海拔超过4000米;
3) 熟练使用office、wps、网络制图等办公软件;
4) 具备优秀的计算机软硬件知识,熟悉vmware、计算机组装;熟悉unix或linux系统操作与维护;熟悉windows系统运维;
5) 熟悉oracle、sqlserver数据库安装与维护,熟悉 sql指令;
6) 熟悉网络设备指令,拥有cisco企业网络资质证书、华为资质证书、国家计算机软考资质证书优先;
7) 愿意在西藏高原地区机场或全国其他机场中短期出差;
大数据运维工程师工作内容篇九
职责:
1、负责客户计算机、基础网络的维护、管理、故障排除等日常工作,确保客户网络日常的正常运作;
2、硬件维护:pc机/笔记本电脑/打印机/办公设备等终端设备的调配及维护并妥善记录;
3、软件维护:操作系统的安装,常用软件的安装维护,计算机及服务器病毒查杀等;
4、对用户视频会议提供服务保障;
5、对日常问题进行跟进,并做好记录,定期提交相关运行报告和工作记录报告;
任职要求:
1、熟练网线布设、模块水晶头的卡接,视频、音频设备的日常操作;
2、办公设备的熟练操作使用;
3、熟练windows及日常办公软件;
4、精神面貌良好;
大数据运维工程师工作内容篇十
职责:
1、负责软件项目或集成项目的实施及售后维护工作,处理服务器系统运行过程中的问题;
2、配合销售人员进行售前咨询、技术支持,引导用户需求并提出咨询建议方案,负责基本客户需求调研、介绍演示等工作;
3、熟悉应用系统底层架构,能通过深度隐患排查对应用架构、数据库架构或配置等进行优化;
4、有一定文档功底,能编写各类专项工作文档、技术文档;
5、反馈项目中遇到的问题,并以文档形式提交归档 ,积极与客户、项目管理人员沟通协调、汇报软件系统运行情况,跟踪运行状态及客户满意度。
任职要求:
1、专科及以上学历,计算机或相关专业。
2、具有良好的沟通协调能力和团队合作精神,能承受压力。
3、熟练掌握服务器windows/linu系统安装及系统日常运维、网络基础环境配置及系统安全策略的配置,独立操作服务器硬raid初始化调试,具备中间件(iis、redis、tomcat等)的安装配置维护及优化经验,包括中间件集群的安装配置和运维;
4、熟练使用数据库操作如oracle、mysql、sqlserver,熟悉sql语句、增删改查、联合查询、索引、表空间、表分区、存储过程等知识;
5、具备2年或以上集成项目软件实施、软件开发经验,智能交通行业经验者优先。
大数据运维工程师工作内容篇十一
职责:
1、负责系统维护、系统日常监控;
2、完成公司软件产品部署、升级、测试、备份及恢复,配合现场人员进行系统调试;
3、收集客户需求,处理客户协调工作;
4、提供内部技术支持、培训及客户培训工作。
任职资格;
1、熟练掌握nginx、tomcat、myspl等服务配置,能够熟练操作数据库,懂开发语言者优先;精通linux各类命令操作更加;
2、熟悉软件工程,相关集成产品,精通安装环境配置,系统调试,安装过程;
3、有较强的独立分析问题和解决问题的能力,在任务繁杂的情况下,有效梳理并合理安排任务优先;
4、有责任感和团队合作精神,自学能力强,能够承受工作压力;
5、具有较强文档编写能力、管理能力、培训能力更加;
6、有团队管理经验优先。
大数据运维工程师工作内容篇十二
1、对现场异常的处理及系统维护;
2、用户权限的新增、删除、关闭;
3、系统各个基础数据的配置;
4、对系统的功能模块编写操作说明;
5、对日常运维,编写运维说明;
6、对新增的功能模块进行培训;
7、对新增的功能模块进行实施;
8、积极参与团队周会,总结每周工作进度,工作表现。
大数据运维工程师工作内容篇十三
职责:
1、负责公司主机房服务器的日常巡检与维护工作,定期检查服务器系统日志,保证公司服务器正常运行;
2、定期检查服务器软硬件,及时处理硬件、软件运行中出现的各种错误,对出现的大小故障作详细的记录,包括故障时间,故障现象、处理方法和结果,保障服务;
3、负责日常定期数据备份和恢复;
4、负责定时检查主机房温湿度、设备运行状态,记录各项异常情况,排除潜在的安全隐患;
5、响应公司各职能部门提出的各类系统it需求,及时提供相应解决方案。
任职要求:
1、3年左右相关服务器运维工作经验;
2、熟悉主流window、linux等服务器系统安装方法及相关安全设置,有独立判断、处理、快速恢复服务器基本异常的能力;
3、熟练掌握各种ad域控方面的知识;熟悉exchange服务器 ;
4、对数据库有认知,熟悉基本备份、导出功能;
5、做事认真,仔细,负责,及时响应处理各类应急事件;
6、有团队精神,能吃苦耐劳,善于沟通联络,有良好的职业操守,保密意识强,工作积极认真,能服从工作安排岗位要求;
7、了解hp、dell、浪潮服务器。
大数据运维工程师工作内容篇十四
职责:
1、对服务器进行日常维护,确保各项服务连续正常运行,无重大事故;
2、研究运维相关技术,配合公司技术架构师根据系统需求制定运维技术方案。
3、负责应用服务器及应用中间件的安装、升级、调试、监控、日常维护、性能优化、故障处理等工作
4、负责公司产品的部署及云服务器日常监控与日常安全检查和风险报告;
5、负责服务器异常或故障的受理、跟踪、解决以及统计分析;
6、负责服务器资源的管理,备份策略的制定及执行监控;
7、处理线上服务器及中间件的故障,挖掘问题根源,规避问题浮现,保障业务连续性;
条件要求:
1、熟悉linux操作系统,熟悉http,tcp/ip协议;
2、熟悉nginx,tomcat,memcache,rabbitmq等常用应用服务器的架设管理与维护并部署监控系统;
3、 熟悉高可用集群、负载均衡集群的规划与搭建,熟悉常规网络安全技术;
4、 熟悉shell、perl,python等脚本编程;
5、 2年以上运维经验,良好的执行和沟通能力,负责过大型互联网产品运维经验优先。
6、熟悉网络常用技术以及产品,如负载均衡技术、cdn(ats等webcache产品)、dns技术(binddns)、云服务器及虚拟化技术;
7、熟悉数据库(mysql、mongodb、radis等)的运行机制和体系架构,熟悉数据库备份和集群,熟悉数据库优化与实践;
大数据运维工程师工作内容篇十五
职责:
实现基于服务,应用的自动化部署;
建立和完善面向服务器,应用的监控和报警技术和机制;
实现可靠的公司运维服务,保证平台7*24小时的稳定运行;
针对公司面向各个地区的核心业务设计并实现弹性的运维保障。
岗位要求
理解运维体系结构,精于容量规划、架构设计、性能优化;
熟悉服务管理、单元部署、自动扩容等运维系统建设;
熟悉故障、监控、预案、扩容工作原理;
理解linux、apache,tomcat,nginx系统原理,具备问题分析和快速处理能力;
熟悉shell,python,perl等脚本类编程工具,并有使用提升效率案例;
对运维工作保持自我驱动的热情,可以响应和处理各种线上运维问题;
具备很强的分析和解决问题的能力,擅长使用工具实现自动化,对于重复问题“0”容忍;
具备系统化排查问题思路,爱折腾,爱分享,优秀的团队协作及沟通能力。
大数据运维工程师工作内容篇十六
职责 :
1、 负责公司各业务系统的后台服务器日常管理,用户安全、网络攻击、病毒、优化、异常监控、双机热备、数据存储等。
2、 对各业务子系统的功能权限、数据权限进行分配和管理。
3、 后台数据库备份、维护,异地灾备,对mysql数据库、redis、rabbitmq、nginx、tomcat的日常维护和管理。
4、 负责操作系统和应用服务器的监控,配合各业务系统运维人员分析错误异常,协助解决系统问题。
5、 负责公司主数据管理工作,协助数据统计维护岗位人员管理好中心主数据。
6、 与公司运营人员进行配合完成网站相应建站任务。
任职要求 :
1、php网站程序开发开发工作经验1年以上,熟练使用php主流网站编程语言及架构,并可以单独完成编写;
2、精通mysql数据库,精通linux系统的安装和常规配置,监控; 熟练掌握javascript html,css.
3、熟悉掌握seo,sem专业技能
4、熟悉cms系统,如:prestashop, wordpress, dedecms、discuz、phpcms、ecshop等开源系统
5、熟悉nginx,熟悉负载均衡技术,对haproxy, keepalived等技术有实战经验者优先;
6、熟悉shell/perl/python编程(至少一种),熟练使用脚本来完成日常系统运维工作;
7、工作认真负责,具备良好的沟通能力、团队协作能力和书面报告能力。
8、有一年以上相关职位工作者及大型网站开发者或者独立完成站点者优先。
大数据运维工程师工作内容篇十七
职责
1.公司产品平台的日常运行管理,处理各种运维事故及事件;
2、负责服务器的规划、调试优化、日常监控、故障处理、数据备份、日志分析等工作;
3、参与运维流程制定,确保任何突发情况都能高效响应;
4、负责服务器的规划部署,对服务器构架和网络进行优化和改进;
5、系统应用及数据的部署;
6、整理各类运维文档,沉淀经验。
岗位要求
1.专科以上学历,5年以上互联网公司linux运维相关经验;
2.精通zabbix监控系统的搭建和维护,能够开发自定义脚本;
3.熟悉nginx/apache/tomcat等web应用服务器部署、优化;
4.数据mysql/pgsql数据库集群的部署,监控,优化;
5.熟练使用shell,perl,python等脚本语言并具备一定的开发能力;
6.熟练自动化配置工具,如ansible、saltstack等;
7.熟悉主流搜索系统solr cloud,elastic search等部署、监控、优化。
大数据运维工程师工作内容篇十八
职责:
1、 负责服务台排班,管理服务台日常运营,业务及时上传下达。
2、 保证服务台服务提供效率,及时发现问题、解决问题。
3、 负责服务纠纷及突发事件的处理工作。
4、 负责对组内员工进行监督和评审。
5、 负责对组内员工进行培训工作。
6、 对服务台运营机制不断优化和改进。
任职要求:
1、大专及以上学历,计算机专业优先。
2、3年以上工作经验,在it行业1年以上同岗位工作经验,带过团队。
3、强有力的组织协调能力,有有效调动团队积极性的能力和方法,。
4、责任心强,有良好团队协作和服务意识,有良好的沟通表达能力、随机应变能力。
大数据运维工程师工作内容篇十九
职责:
1. 负责网站维护、管理与推广,保证网站的安全运营。
2. 负责网站资料的上传与更新,与其他网站运营事务。
3. 独立制定网站的内容结构,设计并负责实施和后期维护。
4. 处理公司内部其他的行政事务。
任职要求:
1. 有网站运营经验者优先。
2. 良好的团队协作能力,踏实肯干。
3. 熟练使用办公软件及其他相关软件技能。
4. 熟练掌握和使用普通话。