崗位職責:
1、負責大數(shù)據(jù)PaaS平臺組件部署、大數(shù)據(jù)數(shù)據(jù)中臺及應(yīng)用產(chǎn)品布署及日常維護(包括部署、升級、擴容、遷移、排障等),熟悉hadoop、HBase、spark、Hive、Flink、kafka、Kerberos、Ranger、Elasticsearch、Redis等組件的技術(shù)原理和組件的配置及使用,有精通部分組件使用可優(yōu)先考慮;
2、使用prometheus、grafana進行集群監(jiān)控部署;
3、負責K8s/Docker等容器化工具及doris運維和布署;
4、負責大數(shù)據(jù)平臺相關(guān)組件、產(chǎn)品的巡檢、故障排除、數(shù)據(jù)備份等業(yè)務(wù),保證平臺及產(chǎn)品高效、穩(wěn)定運行;
5、負責大數(shù)據(jù)平臺的安全漏洞加固及缺陷修復;
6、負責大數(shù)據(jù)平臺運維相關(guān)技術(shù)文檔的整理和維護;
7、配合完成大數(shù)據(jù)平臺的方案編制、容量規(guī)劃,根據(jù)需求完成組件及產(chǎn)品升級。
【任職要求】
1、本科及以上學歷,5年及以上大數(shù)據(jù)運維工作經(jīng)驗,有電信行業(yè)大數(shù)據(jù)平臺維護經(jīng)驗優(yōu)先;
2、熟悉大數(shù)據(jù)平臺相關(guān)技術(shù),掌握python/shell等語言佳;
3、了解大數(shù)據(jù)平臺架構(gòu),具備常見問題的基本分析和解決能力,熟悉Haodop集群架構(gòu)及原理;
4、能夠進行Linux操作系統(tǒng)的配置、管理及優(yōu)化,能夠獨立排查及解決操作系統(tǒng)層面的問題;
5、具備K8s/Docker等容器化布署經(jīng)驗優(yōu)先,熟悉通過LVS/Keepalived/Nginx/Haproxy技術(shù)實現(xiàn)負載均衡;
6、熟悉Java,有Java項目開發(fā)經(jīng)驗尤佳,有大數(shù)據(jù)后端開發(fā)經(jīng)驗優(yōu)先考慮;
7、做事認真負責,自學能力較強,有較強的書面與口頭溝通表達能力,獨立分析、解決問題的能力。
8、積極的處事心態(tài)和較強的抗壓能力。