崗位職責(zé):
1、數(shù)據(jù)架構(gòu)設(shè)計:設(shè)計并優(yōu)化數(shù)據(jù)架構(gòu),確保數(shù)據(jù)的高效性、可擴(kuò)展性和安全性。參與數(shù)據(jù)倉庫、數(shù)據(jù)湖等數(shù)據(jù)存儲解決方案的規(guī)劃和實施。
2、使用SQL、Python、Java等編程語言進(jìn)行數(shù)據(jù)處理、清洗和轉(zhuǎn)換;運(yùn)用Hadoop、Spark、Hive等大數(shù)據(jù)處理框架進(jìn)行大規(guī)模數(shù)據(jù)處理和分析;開發(fā)數(shù)據(jù)ETL(Extract, Transform, Load)流程,實現(xiàn)數(shù)據(jù)的高效遷移和整合。
3、根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)建模,設(shè)計適合的數(shù)據(jù)模型和結(jié)構(gòu);優(yōu)化數(shù)據(jù)查詢性能,提升數(shù)據(jù)處理的效率和準(zhǔn)確性。
4、與產(chǎn)品、運(yùn)營、開發(fā)等部門緊密合作,提供數(shù)據(jù)支持、數(shù)據(jù)分析報表和數(shù)據(jù)優(yōu)化解決方案。參與制定數(shù)據(jù)相關(guān)的技術(shù)標(biāo)準(zhǔn)、流程和規(guī)范,推動數(shù)據(jù)治理體系的建立。
5、參與數(shù)據(jù)平臺、數(shù)據(jù)服務(wù)等的開發(fā)和維護(hù)工作。監(jiān)控系統(tǒng)運(yùn)行狀態(tài),及時發(fā)現(xiàn)并解決潛在的技術(shù)問題。
6、關(guān)注數(shù)據(jù)領(lǐng)域的新技術(shù)、新工具和新方法,持續(xù)學(xué)習(xí)和研究;參與數(shù)據(jù)相關(guān)的創(chuàng)新項目,推動技術(shù)成果的應(yīng)用和落地。
任職要求:
1、本科及以上學(xué)歷,計算機(jī)科學(xué)、數(shù)學(xué)、統(tǒng)計學(xué)或相關(guān)專業(yè),如有物流領(lǐng)域從業(yè)工作經(jīng)歷優(yōu)先考慮。
2、技能要求:熟練掌握SQL語言,能夠進(jìn)行高效的數(shù)據(jù)庫查詢和操作;熟悉Python、Java等至少一種編程語言,具備良好的編程能力;了解Hadoop、Spark、Hive等大數(shù)據(jù)處理框架及其使用方法;熟悉數(shù)據(jù)倉庫、數(shù)據(jù)湖等數(shù)據(jù)存儲解決方案的設(shè)計和實現(xiàn)。
3、擁有5年以上數(shù)據(jù)工程師或相關(guān)領(lǐng)域的工作經(jīng)驗;有大型互聯(lián)網(wǎng)企業(yè)、汽車主機(jī)廠等行業(yè)背景者優(yōu)先考慮。
4、具備良好的邏輯思維能力、學(xué)習(xí)能力和團(tuán)隊合作精神;能夠承受工作壓力,具備較強(qiáng)的責(zé)任心和抗壓能力;對數(shù)據(jù)敏感,具有數(shù)據(jù)驅(qū)動業(yè)務(wù)的意識和能力。