職位描述
該職位還未進行加V認(rèn)證,請仔細(xì)了解后再進行投遞!
一、崗位工作職責(zé)
1.負(fù)責(zé)數(shù)據(jù)源的采集、清洗、轉(zhuǎn)換及集成,確保數(shù)據(jù)的完整性和準(zhǔn)確性。參與多種業(yè)務(wù)數(shù)據(jù)的建模和數(shù)據(jù)內(nèi)容的開發(fā)與迭代;
2.基于數(shù)據(jù)中臺進行大數(shù)據(jù)的處理和開發(fā),編寫高效的數(shù)據(jù)處理邏輯,確保數(shù)據(jù)的高效傳輸與存儲;
3.基于數(shù)據(jù)治理方案,開展數(shù)據(jù)質(zhì)量監(jiān)控,進行數(shù)據(jù)清洗和數(shù)據(jù)標(biāo)準(zhǔn)化管理,確保數(shù)據(jù)倉庫中的數(shù)據(jù)可靠、準(zhǔn)確,能夠支撐公司多樣化的業(yè)務(wù)分析需求;
4.與產(chǎn)品及業(yè)務(wù)團隊密切協(xié)作,理解并轉(zhuǎn)化業(yè)務(wù)需求,設(shè)計合理的數(shù)據(jù)模型、數(shù)據(jù)挖掘模型和數(shù)據(jù)內(nèi)容產(chǎn)品;
5.參與數(shù)據(jù)治理、數(shù)據(jù)產(chǎn)品與應(yīng)用開發(fā),挖掘數(shù)據(jù)價值;
6.參與數(shù)據(jù)運維工作,包括技術(shù)運營、數(shù)據(jù)答疑、數(shù)據(jù)作業(yè)運維;
7.負(fù)責(zé)平臺計算集群的全生命周期管理,涵蓋部署、監(jiān)控、容量規(guī)劃、版本升級與架構(gòu)演進;
8.建立完善的資源管理與調(diào)度體系,優(yōu)化GPU/CPU計算資源的分配效率和利用率,支撐大規(guī)模分布式訓(xùn)練和推理任務(wù)穩(wěn)定運行。
9.建立完善的集群監(jiān)控告警與指標(biāo)體系,實現(xiàn)對集群健康度、組件性能及業(yè)務(wù)作業(yè)的實時可觀測性,具備在復(fù)雜故障場景下的快速定位與恢復(fù)能力;
10.主導(dǎo)平臺性能優(yōu)化與成本治理工作,包括計算資源調(diào)度調(diào)優(yōu)(YARN)、存儲生命周期管理(HDFS/對象存儲)、計算引擎(Spark/Flink)參數(shù)優(yōu)化及作業(yè)級資源管控;
11.設(shè)計并實施大數(shù)據(jù)平臺的容災(zāi)備份、數(shù)據(jù)安全與權(quán)限管控方案,確保數(shù)據(jù)合規(guī)性及跨可用區(qū)/跨區(qū)域的服務(wù)連續(xù)性;
12.推動運維自動化建設(shè),通過 Ansible/Python/Go 等工具開發(fā)自動化運維腳本與平臺功能,提升集群操作效率與標(biāo)準(zhǔn)化水平。
二、崗位任職要求
1.本科及以上學(xué)歷,數(shù)據(jù)科學(xué)、計算機、統(tǒng)計、數(shù)學(xué)等與數(shù)據(jù)處理相關(guān)專業(yè),1年以上工作經(jīng)驗;
2.熟練使用Scala、Python或Java中的至少一門語言進行數(shù)據(jù)開發(fā),精通SQL及查詢性能優(yōu)化;
3.熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗,包括Hdfs、Mapreduce、Hive、Spark、Kafka、Flink等,有流式計算相關(guān)項目開發(fā)經(jīng)驗;
4.具備實時數(shù)倉建設(shè)經(jīng)驗,熟悉Doris、ClickHouse等實時OLAP引擎;
5.深入了解常用的數(shù)據(jù)建模理論,具有豐富的數(shù)據(jù)模型設(shè)計及ETL開發(fā)經(jīng)驗,可獨立把控數(shù)據(jù)倉庫各層級的設(shè)計;
6.對數(shù)據(jù)敏感,有較強的邏輯分析能力,有豐富的數(shù)據(jù)處理和分析經(jīng)驗,有復(fù)雜業(yè)務(wù)和算法的數(shù)據(jù)平臺建設(shè)經(jīng)驗優(yōu)先;
7.熟悉主流的數(shù)據(jù)治理方法論,具備數(shù)據(jù)治理相關(guān)項目實施經(jīng)驗,有CDGA、CDMP或大數(shù)據(jù)開發(fā)等相關(guān)認(rèn)證者優(yōu)先;
8.熟悉主流廠商數(shù)據(jù)中臺產(chǎn)品,有百度EDAP、BMR等相關(guān)平臺數(shù)據(jù)開發(fā)經(jīng)驗優(yōu)先;
9.工作認(rèn)真負(fù)責(zé),有良好的團隊合作精神和溝通能力。
1.負(fù)責(zé)數(shù)據(jù)源的采集、清洗、轉(zhuǎn)換及集成,確保數(shù)據(jù)的完整性和準(zhǔn)確性。參與多種業(yè)務(wù)數(shù)據(jù)的建模和數(shù)據(jù)內(nèi)容的開發(fā)與迭代;
2.基于數(shù)據(jù)中臺進行大數(shù)據(jù)的處理和開發(fā),編寫高效的數(shù)據(jù)處理邏輯,確保數(shù)據(jù)的高效傳輸與存儲;
3.基于數(shù)據(jù)治理方案,開展數(shù)據(jù)質(zhì)量監(jiān)控,進行數(shù)據(jù)清洗和數(shù)據(jù)標(biāo)準(zhǔn)化管理,確保數(shù)據(jù)倉庫中的數(shù)據(jù)可靠、準(zhǔn)確,能夠支撐公司多樣化的業(yè)務(wù)分析需求;
4.與產(chǎn)品及業(yè)務(wù)團隊密切協(xié)作,理解并轉(zhuǎn)化業(yè)務(wù)需求,設(shè)計合理的數(shù)據(jù)模型、數(shù)據(jù)挖掘模型和數(shù)據(jù)內(nèi)容產(chǎn)品;
5.參與數(shù)據(jù)治理、數(shù)據(jù)產(chǎn)品與應(yīng)用開發(fā),挖掘數(shù)據(jù)價值;
6.參與數(shù)據(jù)運維工作,包括技術(shù)運營、數(shù)據(jù)答疑、數(shù)據(jù)作業(yè)運維;
7.負(fù)責(zé)平臺計算集群的全生命周期管理,涵蓋部署、監(jiān)控、容量規(guī)劃、版本升級與架構(gòu)演進;
8.建立完善的資源管理與調(diào)度體系,優(yōu)化GPU/CPU計算資源的分配效率和利用率,支撐大規(guī)模分布式訓(xùn)練和推理任務(wù)穩(wěn)定運行。
9.建立完善的集群監(jiān)控告警與指標(biāo)體系,實現(xiàn)對集群健康度、組件性能及業(yè)務(wù)作業(yè)的實時可觀測性,具備在復(fù)雜故障場景下的快速定位與恢復(fù)能力;
10.主導(dǎo)平臺性能優(yōu)化與成本治理工作,包括計算資源調(diào)度調(diào)優(yōu)(YARN)、存儲生命周期管理(HDFS/對象存儲)、計算引擎(Spark/Flink)參數(shù)優(yōu)化及作業(yè)級資源管控;
11.設(shè)計并實施大數(shù)據(jù)平臺的容災(zāi)備份、數(shù)據(jù)安全與權(quán)限管控方案,確保數(shù)據(jù)合規(guī)性及跨可用區(qū)/跨區(qū)域的服務(wù)連續(xù)性;
12.推動運維自動化建設(shè),通過 Ansible/Python/Go 等工具開發(fā)自動化運維腳本與平臺功能,提升集群操作效率與標(biāo)準(zhǔn)化水平。
二、崗位任職要求
1.本科及以上學(xué)歷,數(shù)據(jù)科學(xué)、計算機、統(tǒng)計、數(shù)學(xué)等與數(shù)據(jù)處理相關(guān)專業(yè),1年以上工作經(jīng)驗;
2.熟練使用Scala、Python或Java中的至少一門語言進行數(shù)據(jù)開發(fā),精通SQL及查詢性能優(yōu)化;
3.熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗,包括Hdfs、Mapreduce、Hive、Spark、Kafka、Flink等,有流式計算相關(guān)項目開發(fā)經(jīng)驗;
4.具備實時數(shù)倉建設(shè)經(jīng)驗,熟悉Doris、ClickHouse等實時OLAP引擎;
5.深入了解常用的數(shù)據(jù)建模理論,具有豐富的數(shù)據(jù)模型設(shè)計及ETL開發(fā)經(jīng)驗,可獨立把控數(shù)據(jù)倉庫各層級的設(shè)計;
6.對數(shù)據(jù)敏感,有較強的邏輯分析能力,有豐富的數(shù)據(jù)處理和分析經(jīng)驗,有復(fù)雜業(yè)務(wù)和算法的數(shù)據(jù)平臺建設(shè)經(jīng)驗優(yōu)先;
7.熟悉主流的數(shù)據(jù)治理方法論,具備數(shù)據(jù)治理相關(guān)項目實施經(jīng)驗,有CDGA、CDMP或大數(shù)據(jù)開發(fā)等相關(guān)認(rèn)證者優(yōu)先;
8.熟悉主流廠商數(shù)據(jù)中臺產(chǎn)品,有百度EDAP、BMR等相關(guān)平臺數(shù)據(jù)開發(fā)經(jīng)驗優(yōu)先;
9.工作認(rèn)真負(fù)責(zé),有良好的團隊合作精神和溝通能力。
工作地點
地址:昆明西山區(qū)滇池路1417號云天化集團
??
點擊查看地圖
詳細(xì)位置,可以參考上方地址信息
求職提示:用人單位發(fā)布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓(xùn)費、身份證、畢業(yè)證等),均涉嫌違法,請求職者務(wù)必提高警惕。
職位發(fā)布者
HR
云南云天化信息科技有限公司
-
IT服務(wù)·系統(tǒng)集成
-
51-99人
-
公司性質(zhì)未知
-
滇池路1417號
相似職位
-
水暖施工員 面議應(yīng)屆畢業(yè)生 大專中航建設(shè)集團有限公司
-
給排水專業(yè)工程師(云南分院) 8000-12000元應(yīng)屆畢業(yè)生 不限中國市政工程西南設(shè)計研究總院有限公司
-
環(huán)保業(yè)務(wù)技術(shù)經(jīng)理 面議應(yīng)屆畢業(yè)生 不限昆明洲創(chuàng)科技有限公司
-
教務(wù)科科長 6000-8000元應(yīng)屆畢業(yè)生 本科昆明華航技工學(xué)校
-
生產(chǎn)支持專員 面議應(yīng)屆畢業(yè)生 不限云南蕓嶺鮮生農(nóng)業(yè)發(fā)展有限公司
-
玉溪短期小時工-17一個小時 面議應(yīng)屆畢業(yè)生 不限成都淺予企業(yè)管理有限公司

1年以上
本科
2026-02-25 17:58:49
1153人關(guān)注
注:聯(lián)系我時,請說是在云南人才網(wǎng)上看到的。
