1.為調(diào)度系統(tǒng)構(gòu)建數(shù)據(jù)預(yù)處理流水線，保障輸入數(shù)據(jù)質(zhì)量

2.開發(fā)自動化清洗工具，處理缺失/異常/重復(fù)數(shù)據(jù)，實施標準化

3.設(shè)計數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則（完整性/一致性校驗）

4.集成調(diào)度系統(tǒng)（Airflow等），優(yōu)化ETL流程銜接

5.編寫技術(shù)文檔，支持跨團隊數(shù)據(jù)需求

必備技能：

1.熟悉Python（Pandas/NumPy）及SQL

2.數(shù)據(jù)清洗開發(fā)經(jīng)驗，熟悉正則/字符串處理

3.了解數(shù)據(jù)治理框架（DAMA/DCMM）

4.掌握ETL工具（PySpark/GreatExpectations）

5.熟悉Linux環(huán)境與基礎(chǔ)Shell腳本

加分項：

1.調(diào)度系統(tǒng)（Airflow）或云平臺（AWS/Azure）經(jīng)驗

2.數(shù)據(jù)血緣追蹤/元數(shù)據(jù)管理實踐

3.大數(shù)據(jù)生態(tài)（Spark/Hive）基礎(chǔ)