崗位職責(zé):
負(fù)責(zé)數(shù)據(jù)采集、清洗、存儲(chǔ)及處理,構(gòu)建數(shù)據(jù)管道,確保數(shù)據(jù)質(zhì)量和可用性。
任職要求:
1. 熟悉Hadoop、Spark、Flink等大數(shù)據(jù)處理框架。
2. 精通SQL、NoSQL數(shù)據(jù)庫(kù)(如MySQL、MongoDB、Cassandra)。
3. 具備數(shù)據(jù)清洗、ETL工具(如Apache NiFi、Talend)經(jīng)驗(yàn)。
4. 熟悉物聯(lián)網(wǎng)數(shù)據(jù)采集與處理。