- 工作內(nèi)容：
1、負(fù)責(zé)內(nèi)部數(shù)據(jù)生產(chǎn)工作，編寫(xiě)大數(shù)據(jù)作業(yè)腳本，高質(zhì)量完成數(shù)據(jù)需求。
2、迭代及維護(hù)數(shù)據(jù)采集、清洗、轉(zhuǎn)換和加載流程，提高數(shù)據(jù)生產(chǎn)效率。
3、參與湖倉(cāng)建設(shè)，監(jiān)控系統(tǒng)性能，進(jìn)行系統(tǒng)優(yōu)化。
崗位要求：
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷，1年以上Python開(kāi)發(fā)經(jīng)驗(yàn)及湖倉(cāng)工作經(jīng)驗(yàn)。
2、熟練掌握Python語(yǔ)言，了解Python的常用框架和庫(kù)；熟悉shell語(yǔ)言。
3、了解大數(shù)據(jù)生態(tài)，如mapreduce、spark等。
4、具備良好的數(shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ)，能夠編寫(xiě)高效、可維護(hù)的代碼。
5、熟練使用Git等版本控制工具，具備良好的代碼管理習(xí)慣。
6、有iceberg及doris經(jīng)驗(yàn)者優(yōu)先。
|