崗位職責
1、負責建設(shè)和制定數(shù)據(jù)治理平臺的關(guān)鍵技術(shù)能力和標準,其中包括但不限于數(shù)據(jù)目錄和元數(shù)據(jù)管理、元數(shù)據(jù)上報與采集、全鏈路血緣、數(shù)倉、數(shù)倉建模、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全和數(shù)據(jù)服務(wù)等方面。
2、負責設(shè)計和開發(fā)用于加工離線數(shù)據(jù)和實時數(shù)據(jù)的產(chǎn)品,以滿足數(shù)倉中各個層級之間的數(shù)據(jù)加工;
3、負責開源項目的源碼二開與設(shè)計優(yōu)化;
4、負責項目重構(gòu)、編寫技術(shù)設(shè)計文檔、分支管理、發(fā)版管理、小組成員管理。
任職要求
1、近2年都在一線從事核心開發(fā);
2、熟悉Java 8+,Spring全家桶,微服務(wù)架構(gòu),分布式原理;
3、熟悉ZooKeeper、Redis、Kafka、RocketMQ、ES等常用中間件;
4、熟悉Mysql等關(guān)系型數(shù)據(jù)庫和其原理,熟練編寫復雜SQL腳本,一定的SQL調(diào)優(yōu)知識和經(jīng)驗;
5、熟悉常用的設(shè)計模式,并能靈活使用;
6、有獨立分析和解決問題的能力,溝通能力學習能力強;
加分項:
1、有數(shù)倉的開發(fā)與運維經(jīng)驗;
2、一定程度的技術(shù)管理能力;
3、對著名開源項目,進行過源碼二開、性能優(yōu)化或貢獻;
4、掌握大數(shù)據(jù)組件的基本原理 (HDFS/Flink/Yarn/Spark/Hbase等);
5、有信創(chuàng)環(huán)境國產(chǎn)化適配經(jīng)驗;
6、有Doris等MPP數(shù)據(jù)庫使用經(jīng)驗。