職位描述
職責:1. 設計與開發ETL流程:2. 數據管道優化:3. 數據集成與管理:4.GCP Dataflow開發:6. 自動化與監控:7. 數據治理與安全:8. 文檔與知識共享:任職要求:- 教育背景:- 計算機科學、信息系統或相關領域的學士學位。- 經驗:- 至少5年數據工程或ETL開發行業經驗,重點關注Data Stage和GCP。- 有設計和實施ETL解決方案的經驗,包括數據建模、數據倉庫和SQL開發。- 技術技能:- 熟悉云服務(如BigQuery、Dataflow、Cloud Storage、Pub/Sub)及其在數據工程中的應用。- 有基于云的解決方案經驗,尤其是GCP,持有云認證者優先。- 具備批處理和流式處理的大數據經驗,熟悉大數據生態系統(如Hadoop、HBase、Hive、MapReduce、Kafka、F****、Spark等)。- 熟悉Java和Python在云/大數據平臺上的數據操作。
企業介紹
軟通動力——中國領先的技術服務提供商及全球客戶首選合作伙伴
軟通動力是中國領先的技術服務提供商,立足中國,服務全球市場。軟通動力具有端到端“軟件+服務”綜合服務能力,服務范圍包括:咨詢服務、解決方案及系統集成服務、IT外包及業務流程外包服務等。在高科技/通信、銀行/企業金融/保險、電力/能源/水務/環保、交通/物流、汽車/制造、零售/電商等10多個重要行業及業務領域,軟通動力具有強大的縱深服務優勢。
過去,軟通動力深刻理解客戶需求,是企業盈利和成長的最佳合作伙伴;今天,軟通動力充分把握科技大勢,借助云計算、移動互聯、大數據等新興技術手段,和合作伙伴一起推出創新型解決方案,致力于幫助我們的客戶成為智慧的政府和智慧的企業;未來,軟通動力將不懈努力,以創新思維和領先技術,為客戶創造可持續的價值。
軟通動力于2001年創立,全球總部設于北京,在全球設有30多個分支機構,28個交付中心。員工總數超過1萬8千人,服務數百家中國及海外客戶。