數據架構資深專家
學 歷:碩士研究生及以上
工作類型:全職
招聘人數:若干
發布時間:2021-02-18
職位描述
1、負責Hadoop大數據平臺、AI平臺架構設計和軟件技術選型,參與部門技術發展路線的制定和實踐,以及大數據平臺、AI平臺相關標準制定等工作;
2、負責Hadoop生態圈相關組件功能、性能優化設計和實施落地工作;
3、參與團隊技術人才培養,指導團隊成員工作,提升團隊研發能力;
4、研究大數據技術、AI技術發展動態,研究新型計算框架,并能夠提出優化解決方案;
5、負責大數據平臺、AI平臺的架構審核、業務監控、應急響應、容量規劃、技術攻關等,跟進并處理大數據平臺系統問題及故障解決跟蹤優化,不斷提升集群服務質量,并根據實際情況進行優化;
6、負責企業數據產品和數據倉庫等相關需求分析、數據規劃、數據模型設計等工作;
7、負責企業數據資產地圖、數據標準、數據安全、數據質量和生命周期管理等設計工作;
8、深入業務,理解業務的數據需求,和數據產品、算法團隊等合作,挖掘數據價值,賦能業務。
任職要求
學歷及工作年限要求:
計算機相關專業碩士及以上學歷,10年以上相關工作經驗。
任職要求滿足以下三種類型之一:
一、
1、熟悉Hadoop生態圈的相關組件,深度了解HDFS、Hive、Impala、HBase、Yarn等組件的工作原理和使用,具備2年以上Hadoop調優經驗;
2、了解大數據平臺虛擬化、存儲計算分離、基礎架構服務化等構建方法,熟悉Hadoop集群安全管控方案,并能熟練使用Kerberos、Sentry等構建集群的安全管控體系;
3、熟悉Spark、Flink等計算組件,并至少有2個項目的實施經驗;
4、熟練掌握Java語言、Python語言或Scala語言之一,具備3年以上使用經驗;
5、熟練掌握Linux操作系統,并能熟練使用Shell編程;
6、有較大規模集群規劃、監控與運維工作經驗者優先;
7、良好的自我學習能力、自我管理能力、溝通能力和團隊協作能力;
8、5年以上大數據平臺架構領域工作經驗。
二、
1、對k8s、docker、etcd等云原生相關組件有較深入了解,并具有一定的運營能力;
2、精通golang,有對k8s進行二次開發能力更佳;
3、熟悉容器網絡,對如flannel、calico等有所了解;
4、熟悉分布式存儲,對ceph等有所了解;
5、熟悉Linux基本操作,熟悉算法與數據結構;
6、具備與崗位相適應的數據科學、機器學習、深度學習基礎知識體系;
7、具有大型項目架構經驗、高性能集群建設經驗者優先。
三、
1、有數據架構解決方案方面的經驗,如數據倉庫、數據集市、數據中臺等;
2、熟悉數據倉庫方法論,深入了解數據倉庫技術體系,并支撐過大規模實際業務場景;
3、參與過企業數據治理,如數據模型、數據標準、質量體系的建設工作;
4、熟悉金融業務,有金融行業經驗背景者優先;
5、善于溝通,能快速理解業務場景,具備優秀的技術和業務結合的能力。
聯系我們時,請一定說明在“銀行招聘網”上看到的,謝謝!
熱門標簽: