雇員點評標簽
職位描述
SqlHadoop
【崗位職責】
- 數(shù)據(jù)體系建設(shè)：負責公司級數(shù)據(jù)倉庫、數(shù)據(jù)湖、數(shù)據(jù)集市的架構(gòu)設(shè)計與分層建設(shè)（ODS, DWD, DWS, ADS），構(gòu)建穩(wěn)定、高效、可擴展的數(shù)據(jù)模型。
- 數(shù)據(jù)開發(fā)與調(diào)度：負責復(fù)雜業(yè)務(wù)場景的離線（Hive/Spark SQL）及實時（Flink/Spark Streaming）數(shù)據(jù)開發(fā)任務(wù)；維護和優(yōu)化大數(shù)據(jù)調(diào)度系統(tǒng)（如 DolphinScheduler, Airflow），保障數(shù)據(jù)產(chǎn)出的 SLA。
- 數(shù)據(jù)治理：建立并執(zhí)行數(shù)據(jù)質(zhì)量監(jiān)控體系，對數(shù)據(jù)的完整性、一致性、準確性進行校驗與告警；推動數(shù)據(jù)資產(chǎn)化，提升數(shù)據(jù)易用性，降低數(shù)據(jù)存儲與計算成本。
- 數(shù)據(jù)服務(wù)：對接業(yè)務(wù)部門（運營、產(chǎn)品、銷售）的數(shù)據(jù)需求，提供高效的數(shù)據(jù)查詢服務(wù)（如 Impala/Presto/ClickHouse）或 API 數(shù)據(jù)接口。
- 技術(shù)攻堅：參與大數(shù)據(jù)技術(shù)的選型、預(yù)研與落地，解決海量數(shù)據(jù)場景下的性能瓶頸、數(shù)據(jù)傾斜、資源爭搶等疑難問題。
- 基礎(chǔ)能力：計算機、數(shù)學(xué)、統(tǒng)計等相關(guān)專業(yè)本科及以上學(xué)歷，2年以上大數(shù)據(jù)開發(fā)經(jīng)驗。
- 編程能力：熟練掌握 Java、Scala 或 Python 中至少一種開發(fā)語言，具備扎實的編碼能力和良好的代碼規(guī)范意識。
- SQL 能力：精通復(fù)雜 SQL 編寫與性能調(diào)優(yōu)（Hive SQL/Spark SQL/標準 SQL），能夠針對海量數(shù)據(jù)場景進行查詢優(yōu)化。
- 計算引擎：
- 熟悉 Hadoop 生態(tài)（HDFS, YARN, Hive）。
- 精通 Spark（Core/SQL/Streaming）或 Flink 原理及開發(fā)，能夠獨立完成實時/離線任務(wù)的開發(fā)與優(yōu)化。
- 熟悉 Hadoop 生態(tài)（HDFS, YARN, Hive）。
- 數(shù)據(jù)建模：精通數(shù)據(jù)倉庫理論（如 Kimball 維度建模、Inmon 范式建模），熟悉數(shù)倉分層架構(gòu)及常見模型設(shè)計（如星型模型、雪花模型）。
- 工具鏈：熟悉 DataWorks、DolphinScheduler、Airflow 等至少一種調(diào)度工具；熟悉 Kafka、ClickHouse、Doris、HBase 等常見大數(shù)據(jù)組件者優(yōu)先。
- 軟素質(zhì)：具備強烈的責任心、良好的邏輯思維能力、跨部門溝通協(xié)作能力以及較強的抗壓能力。
工作地點
北京海淀區(qū)金運大廈1樓
認證資質(zhì)
營業(yè)執(zhí)照信息
相似職位
- 中級大數(shù)據(jù)工程師9000-12000元
北京 - 朝陽
杭州劍齒虎企業(yè)管理咨詢有限公司 - 醫(yī)療數(shù)據(jù)建模-北京1.5-2.2萬
北京 - 海淀
冠新軟件股份有限公司 北京 - 昌平
卓望信息技術(shù)(北京)有限公司- 中級數(shù)據(jù)工程師1.5-2萬
北京 - 朝陽
太極計算機股份有限公司 北京 - 昌平
北京開源匯智科技有限公司北京 - 石景山
中國銀行保險信息技術(shù)管理有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
宋女士/招聘者
三日內(nèi)活躍立即溝通
南京邁特望科技股份有限公司
南京邁特望科技股份有限公司成立于2000年，注冊資本4692.8萬元，在職員工3000+人，于2016年8月10日在新三板掛牌，股票代碼NEEQ:838955。公司主要從事I行業(yè)解決方案、智慧養(yǎng)老、020電子商務(wù)三大領(lǐng)域，為客戶提供T人力外包解決方案、智慧養(yǎng)老解決方案、智能家居售后服務(wù)解決方案，業(yè)務(wù)遍及國內(nèi)及日本等市場。公司旗下現(xiàn)有江蘇鎖安科技等20家分子公司南京邁特望科技股份有限公司是高新技術(shù)企業(yè)、軟件企業(yè)，擁有發(fā)明專利2項、軟件著權(quán)65項、軟性產(chǎn)品26項，獲得了ISO9001質(zhì)量管理體系證、ISO27001信息安全管理體系認證、1SO20000T服務(wù)管理體系認證S014001環(huán)境管理體系認證、1SO45001職業(yè)健康安全管理體系認證CMMI3軟性能力成熟度模型集成三級、CS2信息系統(tǒng)建設(shè)和服務(wù)能力評、AAA級信用企業(yè)、南京市信用管理培訓(xùn)合格企業(yè)證書、南京市工程技術(shù)研究中心等資質(zhì)。公司是南京國際服務(wù)外包企業(yè)協(xié)會理事單位、養(yǎng)老服務(wù)信息化建設(shè)工作委員會(SSIDC)核心委員、人力資源產(chǎn)業(yè)協(xié)會理事單位、人工智能行業(yè)協(xié)會會員單位、江蘇省信息化協(xié)會會員單位、江蘇省老齡產(chǎn)業(yè)協(xié)會理事單位、軟件谷云計算大數(shù)據(jù)信息安全產(chǎn)業(yè)聯(lián)盟會員單位，并先后獲得了江蘇省技術(shù)先進型服務(wù)企業(yè)、江蘇省試信經(jīng)營示范單位等榮譽，是亞信、恒生電子、南瑞、中電鴻信、電信、微軟、360、中興、浩航、蘇寧、上?？?、中移物聯(lián)、北斗衛(wèi)星研究院、江蘇海隆、富士通、帆軟、深信服、中通服、中控、感動科技、中國民生銀行、京東五星、中建八局、拜特、中電智恒、上海道客、揚州萊斯等公司的核心合作伙伴。
公司主頁