職責(zé)描述：1. 基于Hadoop與Spark，進(jìn)行海量數(shù)據(jù)模型設(shè)計、數(shù)據(jù)ETL開發(fā)；2. 負(fù)責(zé)基于開源框架的大數(shù)據(jù)的數(shù)據(jù)開發(fā)，包括數(shù)據(jù)提取、分析與結(jié)果整理；3. 負(fù)責(zé)分布式數(shù)據(jù)平臺框架下的數(shù)據(jù)架構(gòu)設(shè)計與開發(fā)，以及數(shù)據(jù)產(chǎn)品開發(fā)；4. 參與公安大數(shù)數(shù)據(jù)模型體系構(gòu)建及算法模型的設(shè)計和開發(fā)；5. 開發(fā)大數(shù)據(jù)自動化運維、監(jiān)控、故障處理工具，監(jiān)控所有基礎(chǔ)設(shè)施組件、應(yīng)用程序，提供緊急應(yīng)急措施。任職要求：1. 計算機、數(shù)學(xué)、統(tǒng)計或相關(guān)專業(yè)本科及以上學(xué)歷，三年以上軟件開發(fā)工作經(jīng)驗，數(shù)據(jù)挖掘和BI分析領(lǐng)域優(yōu)先；2. 至少熟悉一種關(guān)系型數(shù)據(jù)庫如Oracle、mysql等，熟練掌握Hive/SQL，熟悉Spark/Map-Reduce/MPI分布式計算框架，進(jìn)行海量數(shù)據(jù)模型設(shè)計、數(shù)據(jù)ETL開發(fā)；熟悉實時數(shù)據(jù)處理者優(yōu)先；3. 熟練使用Java，熟悉常用的java類庫以及框架；4. 熟練使用Python/Shell/Perl/R語言等其中一種語言優(yōu)先；5. 熟悉回歸分析模型、關(guān)聯(lián)規(guī)則挖掘、分類和聚類算法、協(xié)同過濾算法等數(shù)據(jù)統(tǒng)計模型和挖掘算法，了解完整的數(shù)據(jù)挖掘過程方法論，并有獨立完整的建模實踐經(jīng)驗，優(yōu)先；6.有軌跡分析算法、推薦算法相關(guān)的實際項目經(jīng)驗，優(yōu)先考慮；7. 具有良好的溝通、團隊協(xié)作、解決問題和創(chuàng)新的能力；8.有CCA開發(fā)員認(rèn)證者優(yōu)先。

本公司專業(yè)從事大數(shù)據(jù)、人工智能技術(shù)、云計算、區(qū)塊鏈技術(shù)的咨詢服務(wù)與技術(shù)支持。企業(yè)實力：華為大數(shù)據(jù)企業(yè)培訓(xùn)合作伙伴Cloudera認(rèn)證培訓(xùn)伙伴清數(shù)大數(shù)據(jù)聯(lián)盟會員單位湖南大數(shù)據(jù)人工智能聯(lián)盟會員單位公司服務(wù)的企業(yè)客戶遍布各個行業(yè)，核心客戶包括：中國移動、中國電信、上海聯(lián)通、南方航空、東方航空、花旗銀行、上海銀行、浙江煙草、安徽電力、江西稅務(wù)、四維圖新等。本公司同時也是高校大數(shù)據(jù)人工智能解決方案龍頭企業(yè)，高校合作涉及領(lǐng)域包括高校專業(yè)共建、課題研究、實驗室搭建、師資培訓(xùn)與教學(xué)配套等業(yè)務(wù)。