職位描述
主要職責:
1、負責設計、開發和維護公司的大數據架構,包括數據倉庫、大數據處理平臺(如Hadoop、Flink、Kafka、Kettle、DataX等)的部署與優化。
2、使用SQL、Hive等工具對海量數據進行ETL處理,確保數據質量及準確性,參與數據分析模型的構建與優化,支持業務團隊的數據需求。
3、利用FineBI、ECharts等工具開發數據可視化產品,為用戶提供直觀的數據洞察和決策支持。
4、大數據處理流程進行性能調優,解決系統瓶頸;監控大數據平臺的運行狀態,及時排查并解決故障,確保系統穩定運行。
5、關注大數據領域的新技術、新工具,如流處理框架、機器學習平臺等,評估并推動其在公司內部的應用落地。
6、負責開發、運維工作過程中相關文檔的編寫工作;
任職要求:
1、本科及以上學歷;
2、3年以上大數據開發經驗;
3、掌握常見分布式解決方案及原理,具有扎實的編程基礎,熟練掌握Java、Python、Scala至少一門開發語言編程;熟悉常用的數據結構與算法;
4、掌握基于Hadoop生態圈開源組件(Hadoop/Hive/Zookeeper/Flink/Kafka等)獨立完成實時及離線任務開發,對各組件的底層原理有一定理解,掌握大數據組件的開發,構建,維護和性能的優化,具備快速定位、解決疑難問題的能力;
5、掌握常用的關系型數據庫、開源數據倉庫架構(Clickhouse,presto、impala)和數倉模型設計,掌握SQL開發及SQL性能調優;
6、對數據業務場景非常敏感,掌握數據倉庫、數據中臺領域知識和管理技能,包括但不局限于:元數據管理、數據質量、性能調優等;
7、掌握Linux命令行操作、shell腳本編寫;
8、熟練掌握使用GIT、Gitlab等代碼管理工具;
9、具備良好的團隊合作精神和溝通能力,能夠清晰表達技術觀點和方案。
公司簡介
廣西交科集團有限公司(廣西交通科學研究院)是一家在廣西乃至全國交通運輸系統中具有重要影響力的高新技術企業,作為交通基礎設施領域綜合解決方案供應商,始終致力于“為建設交通強國貢獻智慧解決方案”,被認定為“國家企業技術中心”,獲評“廣西高新技術百強企業”第二名、“廣西創新活力十強企業”榜首、“廣西創新能力十強企業”排名第二、“2020年度全區數字廣西建設突出貢獻獎先進集體”等稱號。目前現有員工1600余人,其中博士40余人、碩士800余人,教授級高級工程師30余人、高級職稱300余人,享受政府特殊津貼專家2人、自治區優秀專家2人、第一批廣西高層次人才1人,交通運輸部與廣西“新世紀十百千人才工程”第二層次人選2人,是廣西交通建設行業人才小高地。
上班地點
工作地址:
南寧市西鄉塘區廣西交科集團有限公司 查看上班路線
-
可能感興趣的職位
-
工業大數據工程師12000-24000元南寧-西鄉塘區南寧熠生電氣有限責任公司計算機軟件崗位職責: 1、負責制糖行業生產車間的智能化改造、產品各工序智能制造方案規劃設計; 2、負責工業大數據、工業智能類產品中的算法開發、算法編寫與測試工作; 3、負責工業大數據工程項目的數據分析、挖掘與建模,解決工業現場問題; 4、參與工業智能技術開發中的技術可行分析、算法可行性研究; 5、負責機器學習、關聯規則、分類、預測等算法研究與工業應用; 6、有工業大數據人工智能算法開發或產品研發經驗者優先。 任職條件: 1、數學、計算科學、控制、化工等相關專業,本科及以上學歷; 2、較強的人工智能算法理論功底,能熟練應用Matlab、Python進行算法開發; 4、熟練掌握機器學習、深度學習、關聯規則、預測等人工智能算法; 5、熟悉熱電、制糖行業等流程工業基本原理,有工業大數據算法開發或產品研發經驗者優先。2025-08-02黃女士
-
數據開發工程師7000-10000元南寧-青秀區廣西登高投資有限公司電力/水利崗位職責: 1.利用erp系統整合企業數據,創建大宗商品貿易全鏈路數據(采購/倉儲/物流/結算); 2.開發自動化數據采集系統,解決紙質單據/Excel/郵件等多源數據整合問題; 3.創建管理層決策看板,實現「銷量-成本-現金流」實時聯動分析; 4.運用AI工具實現基礎數據預測; 5.制定數據管理規范,包括權限控制、備份策略及災難恢復方案。 任職要求: 1.統招本科及以上學歷,27-35歲,計算機/統計/供應鏈相關專業,有獨立實施數據項目經驗者優先; 2.熟悉友U8/金蝶ERP等系統數據接口,Excel Power系列工具或 Python+Pandas; 3.強自主驅動能力、工作責任心和使命感。2025-08-01王女士
-
大數據開發工程師10000-15000元南寧-青秀區數字廣西集團有限公司計算機軟件崗位職責: 1.參與大數據平臺架構設計和開發工作,包括平臺組件選型及搭建、平臺服務開發。 2.負責海量數據的采集、清洗、處理工作,支持數據開發的技術需求。 3.負責離線/實時的數據存儲和加工處理,保證數據質量,負責數據監體系的建立和維護。 4.持續對系統的技術架構進行改進和優化,提升海量數據的查詢性能和用戶體驗。 5.研究前沿技術,解決實際場景中的業務問題,優化離線/實時大數據計算任務的性能。 崗位要求: 1.大學本科及以上學歷,計算機或相關專業; 2.3年以上大數據開發經驗; 3.熟悉Linux/Unix開發環境,熟悉python/java/scala/shell,扎實的數據結構和算法功底; 4.具有豐富的數據加工處理經驗,對數據處理、數據清洗,數據建模等有深刻認識和實戰經驗; 5.熟練使用flink、spark等進行數據加工;熟悉hive和spark的編寫和性能調優; 6.熟悉常用開源分布式系統,對Hadoop/Hive/Spark/Storm/Flink/HBase中的一項或多項有深入了解,能夠獨立排查及解決分布式系統的問題; 7.熟悉Docker和Kubernetes使用,有相關經驗者優先; 8.清晰的邏輯分析和表達能力,熱愛技術,樂于分享,對行業和技術的發展有自己的見解。2025-08-01szgxzp@gig.cn
-
大數據開發工程師14000-15000元南寧-良慶區廣西桂盛金融信息科技服務有限公司計算機硬件負責大數據相關系統項目管理、技術方案設計、功能開發和產品交付;負責項目開發需求分析與評估;負責軟件質量控制,保證系統開發質量;負責銀行大數據相關系統的生產運維支持;負責相關技術管理和協調工作。 全日制本科及以上學歷,原則上以計算機類、電子類、數學類相關專業為主。 1.原則上年齡在32周歲以下; 2.具有3年及以上大數據系統開發相關崗位從業經歷; 3.具有數據倉庫建設經驗,熟悉數據統計,數據挖掘,算法,對數據具有良好的敏感度,有數據清洗、分析、挖掘和建模經驗; 4.具備豐富的IT行業知識,了解各種技術架構,熟悉大數據架構及原理,熟練使用Hadoop體系的常用組件:Hive、HBase、Spark、Elasticsearch、Kafka、Flink等; 5.思維清晰敏捷,邏輯分析能力強,有獨立進行軟件設計和解決問題的能力; 6.具有較好的文字表達能力、溝通協調能力和抗壓能力; 7.參與過銀行大型項目建設或具有中級及以上專業技術職稱/相關資格證書的,同等條件下優先考慮。2025-07-28黃勇民
-
數據開發工程師10000-15000元南寧深圳思特順科技有限公司計算機硬件崗位職責: 1、熟悉大數據數倉建設相關的平臺工具,為數據項目提供對外技術支持; 2、根據實際數據項目需求,參與數據項目建設,負責數據采集、數據建模、數據標準化、數據產品使用、數據質量、數據共享交換相關工作; 3、完成數據類項目的實施交付,進行數據倉庫主專題庫的設計、建設及維護; 4、監控數據平臺以及相關服務器的運行情況,排查并解決平臺與服務器運行中出現的問題; 5、與業務部門保持良好溝通,理解需求并提供技術支持。 任職資格:能力要求: 1、計算機相關專業,本科學歷,2年以上數據開發相關經驗; 2、2年以上數倉開發經驗,精通數倉分層建設方法; 3、熟練使用Hive/SparkSQL,理解底層原理,熟悉常用優化技巧;至少能使用一種Python、Scala、Java、Shell等腳本語言; 4、具備SQL調優,熟練/精通兩種或兩種以上關系型數據庫的開發、運維操作; 5、熟練掌握主流數倉工具; 6、有政企行業(大數據局)數據中臺實施或運維的經驗優先; 7、熟悉linux操作,熟悉k8s、docker運行原理及常用命令。2025-07-28Dillon
-
數據庫工程師【廣西移動項目】6000-10000元南寧-青秀區崗位職責: 1.參與電信行業運營商O域數據倉庫的設計與建設。 2. 設計用戶畫像、用戶細分等相關的模型與算法。 3. 構建用戶上網行為標簽化體系,分析用戶的地理位置信息。 4. 分析用戶行為和個性化需求,發現潛在商業價值,提供人群精細化分析和個性化服務。 崗位要求: 1.本科及以上計算機、數學或統計專業,三年或以上相關工作經驗。 2.有兩年以上運營商etl開發經驗。 3.熟練使用sql,熟練使用pl/sql工具 。 4.熟悉hadoop生態系統,熟悉HDFS、Hive和HBase等相關組件的功能、性能和擴展,解決并實現業務需求。 5.同時熟悉Hadoop、HBase、Storm、Spark等開源分布式系統者優先。 6.熟悉掌握運營商O域大數據數據處理經驗、信令數據者優先。2025-07-28吳偉
-
數據開發工程師6000-10000元南寧-良慶區廣西數字能源科技有限公司計算機軟件不在南寧勿投簡歷!!!需要有經驗的!!! 崗位描述: 1.根據需求規劃,輸出數據產品方案; 2.開展數據調研,建立數據體系、加工流程與方案; 3.梳理、維護數據指標定義,搭建指標體系,保證指標口徑統一和數據準確; 4.開展數據治理、開發等工作。 職位要求: 1.本科及以上學歷,統計學、數學、數據科學與大數據技術、計算機科學與技術等專業,熟悉 MySQL、PostgreSQL等主流數據庫。 2.良好的數據分析、獨立思考和邏輯思維能力,可熟練使用 sql 進行基本的數據分析; 3.2年以上數據產品、數據開發、數據治理等經驗; 4.極強的數據敏感性、邏輯思維能力與理解能力,有一定的數據分析和需求管理能力; 5.能夠獨立編寫文檔。2025-07-28梁女士
南寧相關熱門崗位

- 廣西交科集團有限公司
- 所在行業 交通/運輸
- 成立時間 25年(2000年4月7日)
- 企業性質 國有企業
- 公司規模 1000-9999人
-
該公司其他職位
-
固廢產業研究技術帶頭人
¥25000-35000元
南寧-西鄉塘區 -
機電工程師(新能源、低空經濟方向)
¥6000-9000元
南寧-西鄉塘區