主頁 > 資料庫 > 研產供銷資料一體化,解碼汽車集團企業的資料治理之道

研產供銷資料一體化,解碼汽車集團企業的資料治理之道

2023-07-07 08:51:04 資料庫

OTA(Over-The-Air,空中下載技術),是汽車使用的一種遠程無線升級技術,車主只要保持聯網的狀態,汽車就可以像手機一樣進行系統升級,OTA升級最大的好處是,不管對車輛進行常規的升級還是大面積出現軟體問題需要修復,都可以通過OTA來解決,

資料顯示,2022年中國乘用車OTA裝配量達到765萬輛,較2021年增長285萬輛,隨著技術的不斷發展,中國乘用車裝配量將不斷提升,預計到2023年中國OTA裝配車輛將達到1400萬輛,

“硬體預埋+軟體OTA持續升級”已經逐漸成為當下車企的主流策略,車輛被售出之后,車企仍然可以通過OTA在線升級繼續為客戶提供產品更新/升級服務,

以某車企為例,作為具有國際水準的中國汽車龍頭企業,該車企已形成研發制造的集成一體化產業鏈,從研發、供應鏈、生產及質量管理、銷售渠道等方面,均具有顯著的規模和資源優勢,該車企在數字化道路上步步為營,逐步打通產品研發、制造、營銷、用車、用戶運營、售后服務等全產業鏈環節,構建“以人為中心”的數字化服務體系,

然而,汽車產業普遍存在因產業鏈條長導致資料分散的痛點,資料分散的情況,使得企業以往積累的基礎資料難以發揮增值作用,資料利用率低,另一方面,往往企業內部也會因缺乏統一的資料標準,導致業務難以協同發展,各個版塊系統不兼容,資料資源難以共享,

01 大資料開發治理平臺:集團資料整體智治、高效協同

該車企在數字化行程中,也同樣面臨類似的境遇,具體來說,比如因涉及研發、制造、零部件、守候、駕駛等產業鏈條,各機構資料存盤分散,自成體系,資料的統一管理困難;

雖然積累了大量基礎資料,但從中挖掘出決策性資料并不多,資料資源的增值作用還沒有在管理決策程序中充分發揮,資料資源利用率低;

系統之間集成度較低、互聯性較差,缺乏統一的標準體系,業務難以協同發展;

最后,因各參與者采用的資料庫系統不同,資訊編碼、技術規范不統一、資料格式不一致,導致資料異構嚴重,跨集團與板塊的資料無法及時共享,缺乏完善的共享機制,資料資源難以共享和轉換,

針對以上痛點,袋鼠云基于“整體智治、高效協同”的原則,為該車企構建大資料開發治理平臺,建立資料中樞,實作OTA及相關研發資料集成、治理和規范化管理,驅動業務創新,

file

基于數堆疊,袋鼠云為該車企搭建了大資料開發治理平臺,完成OTA資料從資料集成、資料建模開發、資料治理與資料服務完整資料鏈條功能實作,確保研發資料在研產供銷全生命周期中流轉的準確性和一致性,

平臺就如人體的大腦中樞一般,統籌調度集團所有的資料使用,賦予企業精準決策、業務創新的能力,

從該車企的角度而言,之所以選擇使用數堆疊,原因有四:首先,數堆疊開放兼容性強,支持私有云、公有云、跨云部署,具備多計算集群對接、底層組件兼容性特征,可完美兼容該車企目前的BMR、GDMP集群,產品所有模塊均可提供SDK介面,能夠輕松適應該車企復雜的技術架構體系,

其次,數堆疊易用穩定,可視化的操作界面讓車企的開發人員以寫SQL的方式就可以進行資料開發,大大降低開發成本;靈活的模塊化產品及自主可控的部署模式也大大節約了該車企建設資料平臺的成本;并且產品具備金融級安全保護,可自如應對車企的資料并發、千萬級任務調度場景,

再次,經過8年的市場檢驗,數堆疊產品功能強大齊全,能夠提供全方位的資料治理能力,適應該車企復雜的集團型組織及業務體系,保障資料安全及業務穩定運行,

最后,技術可控,數堆疊具備自研資料集成工具、調度引擎、運維監控及優化其他計算引擎的能力,核心原始碼自主可控,

file

袋鼠云以組合拳的方式為該車企完成了大資料開發治理平臺搭建,對接了6套BMR、GDMP集群,滿足了25個以上產品需求,累計完成10次升級,目前可以支撐控股IT(人力資源)、研究院前瞻研究部、研究院工程發布中心、人力資源部-資料質量、商用車視頻監控等業務部門同時使用,

數字化轉型,資料先行,大資料開發治理平臺成為該車企的數字化底座,確保車企在數字化研發、數字化制造、數字化營銷、以及數字化體驗等方面進行持續且有效的迭代,

02 OTA資料質量檢查:以高質量資料驅動業務創新

由于汽車行業研產銷等資料鏈路長,上下游資料的準確性、一致性難以保證,因此,需要著眼于未來資料持續高質量運營的布局,使用工具化手段管控和落實對OTA及相關研發資料管理,完善資料治理能力,以高質量資料驅動業務創新,

大資料開發治理平臺的落地,幫助該車企完成了OTA資料從資料集成、資料建模開發、資料治理與資料服務完整資料鏈條功能實作,確保研發資料在研產供銷全生命周期中流轉的準確性和一致性,

具體來說,在應用層實作了SW-BOM檢查、AM-BOM檢查、BSS檢查、車輛裝配檢查、車輛檔案檢等5大場景,23個檢查點的OTA資料質量檢查;在匯總層形成了研發主題模型、制造主題模型和銷售主題模型等13個業務主題模型;在明細層按照資料主題劃分了研發域、制造域和銷售域3個資料域,并按照提取的27個資料開發標準實作資料標準化;在貼源層針對TC、DT、SAP、MES、OTA這5個不同的業務系統對接方案實施落地,截至目前已接入共39張表,31億條資料,

file

對于該車企內部而言,袋鼠云的價值在于幫助其建立了以資料為中心的質量管理體系,確保研發資料在研產供銷全生命周期中流轉的準確性和一致性,實作OTA資料質量、OTA車輛生產資訊檔案準確率、OTA車輛軟體解算的準確率、OTA車輛可售功能特征解算準確率的全面提升,建立了OTA運營高可用標桿,

對于消費者而言,袋鼠云通過保證該車企OTA資料質量,為OTA資料質量的持續提升提供基本機制和路線圖,最終,該車企通過對資料質量的持續關注與不斷改進,使OTA安全可靠地服務于客戶,提升OTA升級成功率,實作“可進化的汽車”“無需到店即可升級”“車輛常用常新”的場景,

消費者資料安全法、汽車資料安全法的陸續出臺,進一步規范了汽車資料處理活動,促進汽車資料合理開發利用,袋鼠云將依據相關法律法規進行資料安全監控和整合,加強重要資料安全保護,助力車企安全、合理開發利用資料,

《數堆疊產品白皮書》:https://www.dtstack.com/resources/1004?src=https://www.cnblogs.com/DTinsight/p/szsm

《資料治理行業實踐白皮書》下載地址:https://www.dtstack.com/resources/1001?src=https://www.cnblogs.com/DTinsight/p/szsm

想了解或咨詢更多有關袋鼠云大資料產品、行業解決方案、客戶案例的朋友,瀏覽袋鼠云官網:https://www.dtstack.com/?src=https://www.cnblogs.com/DTinsight/p/szbky

同時,歡迎對大資料開源專案有興趣的同學加入「袋鼠云開源框架釘釘技術qun」,交流最新開源技術資訊,qun號碼:30537511,專案地址:https://github.com/DTStack

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/556751.html

標籤:大數據

上一篇:05、etcd 讀請求執行流程

下一篇:返回列表

標籤雲
其他(162184) Python(38266) JavaScript(25527) Java(18291) C(15238) 區塊鏈(8275) C#(7972) AI(7469) 爪哇(7425) MySQL(7288) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5876) 数组(5741) R(5409) Linux(5347) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4613) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2438) ASP.NET(2404) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) HtmlCss(1992) .NET技术(1985) 功能(1967) Web開發(1951) C++(1942) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1882) .NETCore(1863) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • 研產供銷資料一體化,解碼汽車集團企業的資料治理之道

    OTA(Over-The-Air,空中下載技術),是汽車使用的一種遠程無線升級技術。車主只要保持聯網的狀態,汽車就可以像手機一樣進行系統升級。OTA升級最大的好處是,不管對車輛進行常規的升級還是大面積出現軟體問題需要修復,都可以通過OTA來解決。 資料顯示,2022年中國乘用車OTA裝配量達到765 ......

    uj5u.com 2023-07-07 08:51:04 more
  • 05、etcd 讀請求執行流程

    > 本篇內容主要來源于自己學習的視頻,如有侵權,請聯系洗掉,謝謝。 ### 1、etcd讀請求概覽 etcd是典型的`讀多寫少`存盤,在我們實際業務場景中,讀一般占據2/3以上的請求。一個讀 請求從client通過`Round-robin(輪詢)`負載均衡演算法,選擇一個etcd server節點,發 ......

    uj5u.com 2023-07-06 09:17:26 more
  • es筆記三之term,match,match_phrase 等查詢方法介紹

    > 本文首發于公眾號:Hunter后端 > 原文鏈接:[es筆記三之term,match,match_phrase 等查詢方法介紹](https://mp.weixin.qq.com/s/3tzD8dEr592WNJFH_1bKRw) 首先介紹一下在 es 里有兩種存盤字串的欄位型別,一個是 ke ......

    uj5u.com 2023-07-06 09:17:16 more
  • Spark的一些重要概念

    # Shuffle的深入理解 什么是Shuffle,本意為洗牌,在資料處理領域里面,意為將數打散。 問題:shuffle一定有網路傳輸嗎?有網路傳輸的一定是Shuffle嗎? ## Shuffle的概念 通過網路將資料傳輸到多臺機器,資料被打散,但是有網路傳輸,不一定就有shuffle,Shuffl ......

    uj5u.com 2023-07-06 09:16:59 more
  • 向量資料庫:新一代的資料處理工具

    向量資料庫是一種特殊型別的資料庫,它可以存盤和處理向量資料。向量資料通常用于表示多維度的資料點,例如在機器學習和人工智能中使用的資料。在向量資料庫中,資料被表示為向量,這些向量可以在多維空間中進行比較和搜索。 ......

    uj5u.com 2023-07-06 09:16:42 more
  • 基于袋鼠云實時開發平臺開發 FlinkSQL 任務的實踐探索

    隨著業務的發展,[實時場景](https://www.dtstack.com/dtinsight/streamworks?src=https://www.cnblogs.com/DTinsight/archive/2023/07/05/szsm)在各個?業中變得越來越重要。?論是?融、電商還是物流,實時資料處理都成為了其中的關鍵環節。Flink 憑借其強?的[流處理特性](https://www.dts ......

    uj5u.com 2023-07-06 09:16:26 more
  • Mysql進階篇(一)之存盤引擎

    # 一. MySQL體系結構 ![](https://tcs-devops.aliyuncs.com/storage/112v957e3962f4a8a6d4d8eb1a194d885fa0?Signature=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJBcHB ......

    uj5u.com 2023-07-06 09:16:00 more
  • 從GaussDB(DWS)的技術演進,看資料倉庫的積淀與新生

    摘要:隨著云計算的興起和滲透,云數倉成為了數倉技術演進的新階段,并且逐漸成為了眾多企業的共同選擇。 本文分享自華為云社區《從GaussDB(DWS)的技術演進,看資料倉庫的積淀與新生》,作者: 華為云頭條。 資料驅動著現代商業的發展 今天,無論在制造、零售、物流 還是在互聯網、金融等行業 資料都變得 ......

    uj5u.com 2023-07-06 09:15:40 more
  • MySQL的match函式在sp中使用的BUG決議

    ## 一、問題發現 在一次開發中在sp中使用`MySQL PREPARE`以后,使用`match AGAINST`陳述句作為`prepare stmt`的引數后,發現執行第二遍call會導致資料庫crash,于是開始動手調查問題發生的原因。 > 注:本次使用的 MySQL 資料庫版本為最新的debug ......

    uj5u.com 2023-07-06 09:15:31 more
  • ElasticSearch - 批量更新bulk死鎖問題排查

    由于商品變更MQ訊息量巨大,為了提升更新ES的性能,防止出現MQ訊息積壓問題,所以本系統使用了BulkProcessor進行批量異步更新。 ......

    uj5u.com 2023-07-06 09:15:24 more