大數(shù)據時代開始于2001年,我是比較認可這一觀點的。因為大數(shù)據這個詞語被創(chuàng)造出來是在20世紀90年代,在2000年的時候第一次在學術論文上有人將它提出,在2003年的時候在FrancisX.Diebolt在《宏觀經濟測量和預測的大數(shù)據動態(tài)因子模型》一書中正式將大數(shù)據這個詞語進行詮釋和應用。自然,在13年前的那個時代,全世界的熱點是在于互聯(lián)網,在于互聯(lián)網門戶或者社交。
在2005年的時候,當前最火爆的Hadoop項目就已經被創(chuàng)建,之所以在10多年后大數(shù)據和Hadoop項目才受到熱捧和關注主要是因為當時的數(shù)據還不夠大。在現(xiàn)如今的世界,隨著互聯(lián)網、移動互聯(lián)網、IOT、智能設備的發(fā)展,你舉目四望會發(fā)現(xiàn)整個世界每秒都在生產海量的數(shù)據,我們所有的世界空間、所有的行為路徑都在被數(shù)據給描述,我們都在生產數(shù)據又依賴于數(shù)據。在非量子的認知體系內,我們的確處于一個無邊無際的大數(shù)據時代,這是一個數(shù)據為王、數(shù)據即能源的時代。
工業(yè)4.0
對于工業(yè)4.0這個概念,我認為兩個最權威的定義就可以解釋的明白。工業(yè)4.0這個概念是德國最先提出的,德國對于工業(yè)4.0的解釋是這樣的:所謂的工業(yè)四代(Industry4.0)是指利用物聯(lián)信息系統(tǒng)(Cyber—PhysicalSystem簡稱CPS)將生產中的供應,制造,銷售信息數(shù)據化、智慧化,最后達到快速,有效,個人化的產品供應。中國正處在兩化融合升級的過程,因為中國政府迅速與德國政府就工業(yè)4.0達成合作。在中德關于工業(yè)4.0的《中德合作行動綱要》中,有關工業(yè)4.0合作的內容共有4條,第一條就明確提出工業(yè)生產的數(shù)字化就是工業(yè)4.0。現(xiàn)在,我覺得我們可以很好的理解工業(yè)4.0的意義,工業(yè)4.0就是工業(yè)數(shù)字化,而更人們興奮的是在工業(yè)數(shù)字化背后的工業(yè)大數(shù)據。工業(yè)數(shù)字化或者說工業(yè)智能化的潛力是顯而易見且令人震撼的,有幸在一個項目中參觀了蒙牛6期工廠,整個智能化、自動化的生產線的確給我了很大的震撼,而且作為一個外行的我就能明白這個是一個多么有價值有意義的事情。在參觀中,我發(fā)現(xiàn)整個蒙牛工廠6期最核心的部分是其設在廠房中央的智能數(shù)據控制中心,這個智能數(shù)據控制中心的作用就是根據所有設備的運行數(shù)據的分析結果控制整個廠房的所有設備進行生產。根據上周末在廣州與一個朋友聊天的內容,我了解到像蒙牛工廠6期的這種智能化設備的控制背后其實就是大數(shù)據的深度機器學習控制算法。那么,將德國對于工業(yè)4.0定義中的供應、制造、銷售三個環(huán)節(jié)與大數(shù)據結合就是工業(yè)4.0的供應大數(shù)據、制造大數(shù)據、銷售大數(shù)據,接下來我們就是要圍繞這三個大數(shù)據來聊聊大數(shù)據時代與工業(yè)4.0。
工業(yè)4.0大數(shù)據
1、供應大數(shù)據
說供應大數(shù)據可能不太很好的準確理解其所指的是什么,但是如果說供應鏈大數(shù)據你肯定一下就知道其所指的是什么了。說到供應(鏈)大數(shù)據,我相信很多人都能想到一點如何去做供應鏈大數(shù)據,因為在這個互聯(lián)網和物流發(fā)達的年代,全球采購已經不是什么新鮮事了。在正式切入供應大數(shù)據前,我還想先講一個供應鏈的事。在去年,大家可能看到過這樣一個新聞,就是一個浙江蔬菜銷售商春節(jié)前從山東采購了一批大蔥,這批大蔥還沒有運到浙江前銷售價格已經漲到其采購價格的10倍以上。這位蔬菜銷售商之所以在這次生意上能夠躺賺,是因為他通過一些途徑了解到了大蔥的主產地山東去年大蔥有了大面積減產的信息。那么,對于工業(yè)生產而言同樣也是這樣的,只有能夠準確的預測到原材料采購價格的變化趨勢,才能夠通過最優(yōu)的采購策略來大大的降低生產成本。在當前的全球經濟的時代,影響工業(yè)生產某樣原材料采購價格的因素有如下幾種:全球的生產規(guī)模、全球的生產率、期貨市場、國際環(huán)境、物流運輸環(huán)境、匯率、地緣政治環(huán)境、主要生產地的政治環(huán)境等等,而這些因素絕大部分都不是直接可以拿到的數(shù)據,需要根據每個因素的關聯(lián)數(shù)據進行分析才能得出。那么,在全球的環(huán)境下,要進行這些數(shù)據的收集、分析、預測只能使用大數(shù)據系統(tǒng)來進行。從技術的角度來看這個供應鏈大數(shù)據系統(tǒng),需要由互聯(lián)網爬蟲系統(tǒng)、流數(shù)據處理系統(tǒng)、數(shù)據可視化系統(tǒng)四個主要的核心系統(tǒng)來構成?;ヂ?lián)網爬蟲系統(tǒng)現(xiàn)在有非常多開源項目可以采用,比較建議的有Nutch、GrubNextGeneration等;流數(shù)據處理系統(tǒng)除了目前關注度比較高的Spark還可以考慮Storm和Samza;數(shù)據可視化系統(tǒng)可以考慮選擇Cube、FusionChartsSuitXT等,在基礎支撐系統(tǒng)層面可以采用Hadoop的架構體系,也可以采用一些其他的調度系統(tǒng)如Mesos等。
2、制造大數(shù)據
所謂制造大數(shù)據,其實就是智能化制造設備的大數(shù)據,不過如果從數(shù)據量來說這些智能設備的控制和運行數(shù)據并不是多么大的數(shù)據,但是這些數(shù)據相關的復雜度、處理的實時性絕對非常巨大的。其實這也是大數(shù)據另外一個面,就是不光海量的數(shù)據叫做大數(shù)據,數(shù)據相互關聯(lián)復雜多特別巨大的也叫做大數(shù)據。在制造大數(shù)據的體系下,所有的生產設備都是智能化的設備,其每次的任務執(zhí)行都核心控制系統(tǒng)調度控制的結果,那么利用制造大數(shù)據可以做如下事情:設備精確控制、設備運行優(yōu)化、設備故障預測、制造系統(tǒng)改進升級等。根據我目前的知識面,我就詳細聊一下設備精確控制這個話題。在數(shù)字化控制的時代,制造設備運行是嚴格的精確位置運行控制,很簡單的例子就是數(shù)控機床,這個數(shù)字化得制造設備必須按照設定好的運行軌跡嚴格的運行和停放。舉個例子來講,如果有這樣一個動作:將一個加工件打一個10mm的孔,那么每次打孔機的初始狀態(tài)都要回到相對0位置,在進行了上萬次的重復操作后肯定會出現(xiàn)誤差,有可能初始位置回到相對-0.1mm或者0.1mm,那么就會出現(xiàn)大量的具有誤差的產品。在制造大數(shù)據控制體系內,控制系統(tǒng)對智能設備的控制不是起點和終點,而是智能設備的運行軌跡。當然這個軌跡是根據機器學習控制算法來實現(xiàn)的,可以將同一批次的、做同樣工作的智能設備每次的運行軌跡數(shù)據進行分析處理從而得到下一個時間段的準確的運行軌跡,換句話說智能設備可以根據機器學習自動修復在生產過程中產生的誤差。從技術的角度來看制造大數(shù)據系統(tǒng),需要有IOT、深度機器學習系統(tǒng)、智能控制算法系統(tǒng)等來組成,IOT其實就是目前工業(yè)要進行的智能制造設備物聯(lián)網,如德國提出的CPS;深度機器學習系統(tǒng)目前國際上的幾大科技巨頭都將自己的深度機器學習平臺進行了開源如Google的TensorFlow、微軟的DMTK、百度的DMLC等。
3、銷售大數(shù)據
最后咱們聊聊銷售大數(shù)據,關于銷售大數(shù)據我認為有兩層意思一個是基于大數(shù)據的精準營銷,另一個是基于大數(shù)據的精準需求分析?;诖髷?shù)據的精準營銷其實大家可能都有所理解,在大家使用淘寶、京東等電商平臺進行購物的時候在你的界面上都會有些推薦商品或者一些優(yōu)惠套餐,其實這些都是根據你或者你這個地域、年齡段、性別等信息進行全購物平臺的相關數(shù)據分析的結果。那么大家想一想,在消費品行業(yè)可以進行如此精準的營銷,在工業(yè)領域也必然是可以的。而且由于工業(yè)采購往往是大宗、低頻的商業(yè),在這個銷售過程中就可以基于大數(shù)據做一些供應鏈金融、電子期貨等等。
關于基于大數(shù)據的精確需求分析,我之前在飛機上經??吹揭粋€IBM大數(shù)據的廣告,講的是如何利用大數(shù)據分析迅速的獲取滑雪愛好者的需求,然后生產出符合最符合當前客戶需求的滑雪板,最后成功的賣給滑雪愛好者并得到極大的好評。其實這就是一個很好的案例詮釋銷售大數(shù)據的意義,通過銷售大數(shù)據的分析可以更好的了解市場需要和預期,進而指導產品設計和生產。從技術的角度來看銷售大數(shù)據系統(tǒng),我覺得和供應大數(shù)據系統(tǒng)比較類似,同樣需要需要由互聯(lián)網爬蟲系統(tǒng)、流數(shù)據處理系統(tǒng)、數(shù)據可視化系統(tǒng)四個主要的核心系統(tǒng)來構成,不過對于工業(yè)的銷售大數(shù)據系統(tǒng)來說流數(shù)據處理可以根據需求替換成數(shù)據倉庫分析處理系統(tǒng)。
結語:
大數(shù)據時代和工業(yè)4.0時代同時達到一個爆發(fā)期,這可以看作兩化融合的最高階狀態(tài)。我們可以相信和憧憬,在這個數(shù)據與工業(yè)4.0充分融合的時代會給人類帶來有史以來最大一次的生產力提高和解放。大數(shù)據和工業(yè)4.0融合的時代,這是個最好的時代。
2024-08-23 09:38
2024-08-23 09:28
2024-08-23 09:16
2024-08-23 09:11
2024-08-23 09:07
2024-08-23 09:05
2024-08-22 09:24
2024-08-22 09:07
2024-08-22 09:01
2024-08-22 08:59