對(duì)話交通運(yùn)輸部科學(xué)研究院葉勁松：生產(chǎn)全國(guó)交通大數(shù)據(jù)的團(tuán)隊(duì)如何運(yùn)作？

來(lái)源：THU數(shù)據(jù)派 時(shí)間：2017-07-06 14:13:35 作者：薛婭菲

　　交通運(yùn)輸部科學(xué)研究院交通信息中心的數(shù)據(jù)團(tuán)隊(duì)負(fù)責(zé)人葉勁松是《數(shù)據(jù)團(tuán)隊(duì)建設(shè)全景報(bào)告》系列專訪中很特殊的一位。他所在部門(mén)肩負(fù)著交通行業(yè)統(tǒng)計(jì)數(shù)據(jù)生產(chǎn)和交通運(yùn)輸部綜合交通運(yùn)輸大數(shù)據(jù)應(yīng)用中心數(shù)據(jù)治理的任務(wù)。不同于企業(yè)CDO或科研團(tuán)隊(duì)的數(shù)據(jù)骨干，他所在的數(shù)據(jù)團(tuán)隊(duì)統(tǒng)籌著全國(guó)29個(gè)省份的高速公路的車(chē)輛通行數(shù)據(jù)，他所生產(chǎn)數(shù)據(jù)的服務(wù)對(duì)象是交通運(yùn)輸部。而他對(duì)數(shù)據(jù)和數(shù)據(jù)團(tuán)隊(duì)的理解，也從一開(kāi)始就基于一個(gè)相對(duì)更宏觀的角度。

　　“我發(fā)現(xiàn)自從大數(shù)據(jù)這個(gè)概念熱了起來(lái)，我們部門(mén)的角色就發(fā)生了變化，現(xiàn)在不管是誰(shuí)在數(shù)據(jù)應(yīng)用方面有了什么問(wèn)題，不論是大數(shù)據(jù)的技術(shù)問(wèn)題，還是數(shù)據(jù)治理的方法，甚至業(yè)務(wù)應(yīng)用方面的問(wèn)題，都會(huì)來(lái)找數(shù)據(jù)部門(mén)?！比~勁松說(shuō)。從我們的溝通中能夠感覺(jué)到，他更像是整個(gè)部門(mén)的“產(chǎn)品經(jīng)理”。全國(guó)高速公路收費(fèi)管理涉及的29個(gè)省，他不僅需要跟每個(gè)省的2-3個(gè)部門(mén)打交道，還需要對(duì)接數(shù)據(jù)分析部門(mén)和交通運(yùn)輸部的數(shù)據(jù)需求，并精確地拆解任務(wù)，組織團(tuán)隊(duì)完成各項(xiàng)工作。“‘十三五’規(guī)劃給我們的工作提出了更加明確的要求——依托大數(shù)據(jù)技術(shù)進(jìn)一步推進(jìn)統(tǒng)計(jì)信息管理系統(tǒng)與業(yè)務(wù)管理系統(tǒng)的互聯(lián)互通與標(biāo)準(zhǔn)化，在此基礎(chǔ)上加強(qiáng)數(shù)據(jù)資源的關(guān)聯(lián)分析和融合利用，提升行業(yè)決策支持的能力。”葉勁松說(shuō)道。

　　數(shù)據(jù)是給交通運(yùn)輸部提供決策支持的，不能有絲毫懈怠

　　交通運(yùn)行動(dòng)態(tài)數(shù)據(jù)反映著交通經(jīng)濟(jì)運(yùn)行的情況，進(jìn)而反映了國(guó)內(nèi)行業(yè)經(jīng)濟(jì)運(yùn)行態(tài)勢(shì)。在大數(shù)據(jù)時(shí)代，主管部門(mén)對(duì)交通數(shù)據(jù)有著明確的要求：“交通運(yùn)輸行業(yè)管理部門(mén)需要更加緊密地跟蹤行業(yè)的發(fā)展動(dòng)態(tài)，準(zhǔn)確把握行業(yè)發(fā)展的階段特征與新動(dòng)向、新問(wèn)題，為行業(yè)宏觀管理決策提供科學(xué)依據(jù)，為研判國(guó)家經(jīng)濟(jì)運(yùn)行態(tài)勢(shì)提供支撐?！?/p>

　　葉勁松所在的交通信息中心（以下簡(jiǎn)稱“中心”）肩負(fù)著整個(gè)交通行業(yè)統(tǒng)計(jì)數(shù)據(jù)的采集、處理、分析和發(fā)布工作，必須保證數(shù)據(jù)的精準(zhǔn)、及時(shí)。以高速公路通行數(shù)據(jù)為例：

　　交通運(yùn)輸管理部門(mén)，需要高速公路運(yùn)行數(shù)據(jù)作為路網(wǎng)運(yùn)行監(jiān)測(cè)的依據(jù)；

　　交通運(yùn)輸部，需要全國(guó)高速公路的車(chē)流量、貨運(yùn)量等數(shù)據(jù)為行業(yè)管理決策提供支撐；

　　國(guó)務(wù)院有關(guān)部門(mén)，需要高速公路貨運(yùn)量數(shù)據(jù)作為宏觀經(jīng)濟(jì)發(fā)展態(tài)勢(shì)的參考。

　　從葉勁松2005年進(jìn)入交通運(yùn)輸部科學(xué)研究院工作以來(lái)，他經(jīng)歷了行業(yè)數(shù)據(jù)治理的三次革新。第一個(gè)階段是行業(yè)統(tǒng)計(jì)數(shù)據(jù)的治理，交通運(yùn)輸部定期采集和處理各省的交通統(tǒng)計(jì)數(shù)據(jù)，包括公路、航道等基礎(chǔ)設(shè)施的現(xiàn)狀、新改建的情況、投資情況，以及港口生產(chǎn)、運(yùn)輸生產(chǎn)的情況等，統(tǒng)計(jì)數(shù)據(jù)大多是按月度或年度變化的匯總數(shù)據(jù)。第二個(gè)階段是從2013年左右開(kāi)始，數(shù)據(jù)治理對(duì)象變?yōu)樾袠I(yè)運(yùn)行的動(dòng)態(tài)監(jiān)測(cè)信息，以高速公路通行數(shù)據(jù)為例，監(jiān)測(cè)數(shù)據(jù)粒度精確到每一輛在高速公路上行駛車(chē)輛的進(jìn)出位置、行駛路程、車(chē)型等業(yè)務(wù)明細(xì)信息，數(shù)據(jù)更新頻率也縮短為旬度，接下來(lái)還將實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)更新。第三個(gè)階段，交通運(yùn)輸部要建設(shè)綜合交通運(yùn)輸大數(shù)據(jù)應(yīng)用中心，具體工作將由交通信息中心來(lái)承擔(dān)，將實(shí)現(xiàn)交通運(yùn)輸部所掌握的公路、水路、道路運(yùn)輸?shù)?4類交通數(shù)據(jù)資源的采集與匯聚。

　　圖一：交通運(yùn)輸部科學(xué)研究院交通信息中心的數(shù)據(jù)治理的變革

　　面對(duì)不斷升級(jí)的數(shù)據(jù)需求，葉勁松坦言，他和團(tuán)隊(duì)經(jīng)歷了從傳統(tǒng)的統(tǒng)計(jì)工作到大數(shù)據(jù)平臺(tái)搭建、數(shù)據(jù)收集存儲(chǔ)和標(biāo)準(zhǔn)化建設(shè)等一系列挑戰(zhàn)。

　　參差不齊的29省數(shù)據(jù)，如何挑戰(zhàn)高難度的數(shù)據(jù)工作？

　　“以前交通運(yùn)輸部對(duì)高速公路通行數(shù)據(jù)的要求是月度更新。我們以前的做法是每個(gè)月初采集一次，然后花10天左右的時(shí)間做數(shù)據(jù)清洗、處理和統(tǒng)計(jì)工作，每月中下旬再向交通運(yùn)輸部提供數(shù)據(jù)結(jié)果。整個(gè)工作流程大約十五天，”葉勁松解釋道，“但現(xiàn)在交通運(yùn)輸部對(duì)我們的要求是每月5號(hào)提交報(bào)告，數(shù)據(jù)還不能有一點(diǎn)錯(cuò)誤，所以我們必須實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)采集才有可能完成任務(wù)。”

　　從2013年開(kāi)始，交通信息中心開(kāi)始了“基于大數(shù)據(jù)技術(shù)的全國(guó)高速公路通行數(shù)據(jù)監(jiān)測(cè)平臺(tái)”建設(shè)工作。這個(gè)平臺(tái)的數(shù)據(jù)流動(dòng)路徑是自下而上的，由各省高速公路管理部門(mén)、省交通運(yùn)輸管理部門(mén)逐級(jí)上報(bào)到交通信息中心的數(shù)據(jù)團(tuán)隊(duì)。

　　“難，太難了！”葉勁松直言。當(dāng)時(shí)各省數(shù)據(jù)建設(shè)情況差異極大，因?yàn)楫?dāng)時(shí)每個(gè)省都是根據(jù)自己信息化基礎(chǔ)建設(shè)的信息系統(tǒng)，沒(méi)有統(tǒng)一的標(biāo)準(zhǔn)。有些信息化工作做得好的省，數(shù)據(jù)采集的技術(shù)方案可以直接跟平臺(tái)的數(shù)據(jù)需求對(duì)接上。有些數(shù)據(jù)采集差的省，情況非常不樂(lè)觀：“當(dāng)我們發(fā)現(xiàn)交通運(yùn)輸部開(kāi)始要數(shù)據(jù)了，地方上有些省還沒(méi)有采集到這些數(shù)據(jù)。我們的工作不得不從技術(shù)標(biāo)準(zhǔn)化和數(shù)據(jù)標(biāo)準(zhǔn)化建設(shè)開(kāi)始做起。”

　　圖二：全國(guó)高速公路數(shù)據(jù)平臺(tái)搭建的溝通工作框架

　　以車(chē)牌號(hào)為例。有些省的車(chē)牌號(hào)數(shù)據(jù)是人工輸入車(chē)牌號(hào)的后3位；有些省只采集了車(chē)牌號(hào)碼；有些省采集了車(chē)牌號(hào)碼和顏色。由于識(shí)別系統(tǒng)的限制，圖像識(shí)別的精確度也不一樣，比如把數(shù)字“7”識(shí)別成數(shù)字“1”。不同的省對(duì)免收通行費(fèi)的車(chē)輛定義不同，也就是說(shuō)每個(gè)省的數(shù)據(jù)字典也不同。要治理車(chē)牌數(shù)據(jù)并做標(biāo)準(zhǔn)交通信息中心的數(shù)據(jù)團(tuán)隊(duì)面對(duì)的是全國(guó)29個(gè)省和每個(gè)省3個(gè)部門(mén)的工作量，他們需要分別與省級(jí)交通運(yùn)輸廳、各地區(qū)高速公路聯(lián)網(wǎng)收費(fèi)中心和各地區(qū)高速公路管理單位做溝通、推進(jìn)標(biāo)準(zhǔn)化工作。

　　這項(xiàng)工作對(duì)于數(shù)據(jù)團(tuán)隊(duì)來(lái)說(shuō)，非常考驗(yàn)其溝通和協(xié)調(diào)能力。為了實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)化的目標(biāo)，數(shù)據(jù)團(tuán)隊(duì)研究提出了一套標(biāo)準(zhǔn)的數(shù)據(jù)存儲(chǔ)、清洗、挖掘分析關(guān)鍵數(shù)據(jù)處理技術(shù)及整體解決方案，并組織了多場(chǎng)針對(duì)各省數(shù)據(jù)技術(shù)人員的業(yè)務(wù)交流，有效促進(jìn)了方案的推廣。為了確保方案執(zhí)行，數(shù)據(jù)團(tuán)隊(duì)建立了數(shù)據(jù)反饋機(jī)制和考核機(jī)制：

　　對(duì)每一個(gè)字段制定數(shù)據(jù)審核規(guī)則，將數(shù)據(jù)定為“正確數(shù)據(jù)”和“錯(cuò)誤數(shù)據(jù)”兩種類型，并將數(shù)據(jù)審核結(jié)果反饋給各省核實(shí)或調(diào)整數(shù)據(jù)接口。

　　從數(shù)據(jù)時(shí)效性、數(shù)據(jù)質(zhì)量、數(shù)據(jù)字典規(guī)范性等角度對(duì)各省工作進(jìn)行打分、通報(bào)，促進(jìn)各省不斷改進(jìn)工作。

　　圖三：全國(guó)高速公路數(shù)據(jù)平臺(tái)搭建的總體業(yè)務(wù)流程

　　截止到2017年3月，平臺(tái)終于實(shí)現(xiàn)了29個(gè)省高速公路通行量數(shù)據(jù)的收集和存儲(chǔ)。2017年6月，該平臺(tái)上的高速公路通行數(shù)據(jù)的數(shù)據(jù)量已超過(guò)280億條，總?cè)萘考s7TB，每月新增數(shù)據(jù)約8億條。

　　以業(yè)務(wù)的需求去建設(shè)數(shù)據(jù)團(tuán)隊(duì)，按照數(shù)據(jù)流程分工

　　“整個(gè)團(tuán)隊(duì)不是按數(shù)據(jù)流程劃分的，而是業(yè)務(wù)驅(qū)動(dòng)。我們首要的任務(wù)是完成業(yè)務(wù)目標(biāo)?！比~勁松表示。以業(yè)務(wù)的需求去建設(shè)數(shù)據(jù)團(tuán)隊(duì)，是交通信息中心數(shù)據(jù)團(tuán)隊(duì)搭建的總體思路。目前該中心的總?cè)藬?shù)約90人，有60人是直接接觸數(shù)據(jù)的。其中負(fù)責(zé)高速公路通行數(shù)據(jù)的是一個(gè)約10人的數(shù)據(jù)團(tuán)隊(duì)?！安贿^(guò)在分行業(yè)的小團(tuán)隊(duì)內(nèi)部，這10人按照數(shù)據(jù)流程來(lái)分工。”

　　高速公路數(shù)據(jù)團(tuán)隊(duì)的內(nèi)部分工是：2-3人偏業(yè)務(wù)，負(fù)責(zé)對(duì)接各省的數(shù)據(jù)部門(mén)，對(duì)接各省的數(shù)據(jù)需求、數(shù)據(jù)變化情況和上報(bào)情況；2人偏技術(shù)，負(fù)責(zé)數(shù)據(jù)采集系統(tǒng)的維護(hù)；2-3人偏分析，負(fù)責(zé)數(shù)據(jù)挖掘和分析并撰寫(xiě)報(bào)告；1人偏管理，負(fù)責(zé)數(shù)據(jù)治理方案和整個(gè)工作的統(tǒng)籌協(xié)調(diào)。“我們的工作不只是停留在采集數(shù)據(jù)，最后還要把數(shù)據(jù)用起來(lái)才有價(jià)值。”葉勁松說(shuō)。基于這樣合理的工作流程，我們?cè)诮煌ㄐ袠I(yè)內(nèi)首次將大數(shù)據(jù)直接用于行業(yè)統(tǒng)計(jì)業(yè)務(wù)，支撐交通運(yùn)輸部實(shí)現(xiàn)了利用行政業(yè)務(wù)記錄直接轉(zhuǎn)化生成統(tǒng)計(jì)數(shù)據(jù)的重大創(chuàng)新。

　　數(shù)據(jù)團(tuán)隊(duì)負(fù)責(zé)人的角色也是“產(chǎn)品經(jīng)理”

　　交通信息中心的數(shù)據(jù)管理工作是為業(yè)務(wù)服務(wù)的，因此葉勁松的很多工作是對(duì)接下游對(duì)數(shù)據(jù)的需求?！昂芏鄷r(shí)候我有意識(shí)地提醒自己：必須在工作中強(qiáng)勢(shì)一些。因?yàn)閵A在技術(shù)團(tuán)隊(duì)和業(yè)務(wù)需求中間不好做?。　彼趫F(tuán)隊(duì)中的作用是CDO+“產(chǎn)品經(jīng)理”。一方面他要充分理解業(yè)務(wù)對(duì)數(shù)據(jù)產(chǎn)品的需求，另一方面他需要準(zhǔn)確地把業(yè)務(wù)需求“翻譯”成對(duì)數(shù)據(jù)技術(shù)團(tuán)隊(duì)的需求，同時(shí)，還要把技術(shù)團(tuán)隊(duì)的訴求用業(yè)務(wù)的語(yǔ)言跟業(yè)務(wù)人員溝通。

　　有些時(shí)候，業(yè)務(wù)團(tuán)隊(duì)不理解數(shù)據(jù)采集和技術(shù)處理的過(guò)程，所以對(duì)數(shù)據(jù)生產(chǎn)時(shí)間的要求非常高：“不就是把數(shù)據(jù)存到庫(kù)里就行了嗎？”這時(shí)就是葉勁松的強(qiáng)勢(shì)時(shí)刻：“我需要解釋為了實(shí)現(xiàn)這個(gè)需求，數(shù)據(jù)團(tuán)隊(duì)需要先摸清數(shù)據(jù)的現(xiàn)狀、那么多省的數(shù)據(jù)還都不一樣需要規(guī)范、這些數(shù)據(jù)不是能夠簡(jiǎn)單地直接放在一起的、還需要寫(xiě)算法、還需要硬件資源的支撐等等。很多時(shí)候，領(lǐng)導(dǎo)不關(guān)心數(shù)據(jù)是怎么來(lái)的，反而對(duì)結(jié)果期望很高。”上文的數(shù)據(jù)標(biāo)準(zhǔn)化工作就是個(gè)例子，大組織中的數(shù)據(jù)工作有時(shí)是需要從標(biāo)準(zhǔn)化做起的，會(huì)非常耗時(shí)、耗資源?！叭绻也徽境鰜?lái)定義好工作要求和時(shí)限，我的團(tuán)隊(duì)恐怕會(huì)面臨非常大的壓力?！?/p>

　　“懂業(yè)務(wù)又懂?dāng)?shù)據(jù)的人才太缺乏了！”當(dāng)被問(wèn)到他的數(shù)據(jù)團(tuán)隊(duì)怎樣升級(jí)時(shí)，葉勁松脫口而出。在他看來(lái)，為了實(shí)現(xiàn)更好的管理，需要建立一直合理的數(shù)據(jù)團(tuán)隊(duì)，在團(tuán)隊(duì)里培養(yǎng)更多的產(chǎn)品經(jīng)理和數(shù)據(jù)科學(xué)家：“數(shù)據(jù)在我們手上，下面我們要探索如何使用好這些數(shù)據(jù)。我需要專人去思考技術(shù)平臺(tái)怎么完善，數(shù)據(jù)采集方案怎么設(shè)計(jì)，怎么跟分析部門(mén)做好對(duì)接，從哪些角度去推進(jìn)數(shù)據(jù)應(yīng)用，怎么去把數(shù)據(jù)治理的工作很好地進(jìn)行總結(jié)提煉以得到認(rèn)可?！睂?duì)于人才，葉勁松有如下期待：

　　數(shù)據(jù)相關(guān)專業(yè)基本功；

　　對(duì)數(shù)據(jù)技術(shù)的不斷更迭地關(guān)注和學(xué)習(xí)；

　　有真實(shí)的數(shù)據(jù)科學(xué)的實(shí)踐經(jīng)驗(yàn)。

　　其中，葉勁松認(rèn)為第三點(diǎn)最為重要：“在我面試的過(guò)程中，如果一個(gè)學(xué)生前兩點(diǎn)很強(qiáng)，第三點(diǎn)不突出，這樣的人我不敢用。因?yàn)闀?huì)一些編程語(yǔ)言并不代表他擁有數(shù)據(jù)思維。學(xué)生在學(xué)校的畢業(yè)設(shè)計(jì)與實(shí)際的產(chǎn)業(yè)數(shù)據(jù)情況相差甚遠(yuǎn)。那些只會(huì)做算法的學(xué)生畢業(yè)后會(huì)發(fā)現(xiàn)業(yè)界大量的數(shù)據(jù)工作還停留在數(shù)據(jù)治理和清洗上，那時(shí)他們的心理落差恐怕會(huì)很大。”相反，“如果這個(gè)學(xué)生前兩點(diǎn)偏弱，但實(shí)踐經(jīng)驗(yàn)非常突出，我認(rèn)為這樣的人才是可以吸納并培養(yǎng)的?！?/p>

葉勁松：高級(jí)工程師，交通運(yùn)輸部科學(xué)研究院交通信息中心系統(tǒng)開(kāi)發(fā)部副主任，主要負(fù)責(zé)交通大數(shù)據(jù)技術(shù)研究和應(yīng)用、全國(guó)高速公路通行大數(shù)據(jù)的采集和分析等工作。

交通運(yùn)輸部科學(xué)研究院交通信息中心：交通運(yùn)輸部科學(xué)研究院的二級(jí)機(jī)構(gòu)，成立于2001年，主要業(yè)務(wù)領(lǐng)域包括統(tǒng)計(jì)信息服務(wù)、交通統(tǒng)計(jì)技術(shù)研究、交通政策與經(jīng)濟(jì)運(yùn)行分析研究、交通信息系統(tǒng)研發(fā)、交通發(fā)展規(guī)劃與評(píng)價(jià)研究等，具體承擔(dān)交通運(yùn)輸部綜合交通運(yùn)輸大數(shù)據(jù)應(yīng)用中心的建設(shè)任務(wù)，已在交通大數(shù)據(jù)技術(shù)研發(fā)與應(yīng)用、交通運(yùn)輸統(tǒng)計(jì)信息與經(jīng)濟(jì)運(yùn)行分析、交通信息化建設(shè)等方面形成了中心特色的優(yōu)勢(shì)研究領(lǐng)域。

注：*本文為清華-青島數(shù)據(jù)科學(xué)研究院聯(lián)合大數(shù)據(jù)文摘發(fā)起的《數(shù)據(jù)團(tuán)隊(duì)建設(shè)全景報(bào)告》系列專訪內(nèi)容。本篇內(nèi)容還參考了2017年4月交通運(yùn)輸部科學(xué)研究院申報(bào)“中國(guó)數(shù)據(jù)標(biāo)準(zhǔn)化及治理獎(jiǎng)”評(píng)審的文件《基于大數(shù)據(jù)技術(shù)的全國(guó)高速公路通行數(shù)據(jù)監(jiān)測(cè)平臺(tái)建設(shè)》。

責(zé)任編輯：陳近梅