來源:京東大數(shù)據(jù)與智能供應(yīng)鏈事業(yè)部 時間:2018-12-12 15:04:34 作者:
12月7日京東舉辦了首屆大數(shù)據(jù)峰會,也是首次對外全面展示京東在大數(shù)據(jù)領(lǐng)域多年研發(fā)的核心技術(shù)成果。在2010年京東就啟動了在大數(shù)據(jù)領(lǐng)域的研發(fā)和應(yīng)用探索,正式組建京東大數(shù)據(jù)部,并確立了數(shù)據(jù)集中式的數(shù)據(jù)服務(wù)模式,成為大數(shù)據(jù)最早的實踐企業(yè)之一。在峰會上,京東對外發(fā)布了《京東大數(shù)據(jù)技術(shù)白皮書》,該白皮書全面介紹了京東大數(shù)據(jù)的建設(shè)以及技術(shù)特點。
在《京東大數(shù)據(jù)技術(shù)白皮書》中指出,大數(shù)據(jù)平臺的發(fā)展是隨著京東業(yè)務(wù)同步發(fā)展的,由原來的傳統(tǒng)數(shù)據(jù)倉庫模式逐步演變?yōu)榛贖adoop的分布式計算架構(gòu)。技術(shù)領(lǐng)域覆蓋Hadoop、Kubernetes、Spark、Hive、Alluxio、Presto、Hbase、Storm、Flink、Kafka等大數(shù)據(jù)全生態(tài)體系。
經(jīng)過多年的持續(xù)投入和全面應(yīng)用實踐,京東大數(shù)據(jù)已成為企業(yè)大數(shù)據(jù)的領(lǐng)跑者。目前已擁有集群規(guī)模40000+服務(wù)器、數(shù)據(jù)規(guī)模800PB+、日增數(shù)據(jù)1P+,每日的離線數(shù)據(jù)日處理30PB+,實時計算每天行數(shù)近萬億條。面對如此高的數(shù)據(jù)處理量級,京東大數(shù)據(jù)建設(shè)了全生態(tài)核心產(chǎn)品體系,是京東大數(shù)據(jù)業(yè)務(wù)的基礎(chǔ)服務(wù)平臺,為京東全業(yè)務(wù)生態(tài)提供一站式、自助式的大數(shù)據(jù)處理全流程解決方案。涵蓋數(shù)據(jù)采集、存儲、加工、分析、可視化、機器學(xué)習(xí)等專業(yè)化產(chǎn)品和服務(wù),在保障數(shù)據(jù)安全的前提下,提供更可靠、高性能的服務(wù),大幅降低大數(shù)據(jù)使用門檻,幫助京東大數(shù)據(jù)業(yè)務(wù)快速落地,助力京東實踐以數(shù)據(jù)為驅(qū)動的業(yè)務(wù)變革與發(fā)展。
京東對大數(shù)據(jù)的應(yīng)用正不斷為行業(yè)帶來創(chuàng)新的應(yīng)用能力,也正是因為京東所具有的豐富場景,能夠使這些技術(shù)得以落地并不斷升級迭代。對于以技術(shù)為核心發(fā)展戰(zhàn)略的京東,大數(shù)據(jù)是寶貴財富,也是助力行業(yè)伙伴的全價值鏈資源。隨著京東大數(shù)據(jù)平臺技術(shù)不斷創(chuàng)新,隨著京東開放平臺的建設(shè),這項寶貴的財富將不僅推動京東自己的成長,更為行業(yè)帶來服務(wù),讓更多的企業(yè)和消費者能夠享受到大數(shù)據(jù)所創(chuàng)造的價值。
以下為《京東大數(shù)據(jù)技術(shù)白皮書》全文:
責(zé)任編輯:李蘭松