SOA案例：汽車行業(yè)如何加速數(shù)據(jù)引擎

申請免費(fèi)試用、咨詢電話：400-8352-114

2004年秋，公司的首席信息官Kevin Vasconi與另外幾位高層主管在位于美國汽車行業(yè)中心的底特律總部開董事會。

這是一次討論公司現(xiàn)狀的會議，旨在探討Polk的戰(zhàn)略方向，達(dá)成的共識是：信息系統(tǒng)無法支持公司到下一個(gè)十年。

系統(tǒng)陳舊 跟不上新態(tài)勢

這家總部設(shè)在密歇根州南菲爾德的公司的核心業(yè)務(wù)是數(shù)據(jù)聚合。Polk從260處來源匯總車輛登記和銷售數(shù)據(jù)，包括美國和加拿大的機(jī)動車輛部門、保險(xiǎn)公司、汽車生產(chǎn)商及貸款機(jī)構(gòu)。然后公司對數(shù)據(jù)重新包裝，銷售給經(jīng)銷商、生產(chǎn)商和營銷公司——比如哪款SUV在某個(gè)地區(qū)最暢銷。

多年來，Polk的數(shù)據(jù)合并流程在IBM大型機(jī)上運(yùn)行。Vasconi在2003年加盟公司時(shí)，有些軟件已用了20年之久。“這些代碼比有些員工在公司呆的時(shí)間還要長。”他說。

大型機(jī)系統(tǒng)本身沒有出問題。但整個(gè)流程圍繞大型機(jī)的批處理操作而設(shè)計(jì)：多個(gè)計(jì)算任務(wù)先排序后處理，以便盡量充分利用大型機(jī)的資源。Vasconi希望新技術(shù)能加快為客戶提供數(shù)據(jù)的速度——一收到數(shù)據(jù)就進(jìn)行處理，而不是每天或者每周集中批處理;還可以使手工處理的任務(wù)實(shí)現(xiàn)自動化，從而降低公司成本。

他還擔(dān)心，舊系統(tǒng)跟不上數(shù)據(jù)迅猛增加的態(tài)勢。因?yàn)楣緮?shù)據(jù)庫里面的數(shù)據(jù)已經(jīng)超過1.5拍字節(jié)(1拍字節(jié)=1015字節(jié));而歷史趨勢表明，將來增長速度會更快。“我們知道遇到了容量問題。發(fā)揮數(shù)據(jù)的價(jià)值將是公司面臨的挑戰(zhàn)?！彼f。

同時(shí)，客戶一直在急于擺脫限制，希望更快地獲得銷售數(shù)據(jù)。全國汽車經(jīng)銷商協(xié)會(NADA)是代表19700家汽車和卡車經(jīng)銷商的一家組織，首席經(jīng)濟(jì)學(xué)家Paul C. Taylor表示，通常在汽車生產(chǎn)商發(fā)布全國銷售數(shù)據(jù)30天后，客戶才能獲得Polk的各州車輛登記數(shù)據(jù)。這樣一來，新澤西州的經(jīng)銷商就無法立即比較本地區(qū)和全國的購車趨勢，以便相應(yīng)調(diào)查庫存量。

Taylor說：“理想情況下，你一旦有了全國銷售數(shù)字，就可以分析各州銷售情況。Polk如果將周期縮短哪怕一周，那也是巨大的改進(jìn)?！?/P>

實(shí)際上，Polk之前曾兩次試圖從大型機(jī)遷離出去，但這些項(xiàng)目最后還是回到了起點(diǎn)。公司主管們后來采用了不同的方法，啟動了代號為ReFuel的項(xiàng)目。2004年底，Polk設(shè)立了新公司RLPTechnologies，構(gòu)建下一個(gè)數(shù)據(jù)聚合系統(tǒng)。

Polk預(yù)計(jì)ReFuel項(xiàng)目能節(jié)省費(fèi)用。實(shí)際上Polk旗下向公司客戶銷售數(shù)據(jù)的部門——Polk Global Automotive部門的部門總裁Joe Walker和Vasconi后來證實(shí)：該項(xiàng)目幫助公司把數(shù)據(jù)操作管理成本削減了近一半。

從零做起

Vasconi為新建的分公司組建了10人核心小組(這些人多半是Polk的信息技術(shù)員工)后，他的第一項(xiàng)任務(wù)是弄清楚新系統(tǒng)將是什么樣子。

公司有三大目標(biāo)，簡稱“50/50/100”，意思是：新系統(tǒng)把效率提高50%(換句話說，把運(yùn)營成本削減一半)、數(shù)據(jù)提供速度加快50%;數(shù)據(jù)準(zhǔn)確性力求達(dá)到100%。

新系統(tǒng)名為“數(shù)據(jù)工廠”(Data Factory)，執(zhí)行與IBM大型機(jī)同樣的三項(xiàng)任務(wù)：先是獲取數(shù)據(jù)，從260處來源匯總數(shù)據(jù);然后把數(shù)據(jù)轉(zhuǎn)換成標(biāo)準(zhǔn)格式，并使用統(tǒng)一的結(jié)構(gòu)和命名，以便存儲下來的得克薩斯州報(bào)告上去的車輛識別號碼能夠被Polk的其他應(yīng)用所讀取。最后，系統(tǒng)需要通過與其他數(shù)據(jù)庫進(jìn)行相互參照來提高數(shù)據(jù)準(zhǔn)確性——比方說，核實(shí)消費(fèi)者的姓名和地址，或者把某輛車與貸款歷史聯(lián)系起來。

Vasconi明白系統(tǒng)要有面向服務(wù)的架構(gòu)(SOA)，以便不同系統(tǒng)里面的軟件組件能夠以一種標(biāo)準(zhǔn)方式進(jìn)行聯(lián)系。因?yàn)樾孪到y(tǒng)需要這種靈活性，可以自由地添加或者更新組件，又不干擾整個(gè)系統(tǒng)。SOA的擴(kuò)展性也有望勝過整體式架構(gòu)(這意味著它能夠處理負(fù)載逐步加大的任務(wù))，因?yàn)檩^大的任務(wù)更容易細(xì)分成多個(gè)子任務(wù)。另外，他希望使用網(wǎng)格計(jì)算，從而利用多臺機(jī)器來處理同一項(xiàng)任務(wù)，而不是使用功能強(qiáng)大的獨(dú)立服務(wù)器。

他說：“我們需要構(gòu)建能用30年的系統(tǒng)。”

RLPTechnologies的小組勾劃了新系統(tǒng)的功能部分，然后確定哪些部分是市場上可以買到的商業(yè)軟件產(chǎn)品、哪些部分需要自己內(nèi)部開發(fā)。Vasconi說：“如果我們能找到可以買來的技術(shù)，就希望買現(xiàn)成的，以便加快我們開發(fā)的東西進(jìn)入市場。”

Polk的“數(shù)據(jù)工廠”的硬件模塊包括：采用英特爾處理器的戴爾服務(wù)器，運(yùn)行Linux操作系統(tǒng);使用兩路及四路處理器的服務(wù)器配置成不同網(wǎng)格來處理不同應(yīng)用;一個(gè)網(wǎng)格運(yùn)行Oracle 10g數(shù)據(jù)庫;第二個(gè)網(wǎng)格運(yùn)行JBoss的應(yīng)用服務(wù)器，負(fù)責(zé)托管自定義的Java代碼;第三個(gè)網(wǎng)格運(yùn)行Tibco Software公司的BusinessWorks消息總線軟件，充當(dāng)系統(tǒng)其他部分之間的通信代理;Tibco軟件提供了該系統(tǒng)的SOA骨干部分。

“數(shù)據(jù)工廠”采用了其他現(xiàn)成軟件包。來自Informatica公司的軟件把進(jìn)來的數(shù)據(jù)變成了可擴(kuò)展標(biāo)記語言(XML)文檔，從而把數(shù)據(jù)處理成通用格式。使用DataFlux(隸屬商業(yè)智能廠商SAS)的軟件分析數(shù)據(jù)質(zhì)量，以便能夠發(fā)現(xiàn)可能的錯誤，進(jìn)而調(diào)查分析。