Web 信息抓取技術(shù)在物流案例庫建設(shè)中的應(yīng)用

李 睿，汪貽生，郭 凌，閆 華

（陸軍勤務(wù)學(xué)院，重慶 401331）

1 引言

案例教學(xué)自創(chuàng)立以來，已被廣泛應(yīng)用于物流專業(yè)的教學(xué)中，以其創(chuàng)新性、實踐性、系統(tǒng)性、協(xié)作性等特點在實際教學(xué)應(yīng)用中取得了良好的效果[1]。案例庫作為案例教學(xué)的基礎(chǔ)，其建設(shè)水平的高低直接影響著案例教學(xué)的效果[2]。隨著信息時代的到來，信息獲取渠道越來越廣，信息更新速度越來越快，對物流案例教學(xué)和案例庫建設(shè)提出了新的更高的要求。

2 Web信息抓取技術(shù)在案例庫建設(shè)中應(yīng)用的必要性

（1）信息傳播速度的加快對案例更新的速度提出了更高要求。隨著互聯(lián)網(wǎng)時代的到來，信息傳播速度有了突飛猛進的提升，學(xué)生更容易在互聯(lián)網(wǎng)上獲得需要的各類信息資源。如果案例更新較慢，比較成熟可靠的解決方案已被提出、驗證、實踐甚至公布，案例學(xué)習(xí)就變成了信息獲取能力鍛煉，案例學(xué)習(xí)效果難以保證。

（2）案例復(fù)雜程度的增加對支撐資料的全面性提出了更高要求。案例問題的提出一般來自各類組織運作管理中實際遇到的問題，往往需要考慮多個方面的因素。如果案例支撐資料收集有缺漏，學(xué)生在提出解決方案時就需要花費大量的時間與精力去收集補充相關(guān)資料，案例學(xué)習(xí)效率就會大大降低。

（3）案例信息資源的擴展對信息組織的規(guī)范性提出了更高要求。案例資料信息量較大，且類別較多，必須對資料信息進行嚴格的篩選與組織，去除冗余，讓學(xué)生能夠準確把握案例研讀和分析的重點。

3 Web信息抓取技術(shù)在案例庫建設(shè)中的應(yīng)用研究

Web信息抓取技術(shù)是一種利用計算機程序自主完成網(wǎng)頁信息獲取的方法，其本質(zhì)是一個網(wǎng)頁自動抓取程序，能夠遍歷互聯(lián)網(wǎng)或者用戶指定的URL隊列，將網(wǎng)絡(luò)信息提取出來供用戶使用[3]。Web信息抓取技術(shù)可以從案例收集、相關(guān)信息采集和信息組織三個方面應(yīng)用于物流案例庫建設(shè)中，為案例庫建設(shè)提供高效可靠的信息技術(shù)手段。

（1）應(yīng)用Web信息抓取技術(shù)實現(xiàn)案例的自動收集。Web信息抓取技術(shù)能夠不間斷的對指定URL隊列進行遍歷搜索，如果將中國物流與采購網(wǎng)、中國物流信息網(wǎng)等專業(yè)網(wǎng)站指定為URL隊列成員，就可以使用Web信息抓取技術(shù)自動實時的收集上述網(wǎng)站上公布的最新行業(yè)動態(tài)、統(tǒng)計數(shù)據(jù)、實務(wù)案例等信息，極大的減少物流案例庫建設(shè)的工作量。

（2）應(yīng)用Web信息抓取技術(shù)實現(xiàn)案例相關(guān)信息的快速采集。針對單一網(wǎng)站案例資料不夠全面的問題，可以應(yīng)用Web信息抓取技術(shù)進行基于主題的搜索[4]，將從網(wǎng)站獲取來的案例標題作為搜索主題進行網(wǎng)絡(luò)檢索、信息抓取和收集，還可以對案例標題中企業(yè)或組織名稱指向的網(wǎng)站做更深一層次的信息檢索與挖掘，采集更加全面的信息資源來支撐案例教學(xué)。

（3）應(yīng)用Web信息抓取技術(shù)實現(xiàn)信息資源的整理歸類。從互聯(lián)網(wǎng)上獲取到的信息通常是零散的，非結(jié)構(gòu)化或半結(jié)構(gòu)化的，研讀起來比較耗時費力。應(yīng)用Web信息抓取技術(shù)可以對獲取的信息進行歸類整理、建立索引和相關(guān)性排序，完成信息資源的初步整理，交給編寫者相對規(guī)范、標準的信息，便于后續(xù)編寫使用。

4 Web信息抓取程序設(shè)計

應(yīng)用多層檢索抓取的思路設(shè)計“三步式”Web信息抓取程序輔助物流案例庫建設(shè)，其功能流程如圖1所示。

圖1 Web信息抓取程序功能流程

首先，程序從URL隊列中讀取專業(yè)網(wǎng)站的地址，從各專業(yè)網(wǎng)站上抓取案例信息?；緦崿F(xiàn)代碼如下（C#語言開發(fā)）：

本例中，從中國物流與采購網(wǎng)抓取信息條目見表1。

然后，將各案例標題作為檢索的主題進行二次網(wǎng)絡(luò)檢索，抓取更多信息。在本例的實現(xiàn)中，為了節(jié)約資源，直接引用百度搜索服務(wù)，實現(xiàn)主題式搜索，然后對百度返回的URL隊列進行信息抓取。以表1中“武漢小碼大眾科技有限公司-微…”為例，可得到相關(guān)信息見表2。

表1 信息抓取案例標題

表2 二次網(wǎng)絡(luò)檢索

同時，還可以在企業(yè)或組織的官網(wǎng)進行深度發(fā)掘，以“武漢小碼大眾科技有限公司”為例，可在其官網(wǎng)抓取如下信息，見表3。

表3 官網(wǎng)信息抓取

最后，將所有信息資源按文件格式、資料類別、相關(guān)度高低等進行整理。可以采用聚類分析和文本關(guān)鍵詞檢索的方法實現(xiàn)，本例中按物流專業(yè)教學(xué)通常采用的分類方法[5]將收集到的資料歸類整理，見表4。

表4 收集資料的歸類處理

整理后的資料作為案例編寫的基本材料能夠分層次、分類別清晰的展現(xiàn)，可以提高編寫教師解讀案例和編寫案例的效率。

5 結(jié)語

本文嘗試將Web信息抓取技術(shù)應(yīng)用于課程案例庫建設(shè)中，主要從案例收集、相關(guān)信息采集和信息資源組織三個方面為案例庫建設(shè)提供高效的信息技術(shù)手段，并應(yīng)用C#編程語言以物流學(xué)科教學(xué)為例實現(xiàn)了主要程序功能的開發(fā)，能夠在一定程度上減輕案例編寫的工作量，提高案例更新和編寫的速度，促進案例教學(xué)效果的提升。