基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館移動(dòng)視覺(jué)搜索資源與服務(wù)聚合研究

韓璽+何秀美+張玥+朱慶華

〔摘要〕[目的/意義]移動(dòng)視覺(jué)搜索（MVS）服務(wù)是移動(dòng)互聯(lián)網(wǎng)時(shí)代圖書(shū)館更好切入用戶利用場(chǎng)景和促進(jìn)圖書(shū)館各種資源開(kāi)發(fā)利用的有效措施，而視覺(jué)資源與圖書(shū)館各種資源的聚合是圖書(shū)館MVS服務(wù)開(kāi)展的基礎(chǔ)。[方法/過(guò)程]從多維度聚合和語(yǔ)義關(guān)聯(lián)兩個(gè)方面分析了數(shù)字資源聚合的理論基礎(chǔ)，并從基礎(chǔ)數(shù)據(jù)層、資源描述層、語(yǔ)義聚合層和用戶應(yīng)用層4個(gè)方面構(gòu)建基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館MVS資源多維度聚合模型，在此基礎(chǔ)上分析了MVS服務(wù)的實(shí)現(xiàn)流程。[結(jié)果/結(jié)論]構(gòu)建移MVS為核心的語(yǔ)義關(guān)聯(lián)視覺(jué)資源多維度聚合體系，有利于不同情境下圖書(shū)館MVS服務(wù)的現(xiàn)實(shí)。

〔關(guān)鍵詞〕語(yǔ)義關(guān)聯(lián)；移動(dòng)視覺(jué)搜索；圖書(shū)館；多維聚合；關(guān)聯(lián)數(shù)據(jù)

DOI：10.3969/j.issn.1008-0821.2017.10.001

〔中圖分類號(hào)〕G25078〔文獻(xiàn)標(biāo)識(shí)碼〕A〔文章編號(hào)〕1008-0821（2017）10-0003-05

〔Abstract〕[Purpose/significance]Integration of visual resources and library resources is the basis for the development of mobile visual search services.[Method/process]This paper discussed the aggregation demand of MVS related resources，and analyzed the theoretical basis of the digital resource aggregation from the multi-dimensional aggregation and the semantic relevance.Based on basic data layer，resource description layer，semantic aggregation layer and user application layer，it constructed the multi-dimensional aggregation model of the library MVS resources.It analyzed the MVS service from the aspects of e-book and digital humanities resources use.[Result /conclusion]The construction of multi-dimensional aggregation system of mobile visual resources based on semantic relevance was beneficial to the reality of mobile visual search service in different context.

〔Key words〕semantic relevance；mobile visual search；library；multidimensional aggregation；associated data

隨著用戶行為習(xí)慣的改變和對(duì)圖書(shū)館服務(wù)質(zhì)量要求提高，在數(shù)字技術(shù)支持下，我國(guó)圖書(shū)館在資源和服務(wù)的聚合方面取得了較為顯著的成績(jī)。不少圖書(shū)館OPAC系統(tǒng)已實(shí)現(xiàn)將傳統(tǒng)紙質(zhì)館藏和中外文電子圖書(shū)資源進(jìn)行關(guān)聯(lián)，使用戶可以一站式實(shí)現(xiàn)紙質(zhì)與電子圖書(shū)的檢索和利用，有效提高了電子圖書(shū)的可見(jiàn)度和利用率；與此同時(shí)，學(xué)術(shù)文獻(xiàn)資源的整合利用吸引更多的關(guān)注，最大可能的避免用戶在不同數(shù)據(jù)庫(kù)多次檢索和重復(fù)數(shù)據(jù)的篩選，使得統(tǒng)一檢索成為20世紀(jì)以來(lái)數(shù)字圖書(shū)館界一直研究和實(shí)踐的重點(diǎn)。從早期的聯(lián)邦跨庫(kù)檢索到近幾年的知識(shí)發(fā)現(xiàn)系統(tǒng)，圖書(shū)館數(shù)字資源的整合從簡(jiǎn)單的異構(gòu)數(shù)據(jù)庫(kù)檢索已發(fā)展到了語(yǔ)義關(guān)聯(lián)知識(shí)發(fā)現(xiàn)的階段。目前的圖書(shū)館資源整合和服務(wù)多是基于PC客戶端的實(shí)現(xiàn)，然而事實(shí)上，隨著網(wǎng)絡(luò)傳輸技術(shù)的進(jìn)步和移動(dòng)智能終端的普及，移動(dòng)搜索代表著一種更為普遍的搜索形式。移動(dòng)搜索由于場(chǎng)景的移動(dòng)性使其搜索從文字輸入變?yōu)閳D像、聲音、位置等多種輸入方式的檢索。由于人類有近80%的信息來(lái)自于眼睛，移動(dòng)視覺(jué)搜索（Mobile Visual Search，MVS）未來(lái)會(huì)有更多的關(guān)注和應(yīng)用[1]。移動(dòng)視覺(jué)搜索是利用移動(dòng)終端快速獲取實(shí)體對(duì)象的圖像作為檢索對(duì)象，通過(guò)移動(dòng)互聯(lián)網(wǎng)獲取相關(guān)信息并在移動(dòng)終端顯示的信息檢索方式[2-3]。對(duì)于圖書(shū)館而言，圖書(shū)館及其文獻(xiàn)資料中擁有大量的視覺(jué)相關(guān)信息，如何利用移動(dòng)視覺(jué)搜索這一手段更好的為用戶提供服務(wù)是圖書(shū)館界未來(lái)應(yīng)該考慮的方向。

國(guó)內(nèi)有研究人員提出從移動(dòng)環(huán)境的軟硬件資源、需求多樣性、用戶體驗(yàn)質(zhì)量、協(xié)同管理和互操作性等方面建設(shè)圖書(shū)館移動(dòng)視覺(jué)搜索機(jī)制[4]；本課題組先后開(kāi)展了大數(shù)據(jù)時(shí)代移動(dòng)視覺(jué)搜索的游戲化框架設(shè)計(jì)[5]、數(shù)字資源移動(dòng)視覺(jué)搜索的機(jī)制[6]、數(shù)字圖書(shū)館移動(dòng)視覺(jué)搜索資源庫(kù)建設(shè)中的眾包模式[7]、基于關(guān)聯(lián)數(shù)據(jù)的數(shù)字圖書(shū)館移動(dòng)視覺(jué)搜索框架[8]、圖書(shū)館移動(dòng)視覺(jué)搜索的服務(wù)設(shè)計(jì)模型[9]及實(shí)踐應(yīng)用[10]等方面的研究。本文擬在前期研究的基礎(chǔ)上，對(duì)不同情境下的圖書(shū)館移動(dòng)視覺(jué)搜索資源和服務(wù)進(jìn)行聚合，實(shí)現(xiàn)與傳統(tǒng)PC端檢索的無(wú)縫連接，最大程度的方便用戶以視覺(jué)信息為入口利用圖書(shū)館資源與服務(wù)，實(shí)現(xiàn)移動(dòng)時(shí)代圖書(shū)館資源和服務(wù)的有效升級(jí)拓展。

1圖書(shū)館MVS資源聚合的需求

在前期研究中，課題組指出了在圖書(shū)館數(shù)字人文項(xiàng)目、電子圖書(shū)、特色專題資源和多媒體資源利用等不同情境下開(kāi)展移動(dòng)視覺(jué)搜索服務(wù)的設(shè)計(jì)和應(yīng)用[9-10]。然而不同情境下資源和服務(wù)是異構(gòu)的，如果無(wú)法對(duì)不同情境下的移動(dòng)視覺(jué)搜索資源和服務(wù)進(jìn)行聚合，多入口的服務(wù)會(huì)增加用戶利用的障礙和成本，降低用戶體驗(yàn)的滿意度，不利于用戶對(duì)圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)的采納。endprint

在資源方面，圖書(shū)館移動(dòng)視覺(jué)搜索需要以圖書(shū)館不同情境下的視覺(jué)信息為檢索入口，除了視覺(jué)資源的文本識(shí)別這一搜索途徑外，視覺(jué)資源庫(kù)的建設(shè)及匹配是圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)開(kāi)展的必要基礎(chǔ)和重點(diǎn)。圖書(shū)館原有的資源主要涉及紙質(zhì)館藏、電子圖書(shū)、電子期刊、視頻、圖片等形式，不同類型、語(yǔ)種和來(lái)源的館藏資源在組織方式和揭示字段方面差別較大，如紙質(zhì)館藏多以MARC格式，電子圖書(shū)的格式則不如MARC全面，不同電子數(shù)據(jù)庫(kù)資源揭示的字段表現(xiàn)出較強(qiáng)的異構(gòu)性，對(duì)于圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)而言，主要涉及原有的紙質(zhì)館藏、電子圖書(shū)和視頻圖像等資源，如何使新建的視覺(jué)資源庫(kù)與原有的不同資源進(jìn)行有效的聚合，以視覺(jué)信息為手段實(shí)現(xiàn)，使用戶在一個(gè)入口即可一站式的對(duì)原有各種資源和新建視覺(jué)資源進(jìn)行統(tǒng)一的檢索匹配十分重要。

此外在服務(wù)方面，圖書(shū)館原有的各種服務(wù)存在一定程度的割裂，不同服務(wù)對(duì)用戶利用而言關(guān)聯(lián)度不大，利用紙質(zhì)館藏是在實(shí)體圖書(shū)館的環(huán)境中，利用電子圖書(shū)或其他數(shù)字資源是在PC狀態(tài)下，即便是在實(shí)體圖書(shū)館中享受實(shí)物形態(tài)的人文資源也無(wú)法與前兩者有任何交集。以往圖書(shū)館較多強(qiáng)調(diào)資源的聚合，資源聚合確實(shí)是服務(wù)整合的基礎(chǔ)，但這種服務(wù)多是建立在PC端利用的前提下。移動(dòng)時(shí)代的到來(lái)和普及對(duì)圖書(shū)館的服務(wù)帶來(lái)了新的挑戰(zhàn)，圖書(shū)館如果要更加成功的切入到移動(dòng)服務(wù)中，就需要考慮以情景為中心，以視覺(jué)信息為線索，將PC和移動(dòng)兩種不同的服務(wù)形式進(jìn)行有效的聚合，真正實(shí)現(xiàn)以用戶為中心，以資源為基礎(chǔ)的全方位應(yīng)用情景的融合服務(wù)。

2圖書(shū)館MVS資源聚合理論基礎(chǔ)

圖書(shū)館移動(dòng)視覺(jué)搜索所需要聚合的資源既包含傳統(tǒng)的OPAC館藏資源、電子圖書(shū)庫(kù)、多媒體數(shù)據(jù)庫(kù)，還包括新建的視覺(jué)資源庫(kù)，資源的聚合就是要將這些異構(gòu)、多維的資源，以視覺(jué)信息的輸入為中介，通過(guò)一定的方式進(jìn)行有序的組織關(guān)聯(lián)和深度挖掘，以達(dá)到最大限度的利用開(kāi)發(fā)資源的目的。圖書(shū)館MVS資源與服務(wù)的整合需要數(shù)字資源多維度聚合和語(yǔ)義關(guān)聯(lián)等作理論基礎(chǔ)。

21圖書(shū)館MVS資源多維度聚合

隨著數(shù)字信息資源多維度聚合理論的產(chǎn)生，信息資源的組織模式從單一信息來(lái)源向多維度信息來(lái)源變革、從分類理念到多維聚類理念變革[11]。這些變革的發(fā)生滿足了用戶的個(gè)性化需求，也使數(shù)字資源聚合的效果最大化。圖書(shū)館移動(dòng)視覺(jué)搜索資源的多維度聚合是指運(yùn)用資源聚類、分析和組織的理論、方法和技術(shù)，基于不同的移動(dòng)視覺(jué)搜索資源獲取利用維度和目的，對(duì)多種不同的移動(dòng)視覺(jué)搜索資源進(jìn)行聚集、整合和再組織，以通過(guò)圖像信息的輸入獲取相關(guān)資源全貌的過(guò)程[12]。

圖書(shū)館移動(dòng)視覺(jué)搜索資源主要涉及結(jié)構(gòu)維度、內(nèi)容維度和群聚維度等3個(gè)維度的聚合。結(jié)構(gòu)維度主要關(guān)注移動(dòng)視覺(jué)搜索資源組織中的概念關(guān)系，目前主要涉及本體（Ontology），它在揭示知識(shí)組織結(jié)構(gòu)方面的有效性已經(jīng)得到普遍認(rèn)可。FMurtagh認(rèn)為本體所提供的層級(jí)結(jié)構(gòu)能夠歸納出知識(shí)概念間的形式框架，這種形式框架可用于輔助建立文本中的概念層級(jí)[15]。國(guó)內(nèi)不少學(xué)者也嘗試基于本體對(duì)相關(guān)資源進(jìn)行整合，如基于元數(shù)據(jù)本體對(duì)特色資源進(jìn)行深度聚合[16]、基于本體對(duì)公共數(shù)字文化資源整合[17]、利用資源本體揭示館藏資源的語(yǔ)義關(guān)系[18]、基于本體對(duì)農(nóng)業(yè)領(lǐng)域分布式海量資源進(jìn)行整合[19]，這些研究都將為移動(dòng)視覺(jué)搜索資源結(jié)構(gòu)維度的聚合提供支持。在內(nèi)容維度上，主要關(guān)注異構(gòu)移動(dòng)視覺(jué)資源描述知識(shí)間的關(guān)聯(lián)關(guān)系，這種關(guān)聯(lián)關(guān)系可以是知識(shí)單元間的關(guān)聯(lián)關(guān)系，也可以是知識(shí)群落之間的關(guān)聯(lián)關(guān)系，或者是資源間、語(yǔ)義間或數(shù)據(jù)間的關(guān)聯(lián)關(guān)系[14]。這種關(guān)聯(lián)將不同來(lái)源的異構(gòu)移動(dòng)視覺(jué)資源進(jìn)行概念、關(guān)系、屬性等元素的映射，建立不同元素間的映射關(guān)系，或者將不同主題的相同實(shí)體的屬性、關(guān)系等進(jìn)行合并[13]。群聚維度主要涉及大量用戶對(duì)視覺(jué)資源庫(kù)自由添加標(biāo)簽和分類，由于圖書(shū)館移動(dòng)視覺(jué)搜索視覺(jué)資源庫(kù)的建設(shè)采用眾包的方式效率更高[7]，成本更低，可行性更強(qiáng)，所以對(duì)這些資源庫(kù)的標(biāo)注必然要采用分眾分類法（Folksonomy），它允許用戶自由標(biāo)注資源，并通過(guò)“統(tǒng)計(jì)上浮”的原理使反映群體意識(shí)的用戶標(biāo)簽成為標(biāo)簽云。分眾分類法在管理和組織用戶自生成資源方面效果較好，它為語(yǔ)義網(wǎng)識(shí)別提交了大量有益元數(shù)據(jù)，提供了有利于大眾集體組織和發(fā)現(xiàn)知識(shí)的契機(jī)，使用戶通過(guò)使用者的視角來(lái)整合標(biāo)注詞匯，彌補(bǔ)了圖書(shū)館在知識(shí)組織技術(shù)手段和人力資源方面的不足[14]。

22圖書(shū)館MVS資源的數(shù)據(jù)關(guān)聯(lián)

圖書(shū)館數(shù)字資源的聚合實(shí)質(zhì)上是將異構(gòu)多源的數(shù)字化資源按照一定的方式進(jìn)行關(guān)聯(lián)，目前主要的關(guān)聯(lián)方式有語(yǔ)義關(guān)聯(lián)和數(shù)據(jù)發(fā)現(xiàn)關(guān)聯(lián)兩種。前者主要以資源的主題內(nèi)容為核心，分層次、多維度的對(duì)資源進(jìn)行組織，基于相關(guān)實(shí)體進(jìn)行多維度關(guān)聯(lián)，后者則偏重于挖掘數(shù)字化資源之間的引證關(guān)系，利用耦合關(guān)系實(shí)現(xiàn)資源的聚合，基于相同實(shí)體進(jìn)行多維度關(guān)聯(lián)[11，13]。

數(shù)據(jù)關(guān)聯(lián)應(yīng)用于圖書(shū)館數(shù)字資源的整合在學(xué)界有普遍共識(shí)。傳統(tǒng)以MARC為代表的圖書(shū)館元數(shù)據(jù)在語(yǔ)義性和關(guān)聯(lián)性方面存在著嚴(yán)重不足，而關(guān)聯(lián)數(shù)據(jù)則可以把書(shū)目中的概念和實(shí)體通過(guò)語(yǔ)義描述和鏈接實(shí)現(xiàn)資源內(nèi)容的充分揭示，可以把圖書(shū)館的資源和外部相關(guān)數(shù)據(jù)資源鏈接起來(lái)實(shí)現(xiàn)對(duì)資源的聚合，擴(kuò)展資源范圍并且改進(jìn)用戶服務(wù)[20]。圖書(shū)館館藏資源的關(guān)聯(lián)數(shù)據(jù)化主要通過(guò)URI命名機(jī)制、關(guān)聯(lián)數(shù)據(jù)詞匯集創(chuàng)建、館藏語(yǔ)義描述和關(guān)聯(lián)數(shù)據(jù)的發(fā)布四個(gè)方面為館藏資源聚合提供數(shù)據(jù)基礎(chǔ)。在這一過(guò)程中，資源的URI開(kāi)放復(fù)用在數(shù)字資源的聚合機(jī)制中扮演基礎(chǔ)角色，RDF鏈接是資源聚合的核心[21]。語(yǔ)義關(guān)聯(lián)在圖書(shū)館資源的關(guān)聯(lián)中較受重視，語(yǔ)義關(guān)聯(lián)可以從多個(gè)維度揭示資源中蘊(yùn)含的知識(shí)規(guī)律。將語(yǔ)義網(wǎng)技術(shù)應(yīng)用與圖書(shū)館信息資源的整合中，通過(guò)本體與關(guān)聯(lián)數(shù)據(jù)驅(qū)動(dòng)的資源語(yǔ)義整合框架實(shí)現(xiàn)對(duì)圖書(shū)館中不同數(shù)據(jù)集合中信息資源的語(yǔ)義整合以及館藏資源與外界資源鏈接集成，可以形成可無(wú)限延伸與擴(kuò)展的開(kāi)放資源整合體系[22]。對(duì)于移動(dòng)視覺(jué)搜索資源而言，其資源種類較多，分散、異構(gòu)且多粒度，用戶在進(jìn)行視覺(jué)搜索時(shí)很難快速清晰的找到所需要的信息，因此有必要將語(yǔ)義關(guān)聯(lián)技術(shù)與視覺(jué)資源庫(kù)建設(shè)中的分眾分類標(biāo)注結(jié)合起來(lái)，發(fā)揮各自的優(yōu)勢(shì)，將來(lái)源異構(gòu)、內(nèi)容異構(gòu)、展現(xiàn)異構(gòu)的圖書(shū)館視覺(jué)相關(guān)資源進(jìn)行整合重組，實(shí)現(xiàn)資源庫(kù)與用戶需求的無(wú)縫融合，提升用戶移動(dòng)視覺(jué)搜索的體驗(yàn)。endprint

3基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館MVS資源多維度聚合模型

圖書(shū)館移動(dòng)視覺(jué)搜索資源的聚合主要應(yīng)用語(yǔ)義聚合技術(shù)，以視覺(jué)圖像信息的匹配為前提，以視覺(jué)資源庫(kù)的數(shù)據(jù)單位為基礎(chǔ)，通過(guò)與其他各種本地、外部數(shù)據(jù)資源的語(yǔ)義關(guān)聯(lián)，實(shí)現(xiàn)對(duì)視覺(jué)資源和圖書(shū)館各類數(shù)字資源的深層次語(yǔ)義聚合并展示。圖書(shū)館移動(dòng)視覺(jué)資源的聚合，有利于借助移動(dòng)視覺(jué)搜索這一符合移動(dòng)環(huán)境下用戶行為需求的檢索手段，促進(jìn)圖書(shū)館數(shù)字資源的利用。在明確基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館移動(dòng)視覺(jué)搜索資源多維聚合相關(guān)理論的基礎(chǔ)上，筆者構(gòu)建了聚合模型，將圖書(shū)館移動(dòng)視覺(jué)搜索資源聚合分為基礎(chǔ)數(shù)據(jù)層、資源描述層、語(yǔ)義聚合層和用戶應(yīng)用層4個(gè)部分。

31基礎(chǔ)數(shù)據(jù)層

圖書(shū)館移動(dòng)視覺(jué)搜索資源的基礎(chǔ)數(shù)據(jù)層主要包括本地原有數(shù)據(jù)資源、自建視覺(jué)資源和外部數(shù)據(jù)資源三部分。本地原有資源主要包括圖書(shū)館擁有的OPAC書(shū)目、中外文電子圖書(shū)、電子期刊、圖片視頻多媒體數(shù)據(jù)庫(kù)；自建視覺(jué)資源是專門(mén)用于圖書(shū)館環(huán)境下視覺(jué)搜索的視覺(jué)資源庫(kù)；外部數(shù)據(jù)資源是指能夠連接到關(guān)聯(lián)數(shù)據(jù)網(wǎng)中與圖書(shū)館移動(dòng)視覺(jué)資源有關(guān)的各種數(shù)據(jù)資源集合，如當(dāng)當(dāng)網(wǎng)、豆瓣、超星圖書(shū)和聯(lián)合目錄等網(wǎng)站，這些資源存儲(chǔ)形式不一，所以在進(jìn)行數(shù)據(jù)關(guān)聯(lián)時(shí)要采用不同的方法進(jìn)行轉(zhuǎn)換。在上述3種資源中，本地原有資源庫(kù)相對(duì)比較成熟，在各種形式的資源組織中已廣泛應(yīng)用；自建的視覺(jué)資源庫(kù)是建立在圖書(shū)館不同利用情景基礎(chǔ)上，主要從用戶的視角采用眾包模式采集的用于圖像匹配的資源，它是進(jìn)行圖書(shū)館移動(dòng)視覺(jué)搜索的中介和前提，用戶的移動(dòng)視覺(jué)檢索大多需要依賴于圖像輸入并匹配后的數(shù)據(jù)關(guān)聯(lián)發(fā)現(xiàn)，因此眾包的視覺(jué)資源庫(kù)建設(shè)要充分考慮各種圖書(shū)館利用情景、各層次用戶利用行為和各種異構(gòu)資源的彼此關(guān)聯(lián)，在收集形式上將眾包和圖書(shū)館自建結(jié)合在一起，圖書(shū)館自建作為引導(dǎo)和模板，眾包作為重心和主要手段，要充分利用用戶群體智慧收集視覺(jué)資源，并采用分眾分類的方式添加標(biāo)注相關(guān)元數(shù)據(jù)信息。視覺(jué)資源庫(kù)的建設(shè)和組織是區(qū)別與其他一般意義上的圖書(shū)館數(shù)字資源整合的關(guān)鍵和核心，對(duì)于圖書(shū)館移動(dòng)視覺(jué)搜索的成功非常重要。外部與圖書(shū)館資源服務(wù)有關(guān)的網(wǎng)站資源是對(duì)本地資源的有效補(bǔ)充，對(duì)這些分布異構(gòu)的網(wǎng)絡(luò)資源可以采用智能化、自動(dòng)化的數(shù)據(jù)采集方式獲取。

32資源描述層

資源描述層是將異構(gòu)多源的圖書(shū)館移動(dòng)視覺(jué)搜索相關(guān)的圖像資源、文本資源等進(jìn)行統(tǒng)一描述，明確不同信息要素之間的關(guān)聯(lián)，保障不同結(jié)構(gòu)和類型的資源描述具有統(tǒng)一

圖1基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館MVS資源多維聚合模型

的標(biāo)準(zhǔn)，為機(jī)器識(shí)別操作和下一步的語(yǔ)義聚合提供便利。各種資源（尤其是視覺(jué)資源庫(kù)資源）在本體構(gòu)建的基礎(chǔ)上，通過(guò)信息抽取加工，提取其中的特征向量，構(gòu)建能兼容不同文獻(xiàn)類型、規(guī)范統(tǒng)一的元數(shù)據(jù)庫(kù)。在對(duì)數(shù)字資源進(jìn)行描述的過(guò)程中，要重視對(duì)不同類型的數(shù)字資源進(jìn)行語(yǔ)義標(biāo)注，這些標(biāo)注有助于系統(tǒng)識(shí)別多源異構(gòu)信息資源內(nèi)在的含義和邏輯關(guān)系。目前圖書(shū)館傳統(tǒng)的各種本地資源和外部資源的描述已被廣泛討論[23-26]，而針對(duì)以視覺(jué)搜索為目的且需與圖書(shū)館各類資源進(jìn)行聚合的圖片資源庫(kù)描述研究較少。以眾包為主要方式獲得的視覺(jué)資源庫(kù)采用分眾分類法，雖然基于用戶自身的語(yǔ)義認(rèn)知，發(fā)揮了他們的群體意識(shí)和智慧，提高了資源描述效率，降低了時(shí)間和財(cái)力成本，但是卻不得不受用戶認(rèn)知隨意性甚至偏執(zhí)的影響，會(huì)對(duì)資源聚合的結(jié)果帶來(lái)不穩(wěn)定性[14]。因此在對(duì)視覺(jué)資源庫(kù)描述的規(guī)劃時(shí)，對(duì)大眾的參與要揚(yáng)長(zhǎng)避短，全面考慮本體的專業(yè)性、元數(shù)據(jù)的完整性和語(yǔ)義的關(guān)聯(lián)性，使對(duì)資源的描述統(tǒng)一為機(jī)器可識(shí)別的格式，并通過(guò)元數(shù)據(jù)的映射關(guān)聯(lián)實(shí)現(xiàn)對(duì)多維信息資源的語(yǔ)義識(shí)別。

33語(yǔ)義聚合層

語(yǔ)義聚合是在前期各類移動(dòng)視覺(jué)搜索數(shù)字資源描述的基礎(chǔ)上，充分揭示各種不同數(shù)字資源之間的語(yǔ)義關(guān)聯(lián)，實(shí)現(xiàn)視覺(jué)資源與其他各類圖書(shū)館資源的信息聚合。語(yǔ)義聚合是整個(gè)圖書(shū)館移動(dòng)視覺(jué)搜索的核心，它可以促進(jìn)多源異構(gòu)信息之間的交流和互操作，并以同一的標(biāo)準(zhǔn)將各信息要素關(guān)聯(lián)起來(lái)并展示給用戶。語(yǔ)義聚合在訪問(wèn)各類數(shù)字資源的基礎(chǔ)上，以視覺(jué)資源庫(kù)的元數(shù)據(jù)為中心，對(duì)數(shù)字資源的各元素之間的同一關(guān)系、相關(guān)關(guān)系、隸屬等級(jí)關(guān)系、間接論述關(guān)系等進(jìn)行本體映射和語(yǔ)義分析，然后提取視覺(jué)資源庫(kù)語(yǔ)義元數(shù)據(jù)和其它各異構(gòu)信息的接口，自動(dòng)半自動(dòng)的進(jìn)行實(shí)體的識(shí)別（如題目、作者、ISSN、ISBN、出版社等）。在解決視覺(jué)資源與其他資源之間語(yǔ)義沖突的基礎(chǔ)上，最終形成語(yǔ)義關(guān)聯(lián)聚合的數(shù)據(jù)供用戶應(yīng)用層使用。在上述映射關(guān)聯(lián)過(guò)程中，4種不同維度的語(yǔ)義關(guān)聯(lián)比較重要。其中同一關(guān)聯(lián)主要指具有類似特征、屬性或內(nèi)涵的分布異構(gòu)資源的關(guān)聯(lián)，相關(guān)關(guān)聯(lián)主要指存在因果、邏輯等關(guān)系資源的關(guān)聯(lián)，等級(jí)隸屬關(guān)聯(lián)主要指從屬于相同類別、學(xué)科或者主體等關(guān)系的關(guān)聯(lián)，間接關(guān)聯(lián)主要指不同于與上述三種關(guān)聯(lián)形式，且需要通過(guò)語(yǔ)義處理或者計(jì)算機(jī)模擬的關(guān)聯(lián)[27]。此外，可視化的展示在數(shù)字資源的揭示中已經(jīng)被經(jīng)常使用，可視化可以更加直觀形象的揭示不同來(lái)源的信息聚合情況，有利于用戶進(jìn)一步發(fā)現(xiàn)需要的相關(guān)信息，更好的提升圖書(shū)館各類資源的利用效率。

34用戶應(yīng)用層

在經(jīng)過(guò)對(duì)視覺(jué)資源庫(kù)和其他各類數(shù)據(jù)資源的描述、語(yǔ)義關(guān)聯(lián)聚合后，我們可以構(gòu)建面向用戶的應(yīng)用界面，提供移動(dòng)視覺(jué)搜索服務(wù)，以滿足用戶在移動(dòng)環(huán)境下，以圖像輸入為手段對(duì)館藏資源語(yǔ)義化的檢索查詢需求。用戶圖像輸入的接口可以和圖書(shū)館移動(dòng)終端檢索界面融合，使用戶可以自行選擇傳統(tǒng)文本輸入或者圖像輸入，圖像輸入主要滿足一些難以用簡(jiǎn)單文本描述的檢索需求。檢索入口的便捷性對(duì)圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)的可用性極為重要，因此在設(shè)計(jì)移動(dòng)視覺(jué)搜索入口時(shí)盡可能吸取以往圖書(shū)館移動(dòng)服務(wù)路徑過(guò)于復(fù)雜造成用戶利用障礙的教訓(xùn)，充分考慮用戶移動(dòng)利用行為習(xí)慣，開(kāi)放性的融入到用戶常用的APP接口。在圖像匹配方面，移動(dòng)視覺(jué)搜索系統(tǒng)會(huì)對(duì)每一次用戶輸入的圖像及圖像中可以識(shí)別的信息與已經(jīng)構(gòu)建的視覺(jué)資源庫(kù)的圖像或數(shù)據(jù)進(jìn)行匹配。在這一過(guò)程中，如無(wú)匹配的相關(guān)信息，系統(tǒng)要將用戶攝入的圖像自動(dòng)納入到視覺(jué)資源庫(kù)中并利用分眾分類的方式對(duì)圖像信息進(jìn)行描述和關(guān)聯(lián)聚合，通過(guò)這一循環(huán)迭代模式有效的優(yōu)化視覺(jué)資源采集方式，提升視覺(jué)資源庫(kù)對(duì)用戶的針對(duì)性和可用性，構(gòu)建全面豐富且動(dòng)態(tài)更新的視覺(jué)資源庫(kù)。此外，在視覺(jué)資源庫(kù)檢索匹配的基礎(chǔ)上，系統(tǒng)自動(dòng)將與匹配圖像相關(guān)聯(lián)的其他各類資源聚合起來(lái)，并結(jié)合對(duì)用戶個(gè)人信息的情景感知，將個(gè)性化、針對(duì)性的檢索結(jié)果輸出給用戶使用，在這一過(guò)程中可視化的工具可以幫助用戶查看資源聚合的模型，了解各種相關(guān)資源的情況。endprint

4圖書(shū)館MVS服務(wù)聚合的應(yīng)用分析

圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)對(duì)于移動(dòng)情景非常敏感，不同應(yīng)用情景下用戶對(duì)移動(dòng)視覺(jué)搜索服務(wù)的內(nèi)容需求有較大差別，在前期進(jìn)行圖書(shū)館移動(dòng)視覺(jué)搜索資源多維度語(yǔ)義關(guān)聯(lián)的基礎(chǔ)上，聚合服務(wù)的實(shí)現(xiàn)也變得可行。聚合服務(wù)將不同情景的圖書(shū)館移動(dòng)視覺(jué)搜索需求進(jìn)行了整合，方便用戶在統(tǒng)一的平臺(tái)和入口進(jìn)行視覺(jué)搜索，提高了圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)的可用性和用戶體驗(yàn)的滿意度。服務(wù)聚合和資源聚合是相輔相成的，圖2顯示了圖書(shū)館移動(dòng)視覺(jué)搜索聚合實(shí)現(xiàn)的流程，其中虛線部分代表視覺(jué)資源庫(kù)和語(yǔ)義關(guān)聯(lián)為核心的資源聚合，實(shí)線部分代表了移動(dòng)視覺(jué)搜索服務(wù)聚合實(shí)現(xiàn)的流程。下面主要以電子圖書(shū)和數(shù)字人文資源的移動(dòng)視覺(jué)搜索服務(wù)聚合為例進(jìn)行說(shuō)明。

圖2圖書(shū)館MVS服務(wù)聚合實(shí)現(xiàn)流程

電子圖書(shū)和數(shù)字人文資源是圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)的重要應(yīng)用領(lǐng)域，資源的建設(shè)是服務(wù)實(shí)現(xiàn)的前提，上圖的虛線部分主要從館員自建、眾包建設(shè)和系統(tǒng)自動(dòng)采集（如前34所述）3個(gè)途徑收集電子圖書(shū)和數(shù)字人文項(xiàng)目的視覺(jué)資料來(lái)構(gòu)建視覺(jué)資源庫(kù)，通過(guò)館員專業(yè)標(biāo)注和分眾聚類兩種方式對(duì)視覺(jué)資源庫(kù)進(jìn)行數(shù)據(jù)加工提取，并在此基礎(chǔ)上和館藏OPAC、圖像視頻數(shù)據(jù)庫(kù)、移動(dòng)電子圖書(shū)以及數(shù)字人文資源等通過(guò)語(yǔ)義關(guān)聯(lián)實(shí)現(xiàn)多維度的資源聚合。

在電子圖書(shū)和數(shù)字人文資源的移動(dòng)視覺(jué)搜索具體服務(wù)過(guò)程中，如上圖實(shí)線部分所示，用戶在一定移動(dòng)情景下，由于需要了解某本無(wú)法外借圖書(shū)是否有電子圖書(shū)可供閱讀，或者需要檢索圖書(shū)館推薦的有關(guān)某位專家學(xué)者的電子圖書(shū)或視頻資料是否可供利用，或者對(duì)圖書(shū)館展示的某個(gè)人文資源想有更深層的了解，即可以通過(guò)手機(jī)等移動(dòng)終端的統(tǒng)一檢索入口，攝入某本圖書(shū)的封面、某位專家的圖像或者某個(gè)人文資源的圖片，移動(dòng)視覺(jué)搜索系統(tǒng)將攝入的圖像與視覺(jué)資源庫(kù)中的圖像信息進(jìn)行匹配，或者通過(guò)識(shí)別圖像中的文本信息與視覺(jué)資源庫(kù)中的元數(shù)據(jù)進(jìn)行匹配，將匹配到與圖像元數(shù)據(jù)有語(yǔ)義關(guān)聯(lián)的所有電子圖書(shū)資源、數(shù)字人文資源、OPAC書(shū)目或其它視頻圖像資源檢索出來(lái)，同時(shí)在這一過(guò)程中結(jié)合用戶的個(gè)性化信息，返回針對(duì)性、個(gè)性化的檢索結(jié)果給用戶使用，實(shí)現(xiàn)基于語(yǔ)義關(guān)聯(lián)的圖書(shū)館移動(dòng)視覺(jué)搜索的個(gè)性化聚合服務(wù)。圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)提供過(guò)程中，移動(dòng)視覺(jué)搜索入口的便捷性和視覺(jué)資源庫(kù)的快速自動(dòng)動(dòng)態(tài)更新十分重要，兩者對(duì)用戶的采用意愿、使用體驗(yàn)等有著較為直接的影響。

5結(jié)語(yǔ)

圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)是移動(dòng)互聯(lián)網(wǎng)時(shí)代圖書(shū)館更好的切入用戶利用場(chǎng)景和促進(jìn)圖書(shū)館各種資源開(kāi)發(fā)利用的有效措施。要使不同情境下的移動(dòng)視覺(jué)搜索服務(wù)成為現(xiàn)實(shí)，必須構(gòu)建語(yǔ)義關(guān)聯(lián)的移動(dòng)視覺(jué)資源多維度聚合體系，在這一過(guò)程中以視覺(jué)資源庫(kù)為中心的多種異構(gòu)圖書(shū)館資源的語(yǔ)義關(guān)聯(lián)十分重要，在此基礎(chǔ)上的移動(dòng)視覺(jué)搜索服務(wù)要重視統(tǒng)一的視覺(jué)搜索入口建設(shè)和以分眾分類為主要手段的視覺(jué)資源庫(kù)動(dòng)態(tài)更新，這些是圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)成功實(shí)施的重要基礎(chǔ)。

參考文獻(xiàn)

[1]羅超.視覺(jué)搜索：這就是移動(dòng)搜索未來(lái)的模樣？[EB].http：//www.tmtpost.com/27466.html，2016-12-23.

[2]Girod B，Chandrasekhar V，Grzeszczuk R，et al.Mobile Visual Search： Architectures，Technologies，and the Emerging MPEG Standard[J].IEEE Multimedia，2011，18（3）： 86-94.

[3]Girod B，Chandrasekhar V，Chen D M，et al.Mobile Visual Search[J].IEEE Signal Processing Magazine，2011，28（4）： 61-76.

[4]張興旺，李晨暉.數(shù)字圖書(shū)館移動(dòng)視覺(jué)搜索機(jī)制建設(shè)的若干關(guān)鍵問(wèn)題[J].圖書(shū)情報(bào)工作，2015，（15）： 42-48.

[5]趙宇翔，朱慶華.大數(shù)據(jù)環(huán)境下移動(dòng)視覺(jué)搜索的游戲化機(jī)制設(shè)計(jì)[J].情報(bào)資料工作，2016，（4）： 19-25.

[6]朱慶華.大數(shù)據(jù)環(huán)境下數(shù)字資源移動(dòng)視覺(jué)搜索機(jī)制[J].情報(bào)資料工作，2016，（4）： 5.

[7]張亭亭，趙宇翔，朱慶華.數(shù)字圖書(shū)館移動(dòng)視覺(jué)搜索的眾包模式初探[J].情報(bào)資料工作，2016，（4）： 11-18.

[8]劉木林，朱慶華，趙宇翔.基于關(guān)聯(lián)數(shù)據(jù)的數(shù)字圖書(shū)館移動(dòng)視覺(jué)搜索框架研究[J].情報(bào)資料工作，2016，（4）： 6-10.

[9]韓璽，何秀美，張玥，朱慶華.基于情景感知的圖書(shū)館移動(dòng)視覺(jué)搜索服務(wù)設(shè)計(jì)研究[J].圖書(shū)館學(xué)研究，2017，（16）：42-47

[10]韓璽，齊云飛，朱慶華.移動(dòng)視覺(jué)搜索在國(guó)內(nèi)圖書(shū)館應(yīng)用的探索研究[J].圖書(shū)館學(xué)研究，2017，（7）： 79-83.

[11]李佳軍.高校數(shù)字化信息資源多維度聚合搜索服務(wù)與應(yīng)用研究[J].情報(bào)科學(xué).2017，（4）：93-96.

[12]楊萌，張?jiān)浦校鞂毾?社會(huì)化標(biāo)注系統(tǒng)資源多維度聚合機(jī)理研究[J].圖書(shū)情報(bào)工作，2013，（15）： 126-131.

[13]夏立新，陳晨，王忠義.基于多維度聚合的網(wǎng)絡(luò)資源知識(shí)發(fā)現(xiàn)框架研究[J].情報(bào)科學(xué)，2016，（5）： 3-8.

[14]周姍姍.基于Folksonomy模式的數(shù)字資源多維度聚合研究[D].長(zhǎng)春：吉林大學(xué)，2014.

[15]Murtagh F，Mothe J，Englmeier K.Ontology from Local Hierarchical Structure in Text[J].Computer Science，2007：0701180.

[16]彭佳，鄭巧英，張晗，等.基于元數(shù)據(jù)本體的特色資源深度聚合研究[J].圖書(shū)館雜志，2016，（11）： 82-89.

[17]肖希明，完顏鄧鄧.基于本體的公共數(shù)字文化資源整合語(yǔ)義互操作研究[J].國(guó)家圖書(shū)館學(xué)刊，2015，（3）： 43-49.

[18]邱均平，樓雯，余凡，等.基于資源本體的館藏資源語(yǔ)義化研究[J].圖書(shū)館論壇，2013，（6）： 1-7.

[19]李文.基于本體的面向農(nóng)業(yè)領(lǐng)域的分布式海量資源整合方法[D].上海：復(fù)旦大學(xué)，2010.

[20]丁楠，潘有能.基于關(guān)聯(lián)數(shù)據(jù)的圖書(shū)館信息聚合研究[J].圖書(shū)與情報(bào)，2011，（6）： 50-53.

[21]游毅，成全.試論基于關(guān)聯(lián)數(shù)據(jù)的館藏資源聚合模式[J].情報(bào)理論與實(shí)踐，2013，（1）： 109-114.

[22]歐石燕，胡珊，張帥.本體與關(guān)聯(lián)數(shù)據(jù)驅(qū)動(dòng)的圖書(shū)館信息資源語(yǔ)義整合方法及其測(cè)評(píng)[J].圖書(shū)情報(bào)工作，2014，（2）： 5-13.

[23]孫輝，王穎，張智雄.基于工具書(shū)語(yǔ)料的國(guó)史知識(shí)庫(kù)構(gòu)建和檢索[J].現(xiàn)代情報(bào)，2016，36（1）：64-73.

[24]孫建軍，徐芳.基于關(guān)聯(lián)數(shù)據(jù)的學(xué)科網(wǎng)絡(luò)信息深度聚合框架構(gòu)建[J].圖書(shū)館，2015，（7）： 50-54.

[25]梁少星.基于語(yǔ)義關(guān)聯(lián)的實(shí)例相似度計(jì)算方法及應(yīng)用研究[J].現(xiàn)代情報(bào)，2015，35（8）：151-156.

[26]曾群，劉昊，李瑞婻.基于知識(shí)關(guān)聯(lián)理論的數(shù)字圖書(shū)館信息資源聚合研究[J].圖書(shū)館學(xué)研究，2016，（23）： 36-41.

[27]張建紅.基于語(yǔ)義關(guān)聯(lián)的海量數(shù)字資源知識(shí)聚合與服務(wù)研究[J].圖書(shū)館工作與研究，2016，（8）： 44-47.

（本文責(zé)任編輯：孫國(guó)雷）endprint