基于移動視覺搜索的圖書館文旅融合發展策略研究*

張 玥 余 姝 朱慶華

（1.南京大學信息管理學院 江蘇南京 210023）

1 引言

文化旅游資源是歷史發展脈絡的延續和中華文明發展史的濃縮，對其有效的開發和利用有助于加深國人對民族文化的理解與傳承。自2018年國務院機構改革重組文化和旅游部開始，以文化與旅游相互融合的新時代旅游資源開發與服務受到了廣泛關注。越來越多的人開始意識到旅游是傳播文化和 加 強 文 化 自 信過 程 中 重 要 且 有 效 的 載 體，融合文化和旅游產業不僅是盤活經濟社會各類資源、帶動產業提升轉型的關鍵舉措，更是公共文化服務轉型的重中之重。然而由于不同個體旅游行為的偏好以及對于文化的理解與吸納過程都不盡相同，如何用大眾所接受的方式將文化要素自然融入到旅游過程中，又如何通過旅游過程更好地詮釋與傳播特色文化、提升文化軟實力，是當下值得探索的新問題。圖書館作為公共文化服務機構，擁有豐富的文獻資源，這些資源能夠展現當地的文化特色、歷史進程，對于文旅融合有著基礎性的作用。由于人類有近80%的信息通過眼睛獲取，而旅游過程則更加依賴視覺信息檢索與處理，因此，在圖像識別和移動智能技術發展基礎之上所出現的新型檢索形式——移動視覺搜索（Mobile Visual Search，MVS）將成為文化與旅游高效融合的重要解決方式。因此，圖書館依托移動視覺搜索技術能夠為文化和旅游活動帶來新體驗，加快文旅融合發展的步伐。

移動視覺搜索是指用戶將實物的圖像或者視頻作為檢索對象，通過移動互聯網獲取其相關信息并在移動終端顯示的一種交互式信息檢索方式。從文化傳播過程上看，移動視覺搜索過程的社會化（Social）、搜索內容的本地化（Local）、搜索形態的移動化（Mobile）突破了傳統文本搜索的場景局限，使得圖書館等文化機構所含文化信息的獲取、交流與傳播更為高效和便捷；從旅游過程看，以視覺信息為檢索線索非常契合移動情境下的旅游體驗，如用戶可以在參觀故宮時通過拍照搜索對展品質地、來源和年代等信息進行了解，亦可通過對于特定場景的視覺搜索獲取與之相關的歷史故事。因此，本文將移動視覺搜索作為圖書館文旅資源無縫對接的重要解決策略，在對其進行理論和實踐綜述的基礎上，從眾包方式的資源采集、語義關聯的數據聚合以及情景化服務設計三個方面對基于移動視覺搜索的圖書館文旅融合發展策略進行研究，并嘗試對圖書館等文化機構和旅游機構如何通過移動視覺搜索技術來促進融合發展提出了相應的對策和建議。

2 移動視覺搜索在國內外的相關研究

斯坦福大學在2009年舉辦了第一屆移動視覺搜索研討會，而隨著移動互聯網技術的發展、移動環境的建設以及移動智能終端的普及，移動視覺搜索這種新一代信息搜索技術快速興起并引起了學界和業界的廣泛關注。移動視覺搜索的商業化驅動尤為明顯，目前市場上主要以各類移動APP的形式呈現，如目前京東、淘寶等各大電子商務平臺在充分考慮用戶購物情景的基礎上，均推出了對現實物品拍照可在移動購物平臺檢索出同樣或相似物品的功能，能夠更好地滿足用戶在移動環境下的電子商務購物需求。國內市場占有率最高的搜索引擎百度，也在其移動端檢索框中提供了方便用戶即時拍照以查找相關圖片信息的移動視覺搜索功能，提升用戶在移動情景下的信息檢索體驗?？傮w而言，與商業領域的成熟應用相比，由于缺乏經濟效益的刺激和建設資金的投入，文化與旅游領域的移動視覺搜索應用仍處于簡單、初級的試驗階段。

2.1 移動視覺搜索在文化領域的研究

移動視覺搜索較早在國外文化領域獲得關注，Chandrasekhar等提出可將這一技術應用于檢索圖書文獻、博物館展品和畫廊藝術品相關信息；北卡大學圖書館依托該校特色館藏開發了WolfWalk應用程序，用戶在參觀校園時使用移動終端進行拍攝即可進一步獲取本校歷年以來相關的人物和故事；曼徹斯特大學搭建的SCARLET系統能夠讓iPad用戶在拍攝圖書館的櫥窗古籍等圖像時，顯示古籍的相關圖片、文字介紹等信息，還可以收聽相關音頻資料。國內在2015年將移動視覺搜索引入到圖書館領域后，不少學者做了大量基礎研究，如南京大學朱慶華教授課題組分別對移動視覺搜索在圖書館的服務設計、應用與障礙、基于關聯數據的圖書館MVS數字資源與服務聚合、數字圖書館關于移動視覺搜索的眾包模式和游戲化設計、基于移動視覺搜索的圖博檔融合服務模式等內容開展了系列研究；武漢大學曾子明教授課題組的主要研究成果包含融合情境和用戶畫像的智慧圖書館移動視覺搜索服務及技術框架、去中心化的移動視覺搜索模型等內容。對于一些信息弱勢群體而言，MVS技術降低了搜索的門檻，增強了數字圖書館的普惠能力，體現了數字圖書館的人文主義關懷。盡管國內外對于移動視覺搜索在文化領域的相關研究不少，然而部分應用只是在形式上符合移動視覺搜索的概念，實際上僅僅是對圖片固定關聯信息的展示，是對小范圍局部資源的增強現實應用，與商業領域通過圖片信息的識別分析在龐大的數據庫中檢索相關圖片及相關信息的應用相比有較大差距。

2.2 移動視覺搜索在旅游領域的研究

在旅游領域，Google公司早在2009年就推出了基于移動視覺搜索的Google Goggles系統，用戶通過操作系統可搜索相關景點資料和圖片信息；維基公司開發的Wikitude World Browser手機APP具備基于地理位置的增強實景功能，用戶可通過信息標注操作來識別景點建筑物。國內一些旅游景區（如石獅六勝塔公園等）通過張貼二維碼的方式，使用戶可以利用智能手機掃描二維碼獲取相關景點的信息，以便更加深入地了解旅游景觀的歷史背景、人物的詳細說明或動植物的具體信息；“VR/AR技術”融合了視覺、聽覺、觸覺，讓遠在千里之外的用戶也能獲得“沉浸式”的旅游體驗，國內已有五百多個景點能夠使用戶通過VR設備進行“游覽”，在虛擬的三維場景中用戶轉換視角就能自動顯示當前景點的相關信息，而通過與GIS技術的結合，文化遺址等景點也可重現當年的樣貌展示給用戶。MVS技術改變了傳統的檢索模式，在一定程度上“解放”了用戶旅游時的雙手，增強了用戶多任務同時處理的可能性，而場景的直觀搜索也降低了用戶的認知成本。雖然旅游領域已對移動視覺搜索進行了一定程度的實踐，但是通過掃描二維碼的方式獲取景點信息并不是嚴格意義上的移動視覺搜索，更多是通過中介轉換獲取信息的過程，至于能跨越時空限制來獲取景點信息的“VR/AR技術”符合移動視覺搜索的定義，然而當前這一技術尚不夠成熟，與文化旅游的結合仍有待加強。

2.3 移動視覺搜索在圖書館文旅融合領域的研究

圖書館等文化機構在移動視覺搜索應用上的積累為促進文旅融合發展發揮著重要作用，國內外不少文化機構在開發游覽功能方面做了嘗試和探索：位于英國創意藝術大學的手工藝藝術研究中心收藏了諸多20世紀以來一流的手工藝品和相關從業人員的檔案資料，該中心通過移動視覺搜索的方式使參觀者在拍攝藝術品的照片后能即時對藝術博物館展品有更為詳細和豐富的了解；國內上海交通大學李政道圖書館是一個聚合圖書館、博物館、檔案館、美術館和科技館為一身的多功能體，用戶在安裝該館提供的APP后可以在游覽過程中利用手機拍攝館內實物圖片，APP會顯示與圖片信息相關的文字、視頻、音頻、圖書、檔案等相關資料。國內一些學者就移動視覺搜索在促進文旅融合發展方面也展開了研究，如鐘志鵬等針對博物館參觀者的信息需求，構建了基于移動視覺的博物館導覽系統，參觀者可通過移動終端拍攝藏品以獲取更為豐富而全面的信息；國內還有一些學者對數字圖書館移動視覺搜索機制以及移動視覺搜索在特色館藏陳展和構建公共文化服務模型中的應用進行了研究。圖書館是文旅資源開發中的重要組成部分，而文旅融合是我國建設方針中的重點內容，雖然部分學者對圖書館在促進文旅融合發展方面進行了研究，但很多研究只是從理論層面提出了解決對策，借助現代技術提出實質性發展策略的研究較少。與此同時，不少實踐項目（如北卡大學項目和博物館參觀等）已顯示了移動視覺搜索技術在文旅資源開發與服務領域應用的豐富前景，而結合圖書館的信息資源與已有的移動視覺搜索實踐經驗可知，移動視覺搜索將成為圖書館文旅融合發展的粘合劑。

3 基于移動視覺搜索的圖書館文旅融合數字資源建設與聚合

電子商務中的移動視覺搜索主要基于商品圖片進行圖像的匹配和識別以檢索相似圖片進行購物選擇，由于目前圖像識別技術相對比較成熟，并且在機器學習的支持下圖像檢索的效率和效果都有了大幅提升，因此商業領域移動視覺搜索相對容易實現。與商業網站（如淘寶）或搜索引擎（如百度）等平臺自身所包含的大量文本或圖片不同，文化旅游情景下的移動視覺搜索需要大量適用于視覺搜索的數字資源，尤其是旅游情景下移動視覺搜索輸入的是實物圖片信息，而需要獲取的則是文本、音頻、視頻、圖像等多種異構的文化資源。雖然近年來Web2.0技術的發展促進大眾貢獻了豐富的旅游圖像、文本等網絡素材，圖書館等文化機構也存儲了大量與文化旅游相關的數字資源，但是這些異構散亂的數字資源和大眾現實生活情景的割裂使二者很難有機融合。因此在國家推動文化和旅游管理融合的背景下，以圖書館為主的圖博檔等文化機構應該主動合作，并承擔起契合旅游情景的數字資源建設與整合工作，這是相關文化機構在文化旅游融合背景下對自身功能和服務的延伸與拓展。尤其是圖書館，在基于移動視覺搜索的文化旅游數字資源建設與聚合方面，應該充分發揮其在數字資源組織和建設方面的經驗和優勢。下面主要從資源的采集、聚合及服務設計三個主要方面進行詳細闡述。

3.1 眾包方式建構文化旅游領域視覺資源庫

文化旅游資源作為文化的表征，其內在隱含文化知識在移動旅游情景下的同步揭示有待豐富的旅游及文化相關數字資源的支持，尤其是支持移動視覺搜索所必不可少的視覺數字資源。盡管互聯網、圖書館等文化機構和旅游相關機構自身已有一定數量的數字資源積累，但是缺乏視覺資源以及對這些資源的組織整理和有效利用。以往數字資源建設項目的經驗顯示，僅依靠單一機構建設會面臨資金和人力持續投入的壓力，難以保證各種資源的不斷更新，且管理機構主導的資源建設容易脫離大眾實際需求，因此本文提出通過眾包這一依靠大眾共同完成任務的組織形式來實現海量動態文化旅游視覺資源庫的建設。視覺資源庫是對文化旅游資源進行移動視覺搜索的基礎和媒介，不僅包括旅游場景相關的視覺資源，也包括圖書、檔案、實物展品等所有與文化相關的視覺資源。從用戶的視角出發，依托眾包模式收集使用者用于搜索和匹配的圖像、視頻等一系列視覺資源，有利于保證資源契合大眾需求且持續動態更新。眾包構建視覺資源庫要充分考慮大眾對文化旅游資源的利用情景以及與互聯網、文化機構的多源資源關聯。文化旅游管理部門需要安排專門的項目牽頭單位，發揮好組織引導作用，在提供資源平臺和數據采集模板的基礎上，以公眾作為收集視覺資源的主體之一，統籌協調眾包任務的設計和實施，而圖書館是發起眾包項目較適宜的機構。澳大利亞國家圖書館2006年建立起了“圖片澳大利亞”眾包項目，收集了50余家文化遺產機構的數字圖片，同時鼓勵社會民眾上傳圖片，每年圖庫的增長量達數萬條，為促進澳大利亞旅游業的發展建立了龐大的數字圖片庫。針對后續為相關資源標注元數據信息等資源組織的任務，建議也采用眾包模式，以減輕對專業數字資源標引人員的過度依賴，提高項目實施的可行性。Image Searcher公司研發的Cam Find就是一款能夠對圖片進行關鍵詞標注的移動終端圖像搜索APP，當算法及工作人員均難以判斷時，后臺會將問題發送至用戶交由大眾解決，參與人數越多其結果越精準。除此之外，以眾包方式建設視覺資源庫應關注網絡數字資源利用方面，通過現代信息技術智能化、自動化地采集數據，從而獲取分布異構的網絡資源，并與各文化和旅游機構已有本地資源進行有效關聯，方便下一步開展文化旅游數字資源的聚合。

3.2 語義關聯促進多源異構文化旅游資源深度揭示

用于支持檢索的文化旅游數字資源包括旅游圖片、圖書本文、檔案、文物、網頁文字、音頻、視頻等多種來源和類型，針對文化旅游資源特征構建元數據標準，是對資源有效揭示的基礎，也是基于移動視覺搜索的文化旅游數字視覺資源建設的關鍵。美國博物館及圖書館服務中心基于對元數據整合實現了對數字館藏的一站式檢索功能，極大方便了用戶進行知識發現。移動視覺搜索的結果有賴于文本數據與圖像數據等多種資源之間的語義關聯與深層融合，因此對多源異構的文化旅游數字圖像、文本、音頻和視頻等資源進行統一描述，有助于系統識別這些信息資源內在的含義和邏輯關系，保障不同類型和不同來源的文化旅游數字資源具有統一標準，從而為機器識別操作及通過元數據映射關聯實現多維信息資源的聚合提供便利。首先，基于前述所構建的視覺數字資源庫及元數據描述，通過判斷數字資源各元素之間存在的相關關系、同一關系、等級關系、論述關系等進行本體映射和語義分析，然后從中提取語義元數據進行自動化和半自動化的實體識別，最后在解決視覺資源與其他資源的語義沖突后，就形成了具有語義關聯聚合特征的文化旅游數字資源庫可供大眾檢索使用。比利時根特大學的薩姆堡爾研究小組為解決語義聚合問題開發了SFX技術，不同來源、不同通信協議的通信源與服務都可利用SFX技術進而融合，通過鏈接不同類型、格式，乃至異地分布的數字資源，能夠為廣大用戶提供文化、旅游等多種類型的信息。語義聚合是文旅融合發展中移動視覺搜索的核心，對文化旅游資源背后隱藏的豐富信息進行深度的揭示和整合，使大眾對文化旅游資源的感知突破時空局限，使文化傳播的表現形式更加多樣化、大眾化和普及化，使旅游資源本身更具生命力、感染力和吸引力。

3.3 文化旅游資源的情景化移動視覺搜索服務設計

在視覺資源庫眾包構建和語義關聯聚合基礎上，情景化的移動視覺搜索服務設計是文化旅游資源被大眾充分利用的關鍵環節。不同于傳統的文本搜索，移動視覺搜索對服務情景的要求較高，文化旅游資源的移動視覺搜索設計要將大眾對旅游資源的應用情景以及相關文化內涵信息的需求納入考慮，以最方便、快捷的方式將視覺搜索服務嵌入到用戶移動查詢的情景中。圖像信息攝入接口也應盡可能融入用戶最常用的移動應用當中，從而提升服務設計的可用性和使用者滿意度，最大程度減少使用障礙。隨著近些年科技與文化旅游資源的結合，具有初級移動情境感知功能的Google Googles手機APP被更具深度學習功能的Google Lens手機APP所代替，用戶通過拍攝風景可獲取最新的景點資訊，也可拍攝地標、畫作、文字、LOGO等獲取相關文化或旅游信息。在搜索時的圖像匹配過程中，文化旅游資源的移動視覺搜索工具將使用者每一次輸入的圖像與眾包方式構建的視覺資源庫圖像數據進行匹配，如未匹配到圖像的相關信息，系統則會自動將用戶上傳到程序中的圖像收入到視覺資源庫中，并通過分眾分類的方式對圖像進行信息描述與關聯聚合。在用戶參與的影響下，系統資源將源源不斷地迭代更新，從而有效擴大視覺資源采集范圍和優化標引方式，構建全面豐富且動態更新的視覺資源庫。同時，可根據用戶過去的視覺搜索行為進行綜合需求分析，以便之后針對用戶特征向用戶呈現需求匹配度更高的信息資源。對于檢索匹配到的文字、圖像、音頻、視頻等文化旅游數字資源，搜索工具通過可視化的方式對結果進行立體的展示呈現，供檢索者結合實物資源即時、因需利用。

4 促進基于移動視覺搜索的圖書館文旅融合發展對策與建議

為了更好地促進和實現文化的大眾化、普及化傳播，提升民眾的文化自覺和文化自信，需要將文化和旅游進行融合，而移動視覺搜索正是促進二者有效融合的重要技術手段。鑒于圖書館等文化部門和旅游部門以往相對獨立，二者融合發展經驗不足的情況，在前述資源開發建設與聚合的基礎上，我們仍需要采取更多措施促進二者在移動視覺搜索方面的協作。

4.1 加強圖書館等文化部門和旅游機構的協調與合作

文化和旅游機構過去由不同的部門進行管理，盡管二者都有著傳播文化的使命，但是服務側重點并不相同。圖書館、博物館、檔案館、藝術館等文化機構側重于對本部門所擁有的圖書、期刊、文物、檔案、藝術品等資源進行管理和宣傳，傾向于直接向大眾傳播知識和文化，受眾多局限在文化機構的建筑范圍或局部網絡中，而旅游機構則側重于對建筑實物、遺址古跡等文化象征的旅游資源本身進行宣傳、管理和維護，以一種潛移默化和隱性的方式對文化進行傳播，受眾較廣并且更貼近大眾生活，但傳播的效果不夠直接。在新時代文化和旅游融合的背景下，文化部門和旅游機構需要擺脫其傳統功能的局限，突破單一機構的圍墻，對自身角色和功能需要有更清晰的定位，站在促進民族文化自覺、文化自信的高度，以更開闊的視野和更強的責任感，充分利用各自的優勢和強項，加強協調與合作，使中華民族傳統文化和現代文化可以更好地關聯、融合與傳播。愛爾蘭的圣三一圖書館是當地最古老的圖書館，也是具有魔幻色彩的標志性建筑，《哈利波特》在此取景后，當地便以魔幻元素作為旅游特色，多年以來接待了無數慕名而去的游客，成功帶動了當地旅游業的發展，也使得當地民眾對本國文學和影視更加認同。此外，文化部門可參與到智慧旅游平臺的建設中，深挖景點的文化特色，增強大眾在旅游中所獲得的歸屬感。圖書館等文化機構應格外注重地區文化特色挖掘工作，在融合過程中要從已有的數字資源與技術中積極尋找合作切入點，主動與旅游相關機構合作，擔負起文化和旅游融合背景下的文化傳播重任。

4.2 充分發掘移動時代用戶習慣和旅游資源的文化特征

圖書館等文化機構一方面要對移動時代用戶的行為習慣有更深入的了解和認知，另一方面要認識到旅游資源所蘊含的文化要素與文化機構功能的一致性。在移動時代，用戶對智能終端已經產生了較強的依賴，移動終端成為爭奪用戶的重要流量入口，圖博檔等文化機構應該積極主動地面對和適應用戶移動行為習慣對傳統服務所帶來的影響。移動服務并非PC服務簡單向移動端遷移，移動智能環境下的用戶行為習慣與PC環境有較大不同。在移動時代，用戶對服務的便捷性和即時性提出了更高的要求，對使用情景的感知更強，圖博檔等文化機構的服務設計要從館藏資源出發的被動服務向從用戶生活學習情景出發的主動推送轉變，充分考慮移動情景下視覺搜索帶給文化機構資源建設和揭示的機會，更好地提升用戶體驗的滿意度，以用戶在新技術環境下的應用情景為導向完善文化機構的功能與服務。此外，文化機構要充分認識到旅游活動的文化特征，利用移動技術帶來的便利，將信息、知識和中華文化結合到更廣闊的領域進行傳播。中國國家圖書館2016年便開展了親子研學旅游服務項目——“經典·悅讀”文化活動，利用圖書館的館藏資源與專家資源豐富活動內涵，并通過官方微博和微信公眾號進行宣傳，讓青少年和家長在閱讀、講解、體驗、互動中更好地了解中華文明，達到文化教育和旅游休閑合二為一的目的?？梢?，圖書館不僅要挖掘已有資源中的旅游因素，以旅游為主題和線索，推廣用戶喜歡的館藏資源，還要走出去與旅游機構合作，將館藏資源與旅游資源進行有效關聯，豐富和充實原有服務內容，拓展發展空間，利用旅游資源更好地傳播文化知識，促進文化的大眾化、普及化傳播。

4.3 重視從文化與知識傳播角度深入開發旅游資源

旅游景點及旅游管理部門在文旅融合發展的背景下，應該更加重視旅游領域在傳播文化方面的責任。旅游資源不僅是一種經濟資源，更是一種文化資源，文化價值是旅游資源的根本和初衷。在市場經濟發展過程中，許多地區的旅游管理部門受經濟利益導向的影響，對旅游的經濟功能重視程度過高，而旅游資源的文化功能則常常被忽視。此外，過去旅游和文化機構在行政體制上屬于不同的部門管理，歷史遺留問題使得二者較少有過實質性的溝通和協調，導致旅游機構在主動傳播文化方面缺位。旅游景點與管理機構要清晰意識到自身在新時代的文化價值和定位，要從文化傳播的新視角開發旅游資源，重視對文化的主動傳播，使旅游景點散發出更多的文化氣息而非過于嚴重的金錢氣息。有部分機構嘗試過深挖文旅機構的協作點，取得了不錯的效果，如2018年5月，在國家“一帶一路”戰略、文化自覺和文化自信的背景下，四川省圖書館成功舉辦了“絲綢之路國際圖書館聯盟成立暨‘閱讀·城市·文化’圖書館、書店融合發展學術研討會”，為沿線國家和地區的旅游發展帶去文化助推力。旅游機構要充分利用Web2.0、云計算和大數據等信息技術產生的海量數字化旅游資源，加強與圖書館等文化機構的深度合作，將旅游相關資源與文化機構的海量數字資源進行對接。在資源關聯工作良好開展的情況下，用戶通過移動終端使用移動視覺搜索功能不僅有助于實現相關數字化文化知識的傳播，有利于展示實體旅游資源的文化魅力，更將進一步推動旅游經濟效益的發揮，促進文化旅游資源的可持續發展。

5 結語

在新時代，充分挖掘和傳播旅游資源的文化內涵是培養文化自覺和增強文化自信的重要途徑，因此利用移動視覺搜索來增強圖書館等文化信息載體的作用，進而促進文旅融合發展，就能夠更加深入地挖掘貼近人民大眾的文化旅游資源，通過現實中旅游資源的“點”縱深到中國文化的“面”，讓大眾有更多的機會理解中華文化。圖書館等文化機構需開拓思維，緊跟文化旅游融合的新形勢，就如何有效發揮自身傳承、傳播文化的功能與價值這一問題進行再思考，重視從知識收藏者和提供者的角色向文化主動傳播者的角色這一過程的轉變，充分利用和發揮在數字資源建設和組織方面的經驗，在基于移動視覺搜索的文化旅游資源建設與開發服務過程中，加強與旅游機構的協調合作，使旅游資源成為傳播中國文化、滋養中國民眾的文化沃土。與此同時，旅游機構應該轉變思路，降低對旅游資源簡單商業開發的依賴，帶著文化自覺和文化自信的使命感，充分發揮旅游情景優勢，將旅游資源的文化知識內涵利用移動視覺搜索這一新的技術手段進行全面的展示，使大眾對中華文化資源產生更深刻、更具體的感知，從而真正達到文旅融合發展的目的。