WEB知识服务探索及应用刘秉权博士，副教授哈尔滨工业大学智能技术与自然语言处理研究室http://www.hit.edu.cn/;http://www.haitianyuan.com/数字图书馆前沿问题高级研讨班20102010年7月21日,哈尔滨知识服务的定义„是对互联网上海量信息进行处理，通常经过信息采集、信息过滤、信息分类、信息摘要、精华萃取等处理过程获取知识，运用交互式方法为网络用户提供服务。互联网的特性„内容结构的复杂性，结构化、半结构化与非结构化信息并存，且非结构化信息占主导„形态的多样性，包括：图像、声音、文本、视频等信息形态，以文本为主要形态„来源的多样性，同一话题的信息片段可能会蕴含在不同作者创建的网页中，或者在邮件、聊天记录、博客、用户提问等各种信息源中„内容的随意性，网络中的很大一部分信息是由普通网络用户创建且未经审核与验证的，内容质量良莠不齐知识服务的迫切性„搜索引擎越来越显现出其明显的不足：用户很难用简单的关键词明确表达出检索目标，系统难以准确理解检索请求，进而导致了检索的返回结果难以控制。„仅仅给用户提供信息检索服务远未充分体现海量网络信息所应具有的真实价值，而“信息爆炸，知识贫乏”的形象描述更是反映了人们面对海量信息却难以获得更好服务时的无奈。„问题的提出-能否在海量网络信息的基础上为用户提供“知识”层面上的服务？互联网中知识服务的定义„Knowledgeservicesisanemergingconceptthatintegrates‹knowledgemanagement‹knowledgeorganization‹knowledgemarkets„KnowledgeServicesareprogramsthatprovide‹content-based(data,information,knowledge)organizationaloutputs(e.g.,advice,answers,facilitation)‹tomeetexternaluserwantsorneeds.„Knowledgeservicesaredeliveredthroughknowledgemarkets.„互联网知识服务‹在互联网时代，知识服务可以通过互联网来完成。网络知识服务的特点„网络知识服务与建立在传统知识源之上的知识推理相比具有更大的挑战性„最大的挑战、也是最具价值的工作是如何从海量网络信息中自动获取知识，并将它们用来为开放的用户群体提供较为准确的、个性化的服务知识服务在下一代互联网中的意义知识服务的社会意义„从信息社会迈向知识社会‹知识社会的核心是“为了创造和应用人类发展所必需的知识而确定、生产、处理、转化、传播和使用信息的能力。”‹联合国教科文组织认为，只有建设知识社会才能“铺就通向世界化进程人道化的道路”。现有的互联网知识服务„百度知道(免费)„新浪爱问(免费)„YahooAnswers(免费)„Uclue:fiftyformerGoogleAnswersResearcherslaunchedpaidresearch/Q&Asite(付费)„MahaloAnswers(免费and付费)互联网知识服务的具体形式„人对人提供服务：‹问答式（1对1）‹讲座式（1对多，如博客）‹群言式（多对多，如论坛）‹新闻„机器自动服务‹信息检索‹自动问答‹…„工具类服务‹在线电子词典‹在线工具书‹…什么是知识？„当数据被赋予意义后，就成为信息，而信息再经过加工整理，就转化为知识„通过对海量网络信息的加工整理，提供经过验证的、更加精确可信的知识，而不仅仅是原始网络信息网络信息融合„所谓网络信息融合，是指把驻留在不同Web数据源上的分散的、不一致的、不确定的、冗余或互补信息依据某种准则进行组合，为用户提供一个针对不同数据源的统一视图，以获得事物的一致性解释或描述„建立在网络信息加工与标引基础上的网络信息融合是网络知识服务的基础„网络信息融合的关键点：‹网络信息检索‹数据集成‹基于本体的知识服务‹语义词典建设信息检索技术的发展„1950年，美国学者CalvinN.Mooers首创了“信息检索”这一术语；„1958年，美国学者Luhn提出了统计信息检索的基本理论和方法；„1960年，Marson和Kuhns提出了信息检索的概率模型；„1965年，美国康奈尔大学的GerardSalton教授