跨媒体信息技术与应用

第1章 绪论11．0 引言11．1 多媒体信息技术11．2 跨媒体信息概念与定义31．3 跨媒体信息表示51．4 跨媒体信息处理61．5 跨媒体信息技术应用81．6 本章小结8参考文献9第2章 多媒体信息技术基础102．0 引言102．1 多媒体技术概述102．1．1 多媒体定义与特征102．1．2 多媒体系统基本结构132．2 音频信息处理技术152．2．1 音频信号数字化162．2．2 音频压缩192．2．3 音频合成272．3 图像信息处理技术292．3．1 图像信号数字化292．3．2 图像压缩编码312．4 视频信息处理技术352．4．1 视频信号数字化352．4．2 视频压缩编码362．5 本章小结41参考文献41第3章 多媒体信息技术应用423．0 引言423．1 应用概述423．1．1 媒体类型433．1．2 关键技术443．1．3 应用系统453．2 多语种文语转换系统463．2．1 概述463．2．2 汉语音节结构473．2．3 语音规则系统483．2．4 声学参数483．2．5 语调规则483．2．6 声学模型483．3 语音身份识别系统503．3．1 概述503．3．2 基本框架523．3．3 特征参数533．3．4 主要方法553．3．5 系统评价563．4 视频点播系统573．4．1 概述573．4．2 系统结构583．4．3 视频点播应用与云平台的交互603．4．4 应用展望623．5 地理信息系统633．5．1 概述633．5．2 系统结构643．5．3 应用展望663．6 数字水印系统673．6．1 概述673．6．2 系统结构673．6．3 基本要求703．6．4 算法分类713．6．5 关键技术713．6．6 应用展望743．7 本章小结74参考文献75第4章 互联网信息检索技术基础764．0 引言764．1 信息检索技术基础764．1．1 定义与分类764．1．2 基本过程784．1．3 信息检索评估794．2 信息检索建模814．2．1 基本概念814．2．2 模型抽象824．2．3 模型分类834．3 信息检索经典模型854．3．1 布尔模型854．3．2 向量模型874．3．3 概率模型894．3．4 经典模型比较904．4 信息检索要素914．4．1 基本概念914．4．2 文档标记924．4．3 文档组织944．4．4 查询954．5 互联网信息检索1034．5．1 互联网特点与结构1044．5．2 搜索引擎架构1074．5．3 搜索引擎排序1094．6 本章小结111参考文献112第5章 互联网信息检索技术应用1135．0 引言1135．1 互联网信息检索系统1145．1．1 主要特点1145．1．2 发展趋势1145．2 互联网信息系统应用1155．2．1 搜索引擎1155．2．2 搜索引擎与传统信息检索的比较1165．3 基于云计算的多媒体检索技术平台1175．3．1 原理与功能简介1175．3．2 基于云计算的多媒体信息服务1225．4 基于物联网的多媒体信息检索系统1285．4．1 原理与功能简介1285．4．2 基于物联网的多媒体信息检索系统平台1305．5 智慧城市与智慧地球1385．5．1 智慧城市1385．5．2 智慧地球1415．6 本章小结146参考文献146第6章 跨媒体信息表示1476．0 引言1476．1 跨媒体信息特征1476．2 跨媒体信息度量1486．2．1 跨媒体信息表示1486．2．2 跨媒体信息检索排序1606．2．3 跨媒体信息降维处理1656．3 跨媒体信息相关性度量1706．3．1 针对聚类特征的度量1706．3．2 针对MMDSS的度量1726．4 其他跨媒体信息表示方法1736．5 本章小结174参考文献175第7章 跨媒体信息处理1787．0 引言1787．1 音频信息处理1797．1．1 音频的处理与分析1797．1．2 语音的索引与检索1857．2 视觉信息处理1897．2．1 图像信息的检索1897．2．2 视频信息的检索1977．2．3 视觉信息的高层语义特征提取1987．3 跨媒体信息理解2017．3．1 跨媒体语义2017．3．2 跨媒体信息理解2047．4 跨媒体信息检索2067．4．1 跨媒体信息的索引与检索2067．4．2 跨媒体信息的检索框架2077．5 本章小结215参考文献216第8章 跨媒体信息技术应用2198．0 引言2198．1 跨媒体信息系统简介2198．2 中国少数民族语言跨媒体共享系统2208．2．1 简介2208．2．2 中国少数民族语言跨媒体共享平台2228．3 方正跨媒体阅读系统2268．3．1 简介2268．3．2 方正跨媒体阅读平台2278．4 基于数字图书馆的跨媒体信息检索系统2298．4．1 简介2298．4．2 基于数字图书馆的跨媒体信息检索平台2348．5 跨媒体互动教育游戏系统2358．5．1 简介2358．5．2 跨媒体互动教育游戏平台2368．6 本章小结242参考文献242

跨媒体是近年来伴随互联网和多媒体技术的迅猛发展而逐渐兴起的一种新兴信息媒体的形式，引起了业界的广泛关注。本书汇集了清华大学和中国科学院的一线科研人员在跨媒体信息技术研究领域的最新研究动态，详细讲述了跨媒体信息技术的基本概念和理论，及其发展状况，并给出了具体的实例。本书首先对多媒体与跨媒体信息技术及互联网信息检索技术涉及的基本概念、基本理论、基本技术等进行了介绍，描述了跨媒体信息技术相对多媒体信息技术而言的突破及其发展状况；然后从文本、语音、图像、视频等媒体基本表现形式入手，介绍了主要的多媒体与跨媒体信息处理技术，以及国内外最新研究成果，勾勒出跨媒体信息处理的基本框架；接着对当前发展迅速的互联网信息检索与处理技术、模型、特点、应用等进行描述；最后以中国少数民族语言跨媒体共享平台、基于数字图书馆的跨媒体信息检索平台、跨媒体互动教育游戏平台系统等为例，对跨媒体信息检索方法、处理技术及其实际应用等进行了论述。【作者简介】杨毅，女，博士，IEEE会员、清华大学博士后理事，现在清华大学电子工程系网络与人机语音通讯研究所工作。主要从事信号处理、语音识别、跨媒体新技术与新应用、数据检索等方面的研究工作。