摘要：
借鉴并设计高校图书馆评价体系框架，运用改进的层次分析法、专家调查法和分析综合法等方法，对南京农业大学、南京理工大学和南京航空航天大学的图书馆网站进行测评，比较三所高校图书馆网站的整体优劣水平，分析其特色及不足，最终为高校图书馆网站建设提供可借鉴的建议。
关键词：高校图书馆;图书馆网站;综合评价;层次分析法
中图分类号：G251 文献标志码：A 文章编号：
本文采用定性与定量相结合的方法评价高校图书馆网站性能，设计高校图书馆评价体系框架，运用层次分析法对南京农业大学、南京理工大学和南京航空航天大学的图书馆网站进行测评。
一、高校图书馆网站建设的评价指标体系
现存的图书馆网站评价指标体系种类繁多，不够统一、完善，笔者认为比较权威的评价指标体系当属南开大学中国图书馆网站评价研究组所详细描述的体系[3]。
（一）评价指标的设计
初步评价指标的确立借鉴南开大学研究组提出的体系，构建了网站的设计、内容、信息构建、服务四个方面为一级指标的评价体系。
二级、三级评价指标的确立是通过分析三所高校图书馆网站建设现状，再结合上述研究组的体系，对其进行增删改，形成本文特定的评价指标体系。
（二）评价指标的细化
在高校图书馆网站评价指标体系中，只有第三级指标是可以直接测量的定量指标，第三级指标是否能够充分体现上级指标的内涵，将对评价体系能否完全反映网站质量产生关键影响。
二、改进的层次分析法
的模糊性，用准确的数（1，1/5）来描述相对重要性显得很困难。为此，本文对AHP法稍作改进，邀请同行专家5人，分别给出每一因素的乐观值、一般值、悲观值（分别用a，m，b表示），并根据公式：e=a+4m+b/6计算出其权重，对所有专家的权重值进行加权平均，得到最后该因素的权重。这样，既提高了排序结果的精确度，又将模糊矩阵转化成了精确矩阵，然后，再按照层次分析法的具体步骤进行[5]。
三、改进的层次分析法的应用
（一）建立递阶层次结构
表1 高校图书馆评估指标体系
准则层B二级指标层C三级指标层D准则层B二级指标层C三级指标层D
设计B1页面设计C1布局风格D1
信息构建B3
馆藏书目检索C13索引方式D47
本馆标识D2
检索方式D48
网站可操作性C2页面色彩D3
检索结果D49
链接D4
检索建议D50
英文网页建设C3公告栏位置D5
古籍书目检索D51
网页布局D6
网站技术C4语言D7
站内信息检索方式D53
弹出式窗口D8站外检索D54
网站利用情况C5返回主页D9服务B4基本信息服务C15读者个人信息查询D55
站内页面打开方式D10文献传递D56
英文版本D11馆际互借D57
英文网页质量D12网上预约D58
网络安全性D13网上续借D59
访问权限D14到期催还服务D60
访问量D15传统修改服务C16定期服务D61
使命陈述D17读者荐书栏目D63
开放时间D18在线调查D64
馆藏介绍D19交互式服务D65
图书馆馆刊D22标签D68
联系信息D23“我的图书馆”栏目D69
资源丰富性C7数据库质量D24信息推送服务D70
教学参考数据库D25咨询服务C18咨询方式多样性D71
学位论文数据库D26电子邮件咨询D72
视听资源D27实时咨询D73
资源链接D28科技查新D74
续表准则层B二级指标层C三级指标层D准则层B二级指标层C三级指标层D
学科的广度D29教学参考书系统D75
信息严肃性C8语法准确D30下载服务C19常用软件下载D76
文明健康D31讲座内容下载D77
用户隐私D32网上课程下载D78
知识产权D33随书光盘下载D79
信息时效性C9最新信息报道力D34学科馆员C20学科馆员联系方式D80
更新、维护情况D35学科馆员工作介绍D81
内容层次结构D37学科馆员数量D83
广度D39校外用户栏目D85
深度D40远程使用OPACD86
更新度D41数据库资源获取程度D87
局部导航D43用户分类指南D89
当前位置的导航D44投稿指南D90
网站地图D45学术指导网页D91
导航条D46
（二）构造两两比较判断矩阵
表2 各因素的相对重要性
………… …
表3 判断矩阵标度及其含义
标度含义
1两指标相比，具有同等重要程度
3两指标相比，一个指标比另一个指标稍微重要
5两指标相比，一个指标比另一个指标明显重要
7两指标相比，一个指标比另一个指标非常重要
9两指标相比，一个指标比另一个指标极端重要
2，4，6，8取上述两相邻判断中的中值
（三）各级指标权重的确定
整个指标体系分为三级，各指标在评价中的重要程度不同。三级指标权重的确立，采取头脑风暴法、专家调查法以及层次分析法相结合的方式，运行笔者编制的程序可以简单、准确地计算出判断矩阵的权重。
1.第一、第二级指标的权重
第一、第二级指标的权重主要是通过头脑风暴法确定。第一、第二级指标均为定性指标，只能凭主观判断确立孰轻孰重。笔者走访了数位专家，根据他们对图书馆网站的了解和多年来对其应用的熟练程度，根据SAATY1-9标度法建立判断矩阵，计算出各个矩阵的最大特征根和相应的权重（表4-表7）。
表4 A-B层判断矩阵
B111/31/51/70.056 9
B475310.557 9
λmax=4.1185 CI=0.0395 RI=0.9
CR=0.043 90.10
表5 B1-C5层判断矩阵
C111/5531/30.134 4
C31/51/911/31/70.034 8
C41/31/7311/50.067 8
CR=0.054 20.10
表6 B2-C9层判断矩阵
B2C6C7C8C9W
C731750.557 9
C81/51/711/30.056 9
λmax=4.1185 CI=0.0395 RI=0.9
CR=0.043 90.10
表7 B3-C14层判断矩阵
C1011/51/71/91/30.034 8
C11511/31/530.134 4
C1431/31/51/710.067 8
2.第三级指标的权重
三级指标权重的确定主要是通过专家调查法。邀请了南京航空航天大学图书馆员、南京理工大学图书馆馆员、南京农业大学图书馆馆员以及南京农业大学图书馆学教授、南京理工大学工程师共5位专家，对各三级指标进行了两两比较判断。图书馆馆员和图书馆学教授既是图书馆数字资源的利用者，又对相关的概念理论较为熟悉，其判断结果相对比较合理。分别给出每一因素的乐观值、一般值、悲观值，对所有专家的权重值进行加权平均，然后对平均后的值根据SAATY1-9标度法统一化处理，最后建立判断矩阵，采用和积法计算各个矩阵的最大特征根和相应权重（部分见表8-表11）。
表8 C5-D15层判断矩阵
CR=0.027 60.10
表9 C12-D46层判断矩阵
D431/51531/30.134 4
D441/91/511/31/70.034 8
D451/71/3311/50.067 8
CR=0.054 20.10
（四）层次单排序、层次总排序和一致性检验
通过计算一致性指标CI和平均随机一致性比例CR，以确认权重计算结果具有良好的一致性。从表4-表11的CR值可以看出，各判断矩阵均通过一致性检验。
利用同一层次中所有层次单排序的结果，可以计算针对上一层次而言本层次所有因素重要性的权值。层次总排序需要从上到下逐层进行，一致性检验通过公式CR≤0.10，因此，总排序的结果具有满意的一致性[9]。
表10 C11-D41层判断矩阵
C11D38D39D40D41W
D3813570.557 9
D411/71/51/310.056 9
λmax=4.1185 CI=0.0395 RI=0.9
CR=0.043 90.10
表11 C15-D60层判断矩阵
C15D55D56D57D58D59D60W
CR=0.036 90.10
（五）综合评价各网站
表12 一、二级指标得分最终结果
南航排名南理工排名南农排名
一级指标
二级指标
网站利用情况C50.049 0 20.049 4 10.043 7 3
四、各网站部分排名结果分析
总体看，各网站的总分均处于中高水平，三所高校图书馆网站最终得分均大于4，最高的南京航空航天大学（以下简称南航）排名第一，在基本指标体系满分5分的测评中，4.378 8的分数几乎达到优秀，南京农业大学（以下简称南农）的得分其次，总体可以评为较优秀。而南京理工大学（以下简称南理工）图书馆网站得分与前两者差距较大，有必要努力找出不足之处，尽快加强薄弱方面的建设。
（一）一级指标评价结果分析
1.设计
网站设计主要考察各样本网站的页面设计、英文网页建设、网站可操作性、网站技术、网站利用情况等。值得一提的是，南理工的得分虽然最少，但在设计这一指标上较为突出，有其特色和优势，排在第一位，与其次的南航图书馆的网站设计在分数上领先于南农图书馆的网站设计不少，说明南农尽管在总体得分较南理工高，但在网页设计上显得薄弱，应在网站设计方面多加努力。
2.内容
这一指标主要考察网站建设中的基本信息是否完备，信息资源的丰富性、严肃性和及时性。第一名为南农，且较大幅度高于南航，尤其高于南理工。与设计指标相联系，说明图书馆网站建设中，不能只注意网站设计的精致美观有特色，更应关注网站内容是否完备和充分。三所高校中，只有南理工图书馆网站在内容这一指标上未达到0.5分，表明其网站内容建设需重点完善。
3.信息构建
信息构建指标主要考察网站设计者是否以“用户中心”理念为建设基础，在组织、导航、检索等方面是否充分考虑用户的方式、习惯，增加网站的可操作性。在这方面，较为突出的是南航的图书馆网站，南农、南理工与其差距较远，在此方面亟待改进。
4.服务
服务指标主要考察图书馆网站在提供读者基本信息服务以及传统个性化服务基础上，对web2.0技术的应用情况，以及咨询服务和学科馆员服务的开展情况，包括下载服务、远程服务、用户帮助与指南等，是最能体现图书馆网站信息服务能力的指标，也是最关系网站利用率的指标。第一名仍为南航，其次是南农，再次是南理工。从得分上可以看出，三所高校差别较大，说明三所高校在图书馆网站服务理念上可能存在不同，侧重点也不同。
（二）部分二级指标评价结果分析
在22个二级指标中，本文选取了三所高校最终得分两两相差绝对值的平均值较大的几个指标。
1.学科导航
学科导航在解决目前网络环境下资源的极大丰富与网络学术资源难以检索的矛盾中发挥着重要作用[11]。南航和南农图书馆的学科导航在栏目广度、深度以及更新方面做得比较完善;南理工图书馆在这一方面十分欠缺，尚未提供此项服务。
2.传统个性化服务
图书馆个性化信息服务迎合了人们对信息要求的不断提高，而且随着个性化服务的不断发展与完善，逐渐得到了人们的认可[12]。三所高校都很重视传统个性化服务的建设，在定期服务、订阅服务、读者荐书和交互式服务上都比较优秀，但南农却是在线调查，其传统个性化服务不完整，可以多做改善。
3.咨询服务
咨询服务是图书馆网站的重要服务之一。在具体实测过程中，笔者对同一问题分别用不同方式（实时在线咨询、留言板、电子邮件）咨询了三所高校，实时在线咨询仅提供内网服务，只能凭是否有实时咨询系统及查看留言是否有更新来判断。由此发现，南理工的图书馆网站有实时咨询系统，并且在本文截止前一天还有新的回复，说明咨询服务比较令人满意。三所高校的留言板虽然几乎每天都有新的回复，可答案却不能完全解决读者问题。笔者向三个网站发送了电子邮件，只有南农的回复像是系统回信，也不能完全解决问题。综上所述，咨询服务还需各网站积极改进。
4.下载服务
高校图书馆作为高等学校文献信息的中心，收藏大量的学科信息，那么以用户为中心的图书馆网站是否有能力为用户提供满足其使用的下载服务，包括常用软件下载、讲座内容下载、网上课程下载、随书光盘下载等，也是网站建设的重要评判依据。这一指标上，南农以其涵盖常用软件、网上课程和随书光盘的下载而得分居榜首，仅仅在讲座内容的下载上有不足;在南农图书馆公告上，并不缺乏讲座的通告，如果能给一些不能听讲座的用户提供下载服务，将会是更大的便利;南理工在网上课程和随书光盘下载服务上都比较缺乏。 5.首页设计
首页是用户进入网站的第一个窗口，有宣传、报道、引导的作用。所以，首页的设计是否美观、是否能让用户一目了然地了解图书馆的概况，是否能及时向用户传递最新的消息等，都直接影响用户对图书馆的使用。本文的指标体系中，“首页设计”包括页面设计、网站可操作性、英文网页建设情况、网站技术等二级指标，以及布局风格、本馆标识、页面色彩、链接、公告栏位置、网页布局、语言、弹出式窗口等三级指标。通过综合评价可以发现，南航图书馆网站首页无论是颜色的搭配，还是页面的布局，都是从用户的角度出发来设计，其综合性能达到较高水平;南理工图书馆网站的可操作性很好，其页面色彩、链接等都有特色，但却缺少本馆标识。标识是图书馆对外宣传的一个重要标志，图书馆应通过个性化的标识向用户传达自己的宗旨和使命。需要指出
的是，三个网站都缺乏英文网页的设计，英文网页不仅能扩大本网站被其他网站的链接，还能扩大用户的使用面，使网站更丰富。
6.Web2.0技术应用
在Web2.0技术背景下，图书馆也开展Lib2.0服务理论研究与实践应用，所以有必要设置此项指标来考察三所高校图书馆是否与时俱进地应用先进信息技术、针对用户个性化需求来为用户提供服务。目前常用的Web2.0技术有博客、RSS、标签等，本指标也从这三方面来考察。此外图书馆应用Web2.0技术开展的Lib2.0服务中，突出的是“我的图书馆”，此项服务也在考察范围中。统计过程中发现，目前三个网站均没有应用博客为读者服务，RSS和标签也只有南航有所应用。
五、结论与建议
（一）三所高校图书馆网站的主要优点
1.发展水平较为均衡
三所高校分别以航空航天、农业、理工科专业著称，正朝着全面发展的综合性大学迈进。从最终的评价结果看，三所高校图书馆网站建设基本类似。可见，图书馆网站整体建设很大程度上取决于所属学校的发展。
2.发挥了网站的展示应用性
三所高校图书馆的网站都重视了网站的宣传、展示、应用功能。每个网站风格各异，各有特色，符合所属学校的办学特点。设计和标识也都在一定程度上显示了其相应功能，表明高校图书馆网站建设者重视网站的宣传性和展示性。
3.网站资源丰富
高校图书馆网站是一个师生使用信息资源、收集数字资源的平台。从本次评估看，三所高校图书馆网站上的数字资源丰富，数量上的丰富体现在数据库的个数，形式上的丰富体现在数字资源的格式，有音频格式，也有视频格式。另外还有自建数据库，如学位论文数据库、本校学报数据库等。这说明，高校一方面通过购买来丰富数字资源，另一方面通过自身的开发来丰富本馆的数字资源，为师生提供服务。
4.服务以用户为中心
评估中，三所高校图书馆网站的功能设计、信息构建都体现了以用户为中心的理念，局部导航、全局导航、网站地图、站内检索，一应俱全。信息的组织都按一定的顺序排列，内容的层次结构都能够依照用户的思维方式、使用习惯来设计。能够从用户的角度出发设计网站，是图书馆网站建设过程中必需和必要的指导思想。
5.网站建设多样化网络化
目前三所高校图书馆网站都能实现书目查询、图书续借、论文下载、参考咨询等基本服务，有的可以通过电子邮件方式提醒用户哪些图书即将到期，有的采用RSS技术为用户提供定制信息的服务，有的则提供毕业论文网上提交系统等。这说明三所高校的图书馆网站建设在一定程度上达到现代化水平，也显示了图书馆服务理念的转变。
（二）三所高校图书馆网站的主要问题
1.缺乏英文网站的建设
在本次评估过程中发现，三所高校的一些附属网页，如学院网站，都有英文网页。而在图书馆这一版块上，却都缺乏。在国际交流频繁的现代社会，英文是世界通用语言，图书馆要能做更好更多的宣传，英文网站不可或缺。
2.缺少与读者的互动板块
图书馆网站与读者的互动是Web2.0时代的一个重要部分，也是图书馆网站建设走向现代化网络化的标志。在本次评估中，三所高校的图书馆网站都不乏传统个性化服务，但多是单向的，在了解读者需求上比较欠缺，及时回复、满足读者的需求更是少之又少。
（三）高校图书馆网站发展建议
1.各馆加强网站建设方面的交流与学习
经过评估，各馆网站的优劣已很明显。所以，在日常的网站建设、维护、更新过程中，各馆工作人员应当多留意其他馆的网站建设，取其精华，更好地发挥自己的优点，做好自己的网站。
2.开发英文网站
英文网站既有利于留学生的使用，又有利于加强国际图书馆之间的交流，是一所综合性大学应该具备的条件。
3.拓宽用户与图书馆互动的空间
很多学校提供的用户与图书馆的互动形式是在馆内放置意见薄或张贴板。但对用户而言，似乎更倾向于网络的匿名性和自主性，所以图书馆网站可以提供这一平台。具体形式，除了留言板、实时咨询外，还可以有博客、论坛、“我的图书馆”等栏目。
4.关注用户需求，使网站建设更人性化
网站的设计是为用户服务的，只提供丰富的数字资源和服务网络化是不够的，其网站设计必须选用适合表现本站信息内容的信息组织和表达方式，同时要提供简单、便捷、高效的检索工具，帮助和引导用户深入访问网站，快速找到自己需要的信息。
5.继续保持高校图书馆网站之间的对话与共享
高校图书馆联合体的建成体现了高校图书馆之间的对话与共享，使区域数字图书馆、馆际互借及文献传递等活动成为了现实，极大丰富了读者的需求。三所高校应继续保持这种良好的馆际关系，并在今后扩大联合体的范围。
参考文献：
[2]张健.图书馆网站评价的内容和方法[J].成都大学学报，2004（4）：63-64.
[4] NGAI E W T.Selection of web sides for online advertising using the AHP[J].Information and Management，2003，40：233-242.
[5]赵伟，张秀华，张晓青.改进的AHP法在图书馆网络数据库选择中的应用[J].现代图书情报技术，2006（4）：49-52.
[7]陆萍.在高校图书馆评估中运用层次分析法确定指标的权重[J].现代情报，2005（5）：36-38.
[8] CHANG C W，WU C R，LIN C T，et al.Evaluating digital video recorder systems using analytic hierarchy and analytic network processes[J].Information Sciences，2007，177：3383-3396.
[9]赵伟.基于改进的层次分析法的网络信息资源评价体系[J].鲁东大学学报：自然科学版，2006，22（4）：293-296.
