更全的杂志信息网

数字图书馆交互评估:从理论构建到工具开发

更新时间:2016-07-05

数字图书馆评估可分为整体性评估和局部性评估。整体性评估着眼于数字图书馆的整体绩效,从数字图书馆的不同方面评估数字图书馆。如张颖(Zhang Ying)从不同的利益相关者切入,包括用户、研究者、管理者、开发者及图书馆员,探究他们对数字图书馆的内容、技术、界面、服务、用户和环境的评估标准,提出并构建了 “整体性数字图书馆评估模型”[1]。而局部性评估则着眼于数字图书馆的不同侧面,如评估数字图书馆的服务、资源、功能设计等。针对数字图书馆的交互评估是局部性评估的重要方面。“交互”是描述用户与基于计算技术的各类系统之间互动的重要概念。有效的交互应能支持用户完成与系统的一系列互动,满足用户的信息需求及对资源的具体要求,从而支持其完成搜索和工作任务。因而,支持用户与数字图书馆交互的相关设计是数字图书馆的核心技术之一。因而,本研究探讨“数字图书馆交互评估”,着重考察数字图书馆的交互功能设计对用户交互过程的支持程度。然而,虽然此前的一系列研究提出了数字图书馆交互评估的理论模型并不断细化[2][3],数字图书馆环境下的交互评估如何具体实践,即可操作的评估工具的构建仍然是有待解决的问题。为此,本研究试图开发一套可用于评估数字图书馆交互功能的工具,以完善数字图书馆的交互评估,实现从理论构建到实践应用的跨越。

1 研究背景与文献回顾

1.1 前期研究:交互绩效与交互评估

本研究建立在一系列的探讨数字图书馆环境下用户与系统交互绩效与交互功能评估的理论与实证研究的基础之上。前期研究之一探讨数字图书馆环境下影响交互绩效的因素[4],构建了用户与数字图书馆的三维交互模型,并设计实验,探讨影响用户与数字图书馆交互绩效的因素。三维交互模型中的“三维”包括信息维、技术维和任务维。该研究进一步细化了各个维度及测量指标。同时,将用户的交互绩效界定为用户对交互成功的主观感知,如交互的成功、所获结果的有用性等。研究结果显示,用户在三个维度的交互均一定程度上显著影响用户的交互绩效。

研究之二针对信息检索研究中的任务设计[5],探讨研究中使用的模拟仿真工作任务情境方法的适当性及如何使其发挥更好的效用。研究发现模拟仿真工作任务情境与真实工作任务情境在任务属性上存在某些显著差异。然而,在用户反馈、交互信息搜索行为和交互绩效上均不存在显著差异。也就是说,仿真和真实工作任务的差异并不会显著影响用户与数字图书馆之间的交互,前者可以有效替代后者用于信息检索系统评估及用户信息搜寻行为的研究。同时,本研究提出合理设计模拟仿真工作任务的必要性。同时指出,针对模拟仿真工作任务的设计,除皮娅·博隆德(Pia Borlund)提出的指导性建议[6]外,还必须清楚了解目标用户群的真实工作任务,控制任务的关键属性,如任务复杂度等。

研究之三构建了数字图书馆交互评估理论模型[2][3]。该研究采用实验研究方法,招募了48名实验参加者,包括本科生、硕士研究生和博士研究生各16名,分别代表不同层次的学生群体,揭示了影响用户对数字图书馆交互功能评估的关联性指标和预测性指标,并据此构建了基于用户多维交互的数字图书馆交互功能评估的理论模型[2][3]。基于这一模型,研究之四从用户视角探讨用户与数字图书馆交互的关键成功因素[7]。研究采用实验研究方法,并在实验过程中嵌入深度访谈,以实时性地探知用户与系统交互过程中支持其交互成功或导致其交互失败的关键因素。最终确定了21个关键成功因素[7]

基于前期研究不断完善和细化的理论模型,本研究开发数字图书馆的交互评估工具,完成从理论构建到实践工具的开发,以期更好地服务于数字图书馆的交互评估实践及交互功能开发与设计。

1.2 相关研究综述

1.2.1 数字图书馆评估与交互研究

工程实施后,治理水土流失面积6km2,水土流失得到控制,土地利用得到调整、优化,土地利用率和森林覆盖率大大提高。沟、桥、机井的建设,做到了旱能浇、涝能排,旱涝保丰,实现水土保持产业化可持续发展,为北城项区域人民增收致富奠定了坚实的基础。

加里·马尔基西奥尼尼(Gary Marchionini)认为数字图书馆的评估应以用户为中心,并提出了纵向多面评估理论,包括对系统、社区、基础设施和机械优势进行评估[8]。泰夫科·萨拉塞维克(Tefko Saracevic)将数字图书馆评估分为以系统为中心和以用户为中心两个层面,以系统为中心涵盖了工程、处理和内容层面;以用户为中心涵盖了个人、社会和机构层面[9]。解虹(Hong I.Xie)则着重从用户视角来探讨数字图书馆评价指标,其构建的评估指标多集中于用户学习、检索信息的效率和实用性上[10]。詹尼·察克纳斯(Giannis Tsakonas)基于对数字图书馆评估本体论(Digital Library Evaluation Ontology,DiLEO)的研究,认为当前的数字图书馆评估多以系统为中心,涵盖了绩效、效果和技术三个维度[11]。马西塔·阿曼达(Masitah Ahmada)和杰马尔·阿贝瓦吉(Jemal H.Abawajy)从服务角度出发构建数字图书馆评估模型[12]

国内学者的研究多集中于数字图书馆评估原则的构建及指标的设置。这些原则包括:评估体系的导向性[13][14]、科学性[11]、客观性[13]、实用性[13]原则;评估对象的确定性原则[11][15];评估标准的灵活性和通用性原则[1][11][13];评估手段的技术性原则[1][11][13]。评估指标的设置大多从宏观角度出发,包括数字图书馆的馆藏资源[16]、用户及使用[15]、网站建设[1][13][15]、价值与成本计算[13]、服务[1][13][17]等,这些宏观维度的确定为评估研究奠定了一定的基础。在研究方法上,多利用层次分析法[18][19][20][21]、德尔菲法[13]和模糊综合评价法[22]等。这些研究方法一般用于数字图书馆的整体性评估,通过计算分值来确定指标权重或者比较不同数字图书馆的质量水平。

此外,国内学者日益重视从用户角度进行数字图书馆评估[23]。夏立新等从用户满意度视角出发,建立了基于数字图书馆设施、流程与内容质量的评估模型[18]。徐芳、戴炜轶和赵杨从用户体验角度出发对数字图书馆质量评估进行探讨。前者通过设计评估指标,对国内数字图书馆进行比较,但缺少评估体系的理论化构建[24];后者构建了用户体验控制框架,但模型构建未经过实证研究的检验[25]。另有一些学者基于用户视角从界面[27]、信息构建[28]等角度探讨评估问题。

在数字图书馆服务评估中,用户交互是非常重要的[29]。除以上研究探讨了数字图书馆环境下的用户与系统的交互绩效及交互评估研究之外,诺伯特·福尔(Norbert Fuhr)等构建了包括用户、内容和系统之间交互关系的三维模型,揭示了:① 用户—内容关系与有用性因素相关;②用户—系统关系与可用性因素相关,包括满意度、效果等;③ 内容—系统关系与绩效因素相关,包括响应时间、查全率、查准率等[30]。一些学者从用户交互角度出发[31][32],构建了基于交互需求、交互过程、交互环境的评估模型。

1.2.2 数字图书馆评估工具

一方面,对外汉语教师要加强自己的语用意识,扩充自己的语用知识。语用学理论中的会话含义理论、言语行为理论、礼貌原则及策略、语境理论对语言教学有很大的帮助,应成为学习的重点。

马科斯·贡萨尔维斯(Marcos A.Goncalves)等从5S(Streams,Structures,Spaces,Scenarios and Societies)模型中抽取了数字图书馆的高阶(High-level)概念,总结出与之相对应的质量维度,对于每一个质量维度,都由基于5S和已知数字图书馆概念的集合和函数来表示,形成了一套可供量化的评估工具[33]。芭芭拉·莫雷拉(Bárbara L.Moreira)等以贡萨尔维斯设计的评估工具为基础,设计旨在帮助数字图书馆管理者在数字图书馆建设和维护阶段可重复使用的简捷的质量评估工具—5SQual[34]。欧盟得洛斯(Delos)工作小组根据其提出的数字图书馆概念模型,建立了整体评估工具。此外,研究图书馆学会(Associate of Research Libraries)建立了电子资源计量(E-Metrics)指标评估工具,旨在测度数字图书馆对于电子信息资源和服务的投资是否取得了收益、是否创造了更高的用户使用率[35]

数字图书馆服务评估工具的开发受到众多学者的关注。皮特·赫农(Peter Hernon)等学者最早将电子服务质量评估量表引入到图书馆领域,他们借鉴SERVQUAL和E-S-QUAL等评估量表的概念理论和研究方法,对数字图书馆服务的质量以及影响因素进行深入分析,建立了图书馆服务质量评价模型(Library E-servqual)[36]。基兰·考尔(Kiran Kaur)等学者在此研究的基础上,构建了一个三层体系的数字图书馆服务质量评估量表,从环境质量、传递质量和结果质量三个方面进行了评估[37]。国内学者,如施国洪等在SERVQUAL量表的基础上,建立了图书馆服务质量测评量表[38]。但是其测量针对传统图书馆。郭瑞芳[39]、文思敏[40]分别参考Lib QUAL+TM量表构建了移动图书馆服务质量评估体系。

126例患者均顺利完成手术,术后7例(5.56%)发生并发症,包括切口感染2例、便秘4例和腹腔脓肿1例,均经对症处理得以控制。

可见,数字图书馆领域更多关注数字图书馆的整体或服务质量的评估工具或量表的开发,针对数字图书馆交互功能的评估工具相对较少;另一方面,对于数字图书馆的交互评估而言,目前多为模型框架或者规范指南,缺乏可操作的量表,难以在实践中推广应用。因此,本研究试图弥补这一缺憾,基于前期的一系列理论研究,开发数字图书馆交互评估工具,以支持数字图书馆交互的评估实践。

2 研究方法

本研究采用问卷调查,以数字图书馆交互功能评估模型为理论基础、交互的关键成功因素为框架,设计数字图书馆交互评估问卷,并通过分析指标重要性,开展因子分析及信度、效度分析。

2.1 问卷设计

问卷设计基于前期研究得出的数字图书馆交互三维模型、交互评估理论模型及关键成功因素模型,分为人口统计变量部分和主体部分。主体部分包括53个题项,考察从用户视角测量不同指标对用户评估数字图书馆交互功能支持程度的重要性。其中题项1—52采用李克特七点量表,“1”表示非常不重要,“7”表示非常重要。同时,用“NA”表示该指标对用户来说不适合评价数字图书馆的交互功能,“NA”列在“7”之后。

预调查共发放问卷28份,同时要求被试者对问卷进行评价,提出建议。预调查中受访男性占比为46.4%,女性占比为53.6%,男女比例大体均衡。从学历来看,涵盖了不同层级的学生,基本反映了不同学历层次受访者的情况。根据数据分析结果及受访者的反馈,对问卷中的语言表述进行修改,最终形成本研究的正式问卷(本文略)。

2.2 问卷发放

表6显示,将指标Q13、19、52剔除后,得到的结果比较满意,所有因子的载荷都在0.5以上,并且聚合成两个因子,命名为M8和M9。

本研究共发放问卷400份,经过筛选,剔除无效问卷,获得372份有效问卷,问卷有效率为93%。本研究收集的数据采用SPSS22.0进行处理。

2.3 样本的人口统计学变量特征

样本的人口统计学基本特征如表1所示:

表1 样本特征

统计指标 选项 样本数量(百分比) 所占百分比描述性男性别174 46.8%女198 53.2%<18岁 3 0.8%年龄18-24岁 266 71.5%25≤-29岁 81 21.8%≥30岁 22 5.9%本科生 153 41.1%学历硕士研究生 127 34.1%博士研究生 92 24.7%

① 因为部分受访者为双修,所以选择了两个学科,统计的时候样本量多于有效问卷数。

统计指标 选项 样本数量(百分比) 所占百分比描述性人文艺术学科 35 9.3%学科①社会科学 158 42%理工医学科 183 48.7%

从基本信息来看,受调查者的性别比例均衡,年龄集中在18—25岁,共266人,占总样本的71.5%,反映了高校学生的总体特征。从学历来看,各层次学生占比合理;从学科来看,以社会科学和理工科的学生占比居多,其他学科也有少量分布。样本具有一定的代表性。

发动机没有能量是不会自行转动的,肌肉没有能量就不会收缩,人也就无法运动。我们的一日三餐实际上就是人体能量的来源,食物经过消化、吸收,其中有一部分转化为葡萄糖贮藏在肌细胞里。

2.3 样本的数字图书馆经验

表7显示,仅有M9的克隆巴赫系数为0.574,小于0.7,所以删除该公因子,最终获得评估数字图书馆交互功能的7个公因子。

图3 使用数字图书馆的频率

图4 最常使用的数字图书馆(自我报告题项,提供的数字图书馆可不唯一)

图3 显示,经常使用数字图书馆的受调查者(包括经常使用和一直使用)为156人,所占百分比为41.9%,占比最高。图4展示了受调查者最常使用的数字图书馆,其中CNKI(知网)、南开大学数字图书馆、万方、维普、超星位居前五。

图5 使用数字图书馆的方式 (可多选)

图5 显示,大多数受调查者使用数字图书馆的方式为主动搜索,占比高达88.4%;表2表明,使用数字图书馆的目的多为撰写论文、科研需要以及完成课堂作业;另外,64.5%的受调查者并未学习过相关课程。

旅游会展行业的崛起不仅对地区经济起到带动作用,更主要的一点就是它能够对当地的人文文化、景区等进行推广。这类会展的举办有特定的地区要求,首先,举办地需要具备符合要求的设施,其次,举办地区还要具备应对突然涌入的人流、信息流、物流及资金流的实力,最后,举办地的当地居民应该具备较高的人文素养,避免给游客带来较差的体验。例如,为迎接奥运会,北京建设的鸟巢、水立方等,世博会在上海举办,上海建设了世博会展中心,这些设施自身就是一个旅游景点,让游客纷沓而至。

表2 使用数字图书馆的目的 (可多选)

选项 样本数量 百分比解决工作中问题 109 29.3%撰写论文 286 76.9%完成课堂作业 186 50.0%科研需要 226 60.8%学习需要 1 0.3%解决生活中问题 35 9.8%没什么目的 17 4.6%

图6显示,52.4%的受调查者认为自己的检索水平一般,占比最高;图7表明,46.5%的受调查者认为自己的检索效果一般,占比最高。其次,20.2%的受调查者认为自己的检索水平比较高 (见图6),42.5%认为自己的检索效果比较成功 (见图7)。可见,多数的受调查者认为自己的检索水平一般或较好,检索比较成功。

图6 样本的检索水平

图7 样本的检索效果

数据分析表明,受调查者一定程度上了解数字图书馆,学习、工作过程中使用数字图书馆,并具有检索经验。

3 研究结果

3.1 指标的重要程度分析

本研究选取的52项指标均来源于前期研究逐步构建并细化的理论模型,为进一步验证这些理论模型的可靠性及用于评估数字图书馆交互的可能性,本研究要求受调查者评价这些指标在评估数字图书馆交互中的重要程度。结果表明,各指标的均值分布在3.76与5.88之间。除Q15的标准差为3.93外,其他的各指标的标准差分布在1.05和1.46之间。部分指标的重要程度见表4和表6。由此可见,受调查者对这些指标在评估数字图书馆交互功能方面的认同度较高。除Q15之外,其他指标均能取得一定程度的共识。因而,以下针对所有指标进行进一步分析。

3.2 信度、效度检验

表5显示,被剔除的这些指标重新聚合成两个因子,但是指标Q13、Q19、Q52的因子载荷低于0.5,予以剔除。再次进行主成份分析,结果如表6所示。考虑到这些指标作为量表指标的可能性,表6同时报告了这些指标的重要程度均值及标准差。

利用因子分析中的主成份分析法测量问卷中的原始数据,可以对数据的效度进行有效检验,达到降维的作用,也可以发现各个指标之间的关系。分析表明,KMO检验值为0.943。Bartlett球形检验近似卡方值为10455.586,p<0.01,样本适合因子分析。

殷明,渐渐平静下来,呼吸也慢慢缓和起来。金丝眼镜又发话了,“小伙子,你来大致谈一谈未来广告的发展方向吧。”

采用因子分析得出问卷指标相关矩阵的特征值以及累计贡献率,一共提取出10个公因子,累计贡献率为62.932%,表明问卷的效度较好。

一天晚上,老同学聚会,冯一余喝了点酒,请代驾把车开回来,已经没地方停车了,就停到大街上,代驾打车走了。他自己一路走回去,被夜风一吹,有点兴奋,干脆绕着小区散起步来。绕了一圈,发现路边一辆车里好像有个亮点,没怎么在意;又绕了一圈,那个亮点还在,他还是没当回事;再绕一圈,还是这样,他终于忍不住了,凑近了看看,一看之下,吓了一跳,竟是小区的物管经理老崔,坐在车里抽烟呢。

3.3 公因子提取

利用方差最大化的正交旋转法,定义特征值大于1、因子载荷大于0.5以上的指标,对问卷中的52个指标进行因子分析,旋转后得到了因子载荷矩阵,如表3所示。

表3 第一次因子分析结果(表中DL为数字图书馆的英文缩写)

公因子 评估指标 因子载荷Q49我在DL搜寻信息的顺利程度 0.766 Q47我能够在DL界面上进行高效率的信息搜索 0.761 Q48我能够在DL界面上进行高效率的信息浏览 0.707 Q46我能够方便地操控DL实现自己的搜寻目标 0.671 Q51通过DL搜寻到的结果令我满意的程度0.633 F1 Q45 DL的各种功能是容易学习和使用的 0.623 Q50在DL搜寻信息的过程中,系统的表现令我满意的程度 0.618 Q43DL提供的信息内容真实无误 0.603 Q44我在DL里搜索不同内容的信息时均能得到满足 0.567 Q42我从DL中获得的信息都是有用信息0.551 Q52在DL搜索的过程中我要付出的努力程度0.492 Q22DL的资源分类是合理的 0.708 Q20DL对相关网站有详细的分类链接 0.698 Q21 DL的相关网站都是有效链接 0.690 Q23DL链接的层级数量合适 0.642 Q40 DL对各类资源的区分有明确的标识 0.551 F2 Q24DL的链接能够引导我方便查找信息 0.550 Q26顶部或底端的导航条十分容易找到 0.514 Q41DL提供的搜索关键词准确 0.487 Q25DL网站的反应速度快,稳定性好 0.437 Q10DL提供了完整的目录 0.412 Q36 DL的功能设置集中,方便使用 0.335 Q28页面排版和布局合理 0.720 Q29DL符合网站通用的设计规则 0.673 Q30网页整洁有序、框架脉络清晰,对搜索很有帮助 0.656 F3 Q31搜索过程中,界面层次安排符合我平常的浏览习惯 0.652 Q27搜索工具,如检索框、作者、主题等索引容易找到 0.541 Q32我能从DL链接到其他检索系统/数据库0.437

公因子 评估指标 因子载荷Q1 DL里资源的数量能满足我信息获取的需要0.836 Q2 DL里资源的种类能满足我信息获取的需要0.799 F4 Q3 DL里资源的内容质量能满足我信息获取的需要 0.780 Q4 DL提供了方便的下载方式 0.515 Q5 DL检索结果与我想要的结果相关性高0.432 Q17 DL提供了能够满足需要的多种功能 0.689 Q18页面上主题的字体和大小能够吸引我的注意力 0.635 F5 Q16 DL网站呈现的内容是详细的 0.621 Q12 DL提供了完备的用户指南 0.598 Q11 DL的资源分类是详尽的 0.528 Q38当有检索任务时,我有信心利用DL完成任务 0.796 Q37当有检索任务时,我对DL足够熟悉以至于能帮助我很好地完成任务 0.770 F6 Q39当有检索任务时,我所拥有的专业知识能够帮助我更好地使用DL 0.756 Q34利用DL之前,我通常已经明确了搜索目标0.437

公因子 评估指标 因子载荷Q6在DL检索时我可以通过多种途径链接到同一页面 0.669 Q7 DL里资源的更新速度快 0.516 F7 Q9 DL页面上的主题能准确表达文章或词条的核心内容 0.449 Q8 DL能够提供与检索需求相关的内容 0.436 Q14 DL对用户的查询要求反应迅速 0.372 Q33 DL有适度的网站宣传 0.512 F8 Q35相比于其他数据库,我更依赖于我所选择的 DL 0.503 Q13即使初次使用DL,也易于学习,使用起来并不困难 0.437 F9 Q15 DL页面的内容简洁 0.797 F10 Q19页面上主题的颜色能够吸引我的注意力0.449

表3显示,指标 Q5、Q8、Q9、Q10、Q13、Q14、Q19、Q25、Q32、Q34、Q36、Q41和 Q52的因子载荷低于0.5,把上述13个指标删除后,将剩余因子载荷在0.5以上的指标进行第二次因子分析,累计贡献率为61.608%,一共得到7个公因子,见表4。由于第二次因子分析析出的因子极有可能成为构建量表的因子和指标,表4同时列出了这些指标的重要程度均值及标准差。

表4 第二次因子分析析出的公因子及重要程度(表中DL为数字图书馆的英文缩写)

公因子 指标因子载荷 均值(标准差)Q49我在DL搜寻信息的顺利程度0.759 5.63(1.05)Q47我能够在DL界面上进行高效率的信息搜索0.739 5.73(1.06)Q43DL提供的信息内容真实无误0.708 5.88(1.27)Q48我能够在DL界面上进行高效率的信息浏览 0.704 5.70(1.11)Q51通过DL搜寻到的结果令我满意的程度0.664 5.69(1.16)F1 Q44我在DL里搜索不同内容的信息时均能得到满足 0.653 5.41(1.25)Q42我从DL中获得的信息都是有用信息0.650 5.50(1.25)Q50在DL搜寻信息的过程中,系统的表现令我满意的程度 0.642 5.42(1.21)Q46我能够方便的操控DL实现自己的搜寻目标0.628 5.54(1.15)Q45DL的各种功能是容易学习和使用的0.619 5.45(1.13)Q21 DL的相关网站都是有效链接0.729 5.54(1.22)Q22 DL的资源分类是合理的0.717 5.55(1.08)Q20DL对相关网站有详细的分类链接0.715 4.99(1.27)F2 Q23DL链接的层级数量合适0.652 5.23(1.19)Q24DL的链接能够引导我方便查找信息0.544 5.69(1.15)Q40DL对各类资源的区分有明确的标识0.488 5.27(1.20)

公因子 指标因子载荷 均值(标准差)Q26顶部或底端的导航条十分容易找到0.476 5.23(1.28)F2 Q11 DL的资源分类是详尽的0.459 5.44(1.22)Q1 DL里资源的数量能满足我信息获取的需要0.795 5.65(1.28)Q2 DL里资源的种类能满足我信息获取的需要0.787 5.60(1.32)F3 Q3 DL里资源的内容质量能满足我信息获取的需要 0.741 5.83(1.23)Q4 DL提供了方便的下载方式0.646 5.70(1.10)Q7 DL里资源的更新速度快0.471 5.62(1.34)Q28页面排版和布局合理0.752 5.17(1.17)Q29DL符合网站通用的设计规则0.695 5.02(1.25)F4 Q31搜索过程中,界面层次安排符合我平常的浏览习惯 0.668 5.09(1.25)Q30网页整洁有序、框架脉络清晰,对搜索很有帮助 0.658 5.40(1.09)Q27搜索工具,如检索框、作者、主题等索引容易找到 0.515 5.72(1.08)Q18页面上主题的字体和大小能够吸引我的注意力 0.642 4.40(1.46)Q17 DL提供了能够满足需要的多种功能0.628 5.28(1.28)F5 Q33 DL有适度的网站宣传0.615 4.20(1.46)Q16 DL网站呈现的内容是详细的0.602 5.31(1.29)Q12 DL提供了完备的用户指南0.580 4.88(1.46)Q6在DL检索时我可以通过多种途径链接到同一页面 0.432 4.79(1.36)Q38当有检索任务时,我有信心利用DL完成任务 0.804 5.10(1.36)Q39当有检索任务时,我所拥有的专业知识能够帮助我更好地使用DL 0.773 5.33(1.33)F6 Q37当有检索任务时,我对DL足够熟悉以至于能帮助我很好地完成任务 0.766 5.37(1.33)Q35相比于其他数据库,我更依赖我选择的DL 0.468 5.09(1.61)F7 Q15 DL页面的内容简洁0.816 5.36(3.93)

表4显示,F7仅有一个指标,其重要程度的均值虽为5.36,但标准差相比之下偏高,为3.93,表明数据的波动较大,受调查者对该指标的认同度存在一定的不一致性。因而,该指标可考虑剔除。

基于以上研究结果,将问卷中各指标的表述规范化,即将所有的表述改为正向的评估,采用7点李克特量表,以“1”表示“完全不同意”(ED),“4”表示“中立”(N),“7”表示“完全同意”(EA),进一步开发评估量表,见表9。

随着生活水平的提高,人们对自身健康的重视也越来越高,食品已不再仅仅满足于口味和营养,更要求其具有功能性,因此功能性食品的开发成为一大趋势[1]。黄精为百合科植物黄精、滇黄精或多花黄精的根茎,功效良多,被列为上品的滋补药,具有补气益阴、健脾、润肺、益肾之功效[2],已被国家食品药品监督管理局列为药食两用的中药,也被广泛用于功能性食品的制作中。现代研究表明,黄精具有降血压、降血脂、降血糖、防止动脉粥样硬化、延缓衰老和抗菌等作用[3]。

表5 被剔除因子的第一次主成份分析结果

公因子 指标 因子载荷Q5 DL检索结果与我想要的结果相关性高 0.815 Q9 DL页面上的主题能准确表达文章或词条的核心内容 0.777 Q8 DL能够提供与检索需求相关的内容 0.714 Q41 DL提供的搜索关键词准确 0.655 M8 Q25 DL网站的反应速度快,稳定性好 0.586 Q14 DL对用户的查询要求反应迅速 0.579 Q10 DL提供了完整的目录 0.539 Q13即使初次使用DL,也易于学习,使用起来并不困难 0.425

公因子 指标 因子载荷0.715 Q36 DL的功能设置集中,方便使用 0.642 0.609 M9 Q34利用DL之前,我通常已经明确了搜索目标0.469 Q32我能够从DL链接到其他检索系统/数据库0.384 Q19页面上主题的颜色能够吸引我的注意力Q52在DL搜索的过程中我要付出的努力程度

由于本问卷中的所有指标均用于测量数字图书馆交互功能,因而,信度检验针对问卷中的所有题项。检验结果显示克隆巴赫系数为0.95,说明问卷信度非常高。

由于数字图书馆的主要用户集中在高校,本研究的调查主要以高校本科生、硕士研究生以及博士研究生为对象,集中在当地两所教育部直属高校进行发放。问卷要求受调查者当面填写完成,发放地点为学生活动的主要场所,如自习室等。

表6 被剔除因子的第二次主成份分析结果及重要程度

公因子 指标因子载荷 均值(标准差)Q5 DL检索结果与我想要的结果相关性高0.799 5.88(1.20)Q9 DL页面上的主题能准确表达文章或词条的核心内容 0.788 5.85(1.07)Q8 DL能够提供与检索需求相关的内容0.714 5.81(1.11)M8 Q41 DL提供的搜索关键词准确0.664 5.71(1.21)Q25 DL网站的反应速度快,稳定性好0.590 5.75(1.10)Q10 DL提供了完整的目录0.590 5.27(1.30)Q14 DL对用户的查询要求反应迅速0.588 5.38(1.36)Q32我能够从DL链接到其他检索系统/数据库0.781 5.27(1.26)M9 Q36 DL的功能设置集中,方便使用0.660 5.33(1.21)Q34利用DL之前,我通常已经明确了搜索目标0.652 5.52(1.38)

3.4 公因子的信度分析

将第二次因子分析得到的6个公因子和第二次主成份分析得到的2个公因子进行信度分析,结果如表7所示:

表7 公因子信度分析

公因子 克隆巴赫系数F1 0.913 F2 0.886 F3 0.855 F4 0.825 F5 0.764 F6 0.776 M8 0.814 M9 0.574

为进一步探知样本的有效性,本研究从用户使用数字图书馆的频率、最常使用的数字图书馆、使用的方式、目的,信息检索的专业程度及检索水平、效果等方面揭示受调查者的特征,结果如图3-7及表6所示:

3.5 公因子命名及评估量表的形成

因子命名的过程体现了对聚合在同一因子下的指标的概念抽象,是通过提炼具体指标形成上位概念的过程。以下公因子的命名经头脑风暴和多次讨论形成,具体命名如表8所示。

总的来说,社会的发展离不开技术的进步,企业要想在竞争的大环境下不断发展,必须依靠先进的技术,切实提升自身自动化的水平。人工智能技术应用到电气工程当中发挥了重要的作用,不断加强智能技术的创新并且做好实际应用,才能保证电气工程的工作效率,满足人们的生产生活需求。

将之前所有剔除的因子再次进行主成份分析,结果如表5所示:

表8 公因子命名表

公因子 名称F1 系统的效用F2 网站结构与信息组织F3 资源可获得性F4 页面表现F5 易用性F6 主观任务感知M8 系统的绩效与效率

4 讨论与结论

本研究采用问卷调查,共收集了372份有效问卷,通过分析指标的重要性、因子分析及信度分析,形成一套包含7个维度、45项指标的数字图书馆交互评估工具。

治理好盐碱地,通过改良后使盐碱地恢复生产能力,保障国家粮食安全和重要农产品有效供给,建设生态文明产生巨大价值,具有重要意义。

4.1 数字图书馆交互评估维度与指标

本研究的结果显示,数字图书馆交互评估可从7个维度展开,即系统的效用、网站结构与信息组织、资源可获得性、页面表现、可用性、主观任务感知及系统的绩效与效率。这些维度的获得是通过因子分析聚合后形成的结果,客观地反映了用户在评估数字图书馆交互过程中所倚重的不同方面,可帮助我们更有效和准确地评估数字图书馆的交互。各项指标的设定基于前期研究的发现,通过本研究的问卷调查,再一次验证这些指标在评价数字图书馆交互中的有效性和可靠性。研究的结果支持了前期的研究发现,反映了数字图书馆的交互与技术维、信息维和任务维三个维度密切相关。这一方面表明前期研究提出的理论模型或框架较为科学,可以对实践层面的应用进行指导;另一方面说明本研究的问卷设计和数据可靠性较高,能够较全面地反映用户对数字图书馆交互的认知与评估。另外,本研究构建的评估工具一定程度上反映了解虹(Hong I.Xie)[10]和张颖(Zhang Ying)[1]提出的理论模型所涵盖的部分指标,尽管因为研究的目的不同,侧重点并不完全一致。

表9 数字图书馆交互功能评估量表

评估维度(D) 评估指标(I) ED N EA I1:我在DL搜寻信息的过程顺利1 2 3 4 5 6 7 I2:我能够在DL界面上进行高效率的信息搜索 1 2 3 4 5 6 7 I3:DL提供的信息内容真实无误1 2 3 4 5 6 7 I4:我能够在DL界面上进行高效率的信息浏览 1 2 3 4 5 6 7 D1:系统的效用I5:通过DL搜寻到的结果令我满意1 2 3 4 5 6 7 I6:我在DL里搜索不同内容的信息时均能得到满足 1 2 3 4 5 6 7 I7:我从DL中获得的信息都是有用信息 1 2 3 4 5 6 7 I8:在DL搜寻信息的过程中,系统的表现令我满意 1 2 3 4 5 6 7 I9:我能够方便的操控DL实现自己的搜寻目标 1 2 3 4 5 6 7 I10:DL的各种功能是容易学习和使用的 1 2 3 4 5 6 7 I11:DL的相关网站都是有效链接1 2 3 4 5 6 7 I12:DL的资源分类是合理的1 2 3 4 5 6 7 I13:DL对相关网站有详细的分类链接 1 2 3 4 5 6 7 D2:网站结构与信息组织I14:DL链接的层级数量合适1 2 3 4 5 6 7 I15:DL的链接能够引导我方便查找信息 1 2 3 4 5 6 7 I16:DL对各类资源的区分有明确的标识 1 2 3 4 5 6 7 I17:顶部或底端的导航条十分容易找到 1 2 3 4 5 6 7 I18:DL的资源分类是详尽的1 2 3 4 5 6 7 I19:DL的资源的数量能满足我信息获取的需要 1 2 3 4 5 6 7 I20:DL的资源的种类能满足我信息获取的需要 1 2 3 4 5 6 7 D3:资源可获得性I21:DL的资源的内容质量能满足我信息获取的需要 1 2 3 4 5 6 7 I22:DL提供了方便的下载方式1 2 3 4 5 6 7 I23:DL的资源的更新速度快1 2 3 4 5 6 7 I24:页面排版和布局合理1 2 3 4 5 6 7 I25:DL符合网站通用的设计规则1 2 3 4 5 6 7 D4:页面表现I26:搜索过程中,界面层次安排符合我平常的浏览习惯 1 2 3 4 5 6 7 I27:网页整洁有序、框架脉络清晰,对搜索很有帮助 1 2 3 4 5 6 7 I28:搜索工具,如检索框、作者、主题等索引容易找到 1 2 3 4 5 6 7 I29:页面上主题的字体和大小能够吸引我的注意力 1 2 3 4 5 6 7 I30:DL提供了能够满足需要的多种功能 1 2 3 4 5 6 7 D5:可用性I31:DL有适度的网站宣传1 2 3 4 5 6 7 I32:DL网站呈现的内容是详细的1 2 3 4 5 6 7 I33:DL提供了完备的用户指南1 2 3 4 5 6 7 I34:在DL检索时我可以通过多种途径链接到同一页面 1 2 3 4 5 6 7 I35:当有检索任务时,我有信心利用DL完成任务 1 2 3 4 5 6 7 D6:主观任务感知I36:当有检索任务时,我所拥有的专业知识能够帮助我更好地使用DL 1 2 3 4 5 6 7 I37:当有检索任务时,我对DL足够熟悉以至于能帮助我很好地完成任务 1 2 3 4 5 6 7 I38:相比于其他数据库,我更依赖我选择的DL 1 2 3 4 5 6 7

评估维度(D) 评估指标(I) ED N EA I39:DL检索结果与我想要的结果相关性高 1 2 3 4 5 6 7 I40:DL页面上的主题能准确表达文章或词条的核心内容 1 2 3 4 5 6 7 I41:DL能够提供与检索需求相关的内容 1 2 3 4 5 6 7 D7:系统的绩效与效率I42:DL提供的搜索关键词准确1 2 3 4 5 6 7 I43:DL提供了完整的目录1 2 3 4 5 6 7 I44:DL网站的反应速度快,稳定性好1 2 3 4 5 6 7 I45:DL对用户的查询要求反应迅速1 2 3 4 5 6 7

研究结果同时启示我们,交互是一个复杂的概念,尤其从用户的视角,不仅涉及用户与系统的信息交换与互动,同时兼顾用户自身对任务的感知及交互过程的体验。研究揭示的7个维度也反映了交互这一重要概念的不同维度,不仅可帮助我们更深入地理解交互的概念,还同时启示可从不同的切入点理解“交互”。

此外,本研究通过因子分析删除了因子载荷较低的6项指标,分别是:Q13(即使初次使用DL,也易于学习,使用起来并不困难)、Q19(页面上主题的颜色能够吸引我的注意力)、Q32(我能从DL链接到其他检索系统/数据库)、Q34(利用DL之前,我通常已经明确了搜索目标)、Q36(DL的功能设置集中,方便使用)以及Q52(在DL搜索的过程中我要付出的努力程度)。这些指标的重要性程度并不低(括号中依顺序分别为均值和标准差):Q13(5.32,1.21),Q19(3.76,1.39),Q32(5.27,1.26),Q34(5.52,1.38),Q36(5.33,1.21),Q52(5.30,1.27)。排除这 些指标的主要原因是因为本研究设定的因子载荷偏高(>=0.5),使它们无法聚类到任何维度中;另一方面,也不排除问题表述不够清楚合理或者是有数据异常值存在的可能。此外,排除这些指标也是为了使评估工具更加聚焦、有效。然而,这些方面也同样是不可忽视的,虽未能进入评估量表,但作为参考指标,依然可以发挥作用。

本研究基于前期研究成果,设计52项评估指标,最终在评估量表中保留了45项,剔除指标偏少也一定程度上支持了前期研究的理论模型或框架的可靠性。

4.2 数字图书馆交互功能评估量表的使用

经过一系列研究构建的数字图书馆交互功能评估量表,适用于评估数字图书馆交互,以探知其交互功能是否支持用户与数字图书馆的交互过程,获得良好的交互绩效。该量表可用于比较不同的数字图书馆在交互功能设计方面的优劣,但这并非其主要目的。更为重要的目的在于明确待评估的数字图书馆在交互功能设计上哪些方面需要进一步改善,以帮助开发设计人员进一步完善其交互功能设计,尤其是检索和浏览功能的设计。该量表可以嵌入数字图书馆中,打造成网络问卷形式,请用户自行填写完成。如能长期收集数据,对数字图书馆的交互功能的了解和改进无疑是极有助益的。采用这样的方法,可以使数字图书馆的研究由常规性的截面研究过渡到历时性研究,以支持数字图书馆的可持续发展。也可组织专项的数字图书馆交互评估,利用该量表,通过抽样调查,完成数字图书馆评估的数据收集和分析。

如何获知妨碍数字图书馆交互过程和影响交互绩效的不同方面?可采取以下两种方式:

第三天,黄立发来了订单,要求三天内交货。三十来名员工顿时忙得手忙脚乱。黄立一再强调,景花厂第一次和中汕厂合作,一定要按定期交货,争取更大的合作空间。什么更大合作空间?这个鸟人,不过是想多拿回扣罢了。可景花厂只有三十来人,要在三天内完成五万个表巴,就像是煮了一锅夹生饭。

(1)获得适当的数据后 (建议中型样本,200以上),针对每一个维度,分别考察7个维度的均值,如某维度均值低于5,该维度应引起关注并进一步考察每一项评估指标的均值,低于5的评价指标应考察其原因并针对性地加以改善和提升。也可直接考察每一项指标的均值,针对均值小于5的指标作进一步分析,以改善其设计。例如,针对页面表现维度的指标“搜索过程中,界面层次安排符合我平常的浏览习惯”,如均值小于5,数字图书馆的开发和设计者便应重新考量页面内容的层次安排,进一步考察目标用户的浏览习惯,使其设计更符合用户的行为习惯,以提升其交互绩效。

(2)此外,获得适当数据后,针对每一维度,还可考察各分值的百分比。可事先设定基准比例进行评估,具体比例以开发方或使用方对数字图书馆的期望目标而定,可定为40%,也可为30%或20%。一旦某维度的分值低于5的比例高于基准比例,该维度便值得关注。例如,设定基准比例为30%,针对维度D1,各指标低于5的比例的均值为40%,那么该维度应该给予关注。进一步考察单一指标,着重探究分值低于5的比例高于基准比例的指标,以探知导致该比例的原因。当然,直接考察各指标的分值低于5的比例也是可行的方法,如样本中选择低于5的比例高于基准比例,其原因值得进一步考察,以寻找合适的方法和途径改善数字图书馆的交互功能设计。

当然,基于该量表,并非所有的不够理想的指标都能直接找到解决方案,如指标“我在DL搜寻信息的过程顺利”的分值低于5的比例如超过基准比例,是无法直接获得交互功能的完善方案的。需进一步研究,如采用跟踪访谈的方法,访谈部分受调查者,以更准确获知导致搜索过程不顺利的根本原因,以便对症下药地完善数字图书馆的交互功能设计。

总之,该量表提供了一个可行的、比较灵活的评估数字图书馆交互功能的方法和途径,为数字图书馆交互功能的持续改善提供实证基础。

4.3 研究的意义及启示

本研究的意义在于:① 将数字图书馆交互功能评估从理论研究推向实践应用层面,结合问卷调查法和因子分析法,通过数据的具体分析构建评估工具。相比于已有的一些相关研究仍停留在理论模型构建阶段,本研究更有助于推进评估的实践。②本研究所构建的评估工具可对数字图书馆多个维度进行测量,涵盖技术维度、信息维度、任务维度及用户层面,实现对数字图书馆交互的多维评估。可见,本研究延伸了数字图书馆的评估研究,所构建的评估工具着重于数字图书馆交互层面,丰富了数字图书馆评估的内涵和方法。

评估工具的维度“系统的效用”体现了用户对数字图书馆交互功能的理解,用户满意的数字图书馆交互功能应能有效地支持和改善用户搜寻信息的顺利程度,提高搜索和浏览的效率,提供真实及有用的信息,提供满意的搜索结果及满足用户的需求等。这些方面作为用户评估数字图书馆交互功能的重要方面,也同时启示我们数字图书馆的交互功能设计应能有效地支持用户交互才能提升用户的满意程度。“网站结构与信息组织”维度则体现了信息构建的重要性,链接的层级、链接的有效性、资源的分类及组织均能影响用户对数字图书馆交互功能的评估。同时,该维度与“页面表现”及“可用性”启示我们数字图书馆界面设计该如何更好地满足用户与数字图书馆的交互需求,如界面的层次安排、网页的整洁有序、页面排版布局等。“资源可获得性”体现了信息内容丰富对支持用户与数字图书馆交互的重要性;“系统的绩效与效率”也要求数字图书馆在资源建设方面加以重视,尤其要了解目标用户的需求及工作任务,用户对任务的主观感受也同样是用户评估数字图书馆交互支持的重要方面。可见,本研究不仅提供了可用于评估数字图书馆交互的工具,同时,也为数字图书馆的交互设计提供了思路,可帮助数字图书馆的设计者更好地完善数字图书馆的交互设计,提升用户的交互体验,以支持他们更好地完成工作任务。

鬼子大队长站在山脚下,手拿望远镜,看见他的士兵们不断地涌入高家岭山头的阵地,在一阵枪响后,就再也没有听到中国军队反击的枪声。他想,中国军队不是被全部炸死,就是已经撤退。看来,进攻石牌的第一道大门已经顺利被他打开。

井圈锁口为C35混凝土,与第一节护壁连接,一次浇筑。锁口壁厚45cm,顶面高出地面30cm。护壁上口厚15cm、下口厚10cm,上下节搭接5~10cm。护壁配筋:竖向φ10@150mm,环向φ10@150mm,上下节竖向钢筋搭接长度30cm,端头成弯钩上下钩结形成整体。

4.4 局限性与展望

本研究也具有一定的局限性。虽然本研究开发了一套基于多维度的数字图书馆交互功能评估工具,但是要将其大范围应用还需在实践中不断验证和完善。研究的样本虽然针对数字图书馆的用户群体中的学生群体展开,然而,由于资源限制,一些用户群体被忽略,如教师群体、图书馆员等。此外,评估指标之间的关系还需进一步研究,以使评估工具进一步精炼;用户的个体特征与评估指标的关系值得探讨,以构建更为个性化的数字图书馆交互评估工具。这些也为我们今后的研究指明了方向。

参考文献

1 Zhang Y.Developing a holistic model for digital library evaluation[J].Journal of the American Society for Information Science and Technology,2010,61(1):88-110.

2 齐雪.数字图书馆交互功能评估研究[硕士学位论文][D].天津:南开大学学位论文,2014.

3 李月琳,梁娜,齐雪.从交互维度到交互功能:构建数字图书馆交互评估理论模型[J].中国图书馆学报,2016,42(1):66-82.

4 李月琳,肖雪,仝晓云.数字图书馆中人机交互维度与用户交互绩效的关系研究[J].图书情报工作,2014,58(2):38-46.

5 李月琳,肖雪,胡蝶.信息检索实验中的任务设计——真实与模拟仿真工作任务的比较研究[J].图书情报工作.2014(16):5-12.

6 Borlund P.Experimental components for the evaluation of interactive information retrieval systems[J].Journal of Documentation,2000,56(1):71-90.

7 闫希敏,李月琳.关键成功因素视角下的数字图书馆交互评估模型[J].图书情报工作.2016(10):24-32.

8 Marchionini G.Evaluation digital libraries:A longitudinal and multifaceted view[J].Library Trends,2000,49(2):304-333.

9 Saracevic T.Digital Library Evaluation:Toward an Evolution of Concepts[J].Library Trends,2000,49(2):350-369.

10 Xie H I.Users'evaluation of digital libraries(DLs):Their uses,their criteria,and their assessment.Information Processing and Management,2008(44):1346-1373.

11 Tsakonas G,Mitrelis A,Papachristopoulos L,et al.An exploration of the digital library evaluation literature based on an ontological representation[J].Journal of the American Society for Information Science and Technology,2013,64(9):1914-1926.

12 Ahmada M,Abawajy J H.Digital Library Service Quality Assessment Model[J].Procedia-Social and Behavioral Sciences,2014,(129):571-580.

13 王鉴辉.数字图书馆评价体系问题研究[J].中国图书馆学报,2004,(4):55-57.

14 安娜.高校数字图书馆评价指标体系研究[J].现代情报,2007,(5):97-100.

15 周训杰,王尊新.高校图书馆数字资源评价指标体系研究[J].现代情报,2006,(1):14-18.

16 王卫军.基于可用性的移动图书馆服务能力评价研究[J].情报理论与实践,2016,39(1):100-103.

17 何惠芬.基于用户行为的高校图书馆知识服务互动平台之构建[J].图书情报工作,2015,59:199-202.

18 夏立新,孙丹霞,王忠义.网络环境下数字图书馆知识服务用户满意度评价指标体系构[J].图书馆杂志,2015(3):27-34.

19 李迎迎,王娟,郑春厚.高校图书馆数字资源服务评价指标体系构建[J].情报杂志,2014,33(3):74-81.

20 穆靖,刘毅,郭明明.高校数字图书馆评价指标体系研究[J].情报学,2010,28(10):1509-1512.

21 吴建华,王朝晖.数字图书馆评价层次分析[J].情报科学,2009,27(8):1207-1213.

22 杨志和.数字图书馆发展水平的模糊综合评价[J].情报杂志,2009(28):142-146.

23 刘炜,楼向英,张春景.数字图书馆评估研究[J].图书情报工作,2007(5):21-24.

24 徐芳,戴炜轶.国内数字图书馆用户交互体验比较实验与分析[J].图书馆学研究,2014,(12):18-22.

25 赵杨.数字图书馆移动服务交互质量控制机制研究—基于用户体验的视角[J].情报杂志,2014,33(4):184-189.

26 胡凯.近十年我国数字图书馆用户研究综述[J].科级情报开发与经济,2015,25(7):144-147.

27 黄晓斌,卢琰.论数字图书馆用户界面的评价[J].图书馆论坛,2005,(3):16-19.

28 夏春红.基于信息构建的数字图书馆评价研究[J].图书馆学刊,2012,(3):120-123.

29 Chowdhury G.From digital libraries to digital preservation research:The importance of users and context[J].Journal of Documentation,2010,66(2):207-223.

30 Fuhr N,Tsakonas G,Aalberg T,et al.Evaluation of digital libraries[J].International Journal on Digital Libraries:2007(8):21-38.

31 梁孟华.基于用户交互的数字图书馆服务评价模型构建与实证检验[J].图书情报工作,2012,56(7):72-78.

32 徐芳,金小璞.基于用户体验的数字图书馆用户交互模型构建[J].情报理论与实践.2015,38(8):115-134.

33 Goncalves M A,Moreira B L,Fox E A,et al.“What is a good digital library?”-A quality model for digital libraries[J].Information Processing and Management,2007,43(5):1416-1437.

34 Moreira B L,Goncalves M L,Alberto H F,et al.Evaluating Digital Libraries with 5SQual[C]//The 11th European Conference on Research and Advanced Technology for Digital Libraries,2007:466-470.

35 Blixrud L C.Measures for Electronic Use:The ARL E-Metrics Project[C]//Statistics in Practice-Measuring and Managing-IFLA Satellite Conference,2002:73-84.

36 Hernon P,Calvert P.E-service quality in libraries:exploring its features and dimensions[J].Library&Information Science Research,2005,27(3):377-404.

37 Kiran K,Diljit S.Modeling Web-based library service quality[J].Library&Information Science Research,2012,34(3):184-196.

38 施国洪,岳江君,陈敬贤.我国图书馆服务质量测评量表构建及实证研究[J].中国图书馆学报,2010,(4):36-46.

39 郭瑞芳.基于Lib QUAL+TM的高校图书馆移动信息服务质量探讨[J].新世纪图书馆,2013,(6):25-27.

40 文思敏.移动图书馆服务质量评价浅析[J].四川图书馆学报,2013,(5):30-32.

李月琳,张昕
《大学图书馆学报》 2018年第02期
《大学图书馆学报》2018年第02期文献

服务严谨可靠 7×14小时在线支持 支持宝特邀商家 不满意退款

本站非杂志社官网,上千家国家级期刊、省级期刊、北大核心、南大核心、专业的职称论文发表网站。
职称论文发表、杂志论文发表、期刊征稿、期刊投稿,论文发表指导正规机构。是您首选最可靠,最快速的期刊论文发表网站。
免责声明:本网站部分资源、信息来源于网络,完全免费共享,仅供学习和研究使用,版权和著作权归原作者所有
如有不愿意被转载的情况,请通知我们删除已转载的信息 粤ICP备2023046998号