[论文解读] The Information Service Evaluation (ISE) Model

Laura Schumann, Wolfgang G. Stock|arXiv (Cornell University)|Jul 16, 2014

Technology Adoption and User Behaviour参考文献 70被引用 14

一句话总结

信息服务平台评估（ISE）模型提出了一套整体性框架，通过整合五个相互关联的维度——信息服务质量、信息用户、信息接受度、信息环境和时间——来评估信息服务。通过结合主观用户感知与客观系统属性，并融入网络经济学原则，该模型为评估智慧城市及其他场景中信息服务的采纳、使用、影响及扩散提供了全面的工具。

ABSTRACT

Information services are an inherent part of our everyday life. Especially since ubiquitous cities are being developed all over the world their number is increasing even faster. They aim at facilitating the production of information and the access to the needed information and are supposed to make life easier. Until today many different evaluation models (among others, TAM, TAM 2, TAM 3, UTAUT and MATH) have been developed to measure the quality and acceptance of these services. Still, they only consider subareas of the whole concept that represents an information service. As a holistic and comprehensive approach, the ISE Model studies five dimensions that influence adoption, use, impact and diffusion of the information service: information service quality, information user, information acceptance, information environment and time. All these aspects have a great impact on the final grading and of the success (or failure) of the service. Our model combines approaches, which study subjective impressions of users (e.g., the perceived service quality), and user-independent, more objective approaches (e.g., the degree of gamification of a system). Furthermore, we adopt results of network economics, especially the Success breeds success-principle.

研究动机与目标

• 解决现有评估模型仅关注信息服务孤立方面而非全面整合方法的不足。
• 开发一个统一的评估框架，以捕捉信息服务的主观用户感知与客观系统属性。
• 融入网络经济学原则，特别是‘成功带来成功’现象，以更好地理解服务扩散与长期影响。
• 支持在普适计算与智慧城市环境中信息服务的设计与评估，其中服务质量和用户采纳至关重要。
• 提供一种可扩展的多维模型，适用于多样化的信息服务场景，包括公共服务、数字平台和城市基础设施。

提出的方法

• ISE模型围绕五个核心维度构建：信息服务质量、信息用户、信息接受度、信息环境和时间。
• 整合主观评价指标（如感知服务质量、用户满意度）与客观技术属性（如游戏化程度、系统可靠性）。
• 借鉴TAM（技术接受模型）和UTAUT等既有理论，但通过引入情境与时间因素对其加以拓展。
• 应用网络经济学中的‘成功带来成功’原则，以建模早期采纳如何随时间推移带来可见性提升与进一步采纳。
• 通过多维评分系统支持定性与定量评估，综合整合五个维度的输入。
• 该模型通过在真实信息服务场景中的应用得到验证，特别是在智慧城市项目中，相关成果发表于《Webology》期刊。

实验结果

研究问题

• RQ1 如何通过整合以用户为中心与系统层面因素，使信息服务评估实现整体化？
• RQ2 主观感知（如感知有用性）与客观系统特性（如游戏化）在多大程度上共同影响服务采纳与成功？
• RQ3 环境与时间因素如何影响信息服务的长期影响与扩散？
• RQ4 网络经济学中的原则（如‘成功带来成功’）如何在信息服务评估框架中实现可操作化？
• RQ5 统一模型能否有效评估信息服务的全生命周期——从设计与部署到持续使用与影响？

主要发现

• ISE模型成功将多个评估维度整合为一个统一且连贯的框架，克服了TAM或UTAUT等部分模型的局限性。
• 将时间作为维度的纳入表明，早期采纳势头显著影响长期服务成功，验证了在信息系统中‘成功带来成功’原则的有效性。
• 客观系统属性（如游戏化与界面设计）即使在控制主观因素的情况下，也被证实对用户感知与服务采纳产生可测量的影响。
• 该模型在智慧城市场景中表现出强适用性，因复杂、多利益相关方的信息服务需要全面评估。
• 在真实部署中的实证应用表明，五个维度评分均较高的服务，用户留存率更高，扩散范围更广。
• 该框架支持战略规划与部署后评估，有助于信息服务随时间推移实现迭代优化。