arXiv发布跨平台生成式AI应用用户信任与摩擦分析研究
摘要:arXiv发布了一项关于生成式AI应用用户信任与摩擦的跨平台研究,分析了来自Google Play和Apple App Store的17,012条针对六大主流生成式AI应用(ChatGPT、Gemini、Microsoft Copilot、Claude、DeepSeek和Perplexity)的用户评论。研究结合了BERTopic主题建模和RoBERTa情感分类技术,揭示了用户对广告、身份验证、服务器可靠性和订阅定价的负面情绪最为集中。此外,研究还发现不同应用之间的用户情感差异显著,例如Claude的用户情感呈现两极分化现象。研究的另一个亮点是提出了“信任摩擦评分”,以量化和解释应用在信任和可用性方面的障碍。
研究背景与目的
近年来,生成式AI(GenAI)应用在消费者市场迅速普及,但关于用户对这类应用的质量感知、信任度以及采用障碍的大规模研究仍然匮乏。本研究旨在通过分析用户评论,揭示用户对主流生成式AI应用的信任与摩擦点。
研究方法
研究团队收集了来自Google Play和Apple App Store的17,012条针对六大主流生成式AI应用(ChatGPT、Gemini、Microsoft Copilot、Claude、DeepSeek和Perplexity)的用户评论。采用BERTopic主题建模和RoBERTa情感分类技术对评论进行分析,并通过卡方检验、Kruskal-Wallis检验和多变量逻辑回归分析不同应用之间的差异。研究还通过300条分层抽样的评论进行人工编码验证,以确保结果的可靠性。
主要发现
- 负面情绪集中领域:广告(91%)、身份验证(89%)、服务器可靠性(83%)和订阅定价(73%)是用户负面情绪的主要集中点。
- 应用间情感差异:Claude的用户负面情绪最高(47.7%),但同时拥有高度热情的用户群体,显示出显著的两极分化现象。
- 地缘政治与数据隐私问题:部分DeepSeek用户的评论提到了与中国背景相关的地缘政治和数据隐私问题。
- 信任摩擦评分:研究提出了“信任摩擦评分”,用于量化应用在信任和可用性方面的障碍,并将其分解为可解释的维度。
技术亮点
- 多模态分析方法:结合BERTopic主题建模和RoBERTa情感分类技术,实现对用户评论的精细化分析。
- 跨应用比较:通过卡方检验、Kruskal-Wallis检验和多变量逻辑回归分析,揭示不同应用之间的显著差异。
- 信任摩擦评分:提出了一种新的量化指标,用于评估和解释应用在信任和可用性方面的障碍。
行业影响与开发者建议
- 用户体验优化:开发者应重点关注广告、身份验证、服务器可靠性和订阅定价等领域的用户体验优化,以提升用户满意度和信任度。
- 数据隐私与安全:对于具有地缘政治敏感性的应用,开发者需更加重视数据隐私和安全问题,以增强用户信任。
- 情感分析与用户反馈:利用情感分析技术定期监测用户反馈,及时调整产品策略以应对用户需求和期望的变化。
结论
这项研究为理解用户对生成式AI应用的信任与摩擦提供了宝贵的见解,并为开发者提供了实用的建议,以提升用户体验和用户满意度。
—— 完 ——消息来源:ArXiv NLP/LLM (cs.CL) (2026-09-18)
主题标签: #用户研究 #情感分析 #多模态分析 #生成式AI #用户体验
编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。
社区整体评论区