你好呀，我是小智!
相信大家最近一定都被《黑神话：悟空》刷屏了吧。小智作为一个手残党，也被大头虐的死去活来。游戏已经被讲得很多了，所以我们聊点别的。
此次我们聚焦在一个特别的故事上——全盲女玩家诺子喵呜挑战《黑神话：悟空》。她依靠 实时弹幕指导 和 听声辨位 的方式，成功击败了游戏中的第一个Boss。
这一事件不仅引发了社会广泛关注,也提出了一个 新的问题 ：
在AI技术日新月异的今天，我们能否利用AI为视障玩家提供更好的游戏体验？
AI伴玩的可能性
随着AI技术的进步，游戏伴玩的概念开始兴起。大模型如V和 GLM-4V-Plus ，具备了强大的视频理解和生成能力，使得它们在游戏伴玩中显示出了巨大的潜力。例如，在国外的游戏社区中，一些玩家已经开始利用GPT-4，在《我的世界》中实现了基本的伴玩功能。通过AI的协助，玩家可以获得实时的游戏指引，甚至在需要时得到详细的操作建议。
国内目前无法正常使用GPT-4V，我首选了国产自研大模型 GLM-4V-Plus 。作为智谱最新推出的图像/视频理解模型，GLM-4V-Plus具备卓越的图像理解能力，并具备基于时间感知的视频理解能力，能做到哪个程度尚不清楚，考虑到《黑神话：悟空》的复杂性和高难度，我们可以先来上手测一测。
GLM-4V-Plus在《黑神话：悟空》中的应用测试
为了验证 GLM-4V-Plus 在游戏伴玩中的潜力，我们进行了针对《黑神话：悟空》的应用测试。此次测试主要集中在几个关键方面：游戏剧情的识别、宝箱和隐藏道具的发现以及路径导航。
GLM-4V-Plus 目前可以在智谱大模型开放平台 bigmodel.cn 上通过 API 直接调用，这是国内首个通用视频理解模型API，大家都可以上手试一试。
剧情识别能力
在游戏过程中，玩家往往需要理解复杂的剧情和任务指引。对于视障玩家来说，缺少视觉反馈会使得剧情的理解变得异常困难。我们挑选最开头的变身金蝉的片段，来看GLM-4V-Plus能否准确识别 运动主体 以及 周边环境 。
通过对游戏中的文本和语音进行分析，GLM-4V-Plus能够精准地识别出主角变身的金蝉，以及所处的森林环境，并生成简明的文字提示，有了这一能力，能够帮助视障玩家更好地理解游戏情节。
宝箱和隐藏道具的发现
《黑神话：悟空》中隐藏了大量的宝箱和道具，玩家需要通过细致的观察才能发现这些隐藏物品。对于视障玩家来说，这几乎是不可能完成的任务。如果能通过AI指引方位来获取物品，将极大的提升游戏体验。
GLM-4V-Plus在此表现出了其强大的视觉处理能力。通过分析游戏画面，AI识别出到了宝箱位于画面右侧，并且针对视频一开始的视觉遮挡，玩家无法直接看到宝箱也进行了提醒和指引。有了这个功能，不仅增强了游戏的趣味性，也使得视障玩家能够参与到更多的游戏内容中。
路径导航能力
在游戏中，路径的选择和行走是一个重要的部分，尤其是在复杂的地图或迷宫中，错误的路径选择可能导致游戏失败。接下来我们看下GLM-4V-Plus是否能够准确识别游戏中的岔路口。
测试结果与分析
在这次测试中， GLM-4V-Plus表现出色 ，证明了AI在游戏伴玩中的潜力。它能够精准地识别游戏中的关键元素，为玩家提供实时的帮助和反馈。然而，在实际应用中，我们仍然面临一些挑战，如实时性和复杂场景的处理能力。这些问题需要在未来的技术迭代中进一步优化。
无障碍游戏设计的思路
在AI的助力下，未来的游戏设计可以更加注重无障碍功能，尤其是对视障玩家的需求。那么基于GLM-4V-Plus可以进行哪些无障碍游戏设计呢？
通过屏幕捕捉技术，我们可以通过 GLM-4V-Plus 接口实时分析游戏画面，并将视觉信息转换为语言提示。这些提示可以通过耳机或扬声器实时播放，帮助视障玩家了解周围环境。例如，当玩家接近敌人时，AI可以提示玩家敌人的位置和动作，甚至建议玩家采取的战斗策略。这种方式可以大大提高视障玩家的游戏体验。
除了语言提示，触觉反馈也是一种有效的无障碍设计方式。例如，上文提到的使用 GLM-4V-Plus 来寻找隐藏的宝箱或陷阱时，手柄可以通过振动提醒玩家注意。这种多感官的反馈方式可以让视障玩家更好地掌握游戏中的关键信息，增强他们的沉浸感。
结语
《黑神话：悟空》的挑战故事让我们看到了AI技术在帮助视障玩家方面的巨大潜力。通过 GLM-4V-Plus 等先进AI模型的应用，我们可以为视障玩家提供更加丰富和有趣的游戏体验。然而，技术的进步只是第一步，如何将这些技术应用于实际的游戏设计中，使其真正服务于残障人士，是我们未来需要共同努力的方向。AI的未来充满了可能性，它不仅可以改变游戏的面貌，还能够改变无数玩家的生活。让我们期待，AI能够为更多的人带来光明和希望。