VScan 是专为视障群体打造的开源视觉感知辅助工具,由开发者 Rastislav Kish 推出,核心是借助视觉大语言模型,将智能手机的摄像头转化为可自定义的视觉感知入口,替代视力完成各类视觉任务,帮助视障用户在日常出行、生活场景中感知周边环境。软件支持自定义光学认知功能,用户可根据自身需求配置物体查找、标识辨认、场景评估等不同能力,所有功能逻辑均遵循本地优先原则,无后台数据收集与用户跟踪机制,充分保障使用隐私。作为面向视障群体的研究型开源项目,VScan 持续迭代优化交互与识别能力,0.2.4 版本进一步优化了提示词编辑界面与操作反馈逻辑,适配更多安卓机型,为视障用户提供更流畅的无障碍视觉辅助体验。
VScan是如何工作的
智能手机的摄像头是你的视觉感知设备。VScan的核心在于配置。这些是你可能想用相机来完成的想象工具/目的/认知任务。每个配置包括:
使用的相机-正面/背面,以及相机参数-分辨率,闪光灯等。
用于LLM处理的提示。LLM是像素数据和您对它的解释之间的桥梁,在用户/系统提示中,您可以指定您对特定目的感兴趣的内容,以及应该使用的LLM模型。
对于通用场景描述,您可能希望使用基本配置,带有“图像中有什么?”提示使用背面摄像头,这将会给你一种无论你指向哪个区域的感觉。为了拍出好看的自拍照,你可能想使用一个专门的目的,你可以问自己拍摄的自拍照有多好,甚至可以问一些细节,如相机的方向、拍摄者的可见度、背景的焦点以及摄影的整体印象。使用配置,您可以描述各种视觉认知功能,例如,寻找一个对象,如电源插座、特定建筑物或对象的状态。
核心功能亮点
自定义认知功能:支持用户创建专属视觉认知工具,可自由设置摄像头参数,包括前后摄像头切换、分辨率调节、闪光灯控制,同时可自定义 LLM 提示词,匹配物体查找、文字识别、场景描述等不同使用需求。
视觉大模型驱动:依托多模态大语言模型处理摄像头采集的画面信息,将像素数据转化为清晰的自然语言描述反馈给用户,还原真实的视觉感知逻辑,识别精度与场景适配性优于传统固定识别工具。
开源透明无隐私风险:项目代码完全开源,无内置用户跟踪、数据上传模块,所有功能配置与使用记录均保留在本地设备中,不会采集视障用户的环境画面与个人信息,使用安全性更高。
独立提示词编辑器:内置独立的系统提示词与用户提示词编辑界面,配备大尺寸文本输入区域,方便用户编写复杂的识别指令,可灵活调整识别的侧重点与反馈表述方式。
基础使用操作教程
安装完成后打开应用,首次使用会请求摄像头权限,授予权限后即可进入主界面。应用完整适配安卓系统屏幕阅读器,视障用户可通过读屏操作完成所有设置与功能调用。

进入功能管理页面,点击新建认知功能选项,依次选择调用的摄像头设备,调整分辨率与闪光灯参数,再填写对应的系统提示词与用户提示词,确认保存后即可生成专属的视觉认知功能。

返回相机主界面,从功能列表中选择已创建的认知功能,将摄像头对准需要识别的场景或物体,应用会自动调用大模型处理画面内容,并通过语音播报的方式反馈识别结果。

如需调整已有的功能,可在功能列表中长按对应条目进入编辑页面,修改参数或提示词后保存即可生效。支持创建多套不同用途的认知功能,满足居家、出行等不同场景的切换需求。
系统适配与运行要求
系统版本:适配 Android 9.0 及以上版本的安卓智能手机,建议使用 Android 11 及以上系统,以获得更稳定的摄像头调用效果与语音反馈体验。
硬件要求:设备需具备后置自动对焦摄像头,运行内存不低于 3GB,剩余存储空间不少于 150MB,识别过程需要联网调用大模型接口完成画面处理。
无障碍适配:完整支持安卓系统自带的 TalkBack 屏幕阅读器,所有按钮与功能入口均设置了清晰的语义标签,视障用户可通过读屏操作完成全流程使用,无需额外辅助。
网络要求:进行画面识别时需要保持网络连接,用于传输画面数据至大模型接口;本地的功能管理、配置编辑与历史记录查看无需联网即可正常操作。
常见问题与解决方法
摄像头无法启动:先检查应用是否已获得摄像头权限,可在系统设置的应用权限管理中确认开启;部分机型需关闭其他占用摄像头的后台应用后再重试启动。
识别无语音反馈:确认手机媒体音量已正常开启,同时检查系统无障碍服务中的屏幕阅读器是否处于运行状态;部分机型可在应用设置中手动开启语音播报开关。
识别结果不准确:可编辑对应认知功能的提示词,补充更明确的识别要求与描述规则;也可适当调高摄像头分辨率,提升画面清晰度以优化识别效果。
功能保存失败:检查手机本地存储是否有足够剩余空间,确认应用已获得存储权限;若频繁出现保存失败,可重启应用后重新创建功能,避免同时运行过多后台程序占用资源。
整体来看,VScan 作为一款专注于视障群体的开源视觉感知工具,跳出了传统识别工具固定功能的限制,通过自定义认知功能的模式适配不同用户的个性化需求,为视障用户探索周边世界提供了灵活、安全的技术支持。无论是日常居家的物品查找,还是户外出行的场景辨认,都能通过自定义配置实现精准的视觉辅助,是视障用户提升生活自主性的实用工具。
热门评论
最新评论