开发者用 MiniCPM-V 4.7 1B 打造视障辅助 App PRTS
社区开发者 Rebel-Gloria 用 MiniCPM-V 4.7 1B 作为默认端侧视觉理解模型,做出面向盲人和低视力用户的 iPhone/iPad 应用 PRTS。
OpenBMB· @OpenBMB · X·2026-11-19 21:30· 32 分钟前AI 评分45
AI 导读
社区开发者 Rebel-Gloria 用 MiniCPM-V 4.7 1B 作为默认端侧视觉理解模型,做出了面向盲人和低视力用户的 iPhone/iPad 应用 PRTS。
正文 · 原文
📱 举起相机,听见眼前的世界。
社区开发者 Rebel-Gloria 打造了面向盲人和低视力用户的 iPhone 与 iPad 应用 PRTS,由 MiniCPM-V 4.7 1B 为其默认端侧视觉理解提供支持。💙
👀 场景描述:拍摄一张照片,即可听到对周围环境的简洁描述。
📖 朗读文字:拍摄标牌、告示或印刷页面,即可让它们被朗读出来。
🎙️ 追问细节:使用语音输入,询问当前场景中的细节。
📳 障碍物引导:一套独立的基于 LiDAR 的系统在支持的设备上提供语音指引和节奏性触觉提示。
♿ 无障碍控制:VoiceOver、动态字体、实体按键、轻点背面和 Siri 快捷指令提供多种交互方式。专门的低视力模式保留相机预览、场景描述和文字朗读功能。
🔒 日常场景描述和文字朗读可借助内置的 MiniCPM-V 模型离线运行。可选的在线功能和系统语音识别则有各自的网络连接要求。
这是一次用视觉智能让日常体验更无障碍的用心社区探索。🛠️
📂 探索 PRTS:
github.com/Rebel-Gloria/PRTS
🚀 MiniCPM-V GitHub:
github.com/OpenBMB/MiniCPM-V
🤗 端侧模型:
huggingface.co/openbmb/MiniCP…
#MiniCPM #OpenBMB #Accessibility #OnDeviceAI #OpenSource
来源:OpenBMB · x.com
来源:RadarAI · aihot.news
