共计 724 个字符,预计需要花费 2 分钟才能阅读完成。
新加坡国立大学的研究团队开发了一款革命性的智能耳机 AiSee,这款设备专为视障人士设计,通过集成 Meta 的 Llama 模型,为用户提供了全新的 ’ 看见 ’ 方式。AiSee 不仅是一个简单的辅助工具,更是一个智能的 AI 伴侣,帮助视障人士更好地融入日常生活,甚至重返工作岗位。
AiSee 的设计经历了多次迭代,从最初的指环式设备演变为现在的开放式耳机。新加坡国立大学信息系统与分析系教授 Suranga Nanayakkara 解释,这种设计不仅避免了社会污名,还保留了用户的自然空间感知能力。最新版本的 AiSee 还解决了头发遮挡摄像头和电池续航等问题,并增加了音乐和通话功能,使其更具实用性。
AiSee 的突破在于其集成了大语言模型(LLMs),使其从简单的物体识别器转变为对话助手。用户不仅可以识别物体,还可以提出后续问题。设备运行一个代理 AI 框架,结合计算机视觉和推理模型,与 Llama 模型协同工作,理解用户意图并执行任务。为了在 Android 设备上高效运行 Llama,团队使用了量化技术,将模型大小减少到 10 亿到 30 亿参数之间。
AiSee 的首席技术官 Hussel Suriyaarachchi 表示,代理框架足够灵活,可以集成新版本的 Llama。AiSee 公司从新加坡国立大学分离出来,并得到了影响力投资者的资助。2024 年,AiSee 赢得了 Meta Llama 影响力创新奖,正在与博物馆和机场运营商等组织洽谈,计划推出消费者版本。
AiSee 的未来不仅限于辅助技术,它还可以作为每个人的视觉智能工具。Nanayakkara 引用了路缘石效应,指出为残疾人设计的功能往往会使普通人群受益。AiSee 的商业成功不仅在于其作为辅助技术,更在于其无手操作和无屏幕的轻松计算方式。