Frame：具备视觉能力和实时联网问答的开源AR眼镜

Brilliant Labs发布了一款为“Frame”的开源AR眼镜，使用户能够通过视觉分析和即时翻译，体验数字与物理现实世界的融合。 Frame结合了人工智能和增强现实技术，是一款集成了OpenAI和Whisper技术的AR眼镜，能够实现视觉分析和声音翻译，增强用户对周围世界的理解和交互能力，售价349美金！ Frame的核心是Noa，一个云端的人工智能助手，可以与无限数量的人工智能模型进行协作，并可以通过我们或者其他开发者随时添加新的模型到其库中。 Frame的核心功能： 视觉分析 ：Frame眼镜集成了先进的人工智能技术，能够分析用户所看到的场景和对象。这种视觉分析功能可以识别和解释周围环境，为用户提供即时的信息和数据。

实时翻译 ：利用OpenAI的技术，Frame眼镜能够翻译视觉和听觉输入。无论是阅读外语文字还是听懂不同语言的对话，Frame都能提供即时的翻译，帮助用户跨越语言障碍。

数字与现实的融合 ：Frame眼镜通过增强现实技术将数字内容和物理世界无缝集成，为用户创造一个互动性更强、信息更丰富的视觉体验。

[video width="1080" height="1920" mp4="https://img.xiaohu.ai/2024/05/X2Twitter.com_17866968597567692801920p.mp4"][/video] 开箱即用的功能： 实时查询和信息获取 ：

利用 Perplexity、OpenAI 的 ChatGPT、Whisper 等 AI 模型，Frame能够对用户正在查看的事物提供详细的问题解答。 无论是口语还是文字，Frame都能提供实时翻译服务，帮助用户跨越语言障碍。 实时互联网查询 ：

用户可以直接通过眼镜查询互联网，获取关于当前视线范围内事物的信息，无论是地点、产品、商店还是流程。 日常交互学习 ：

Noa 应用程序能够学习用户的日常互动，更好地了解用户经常接触的地点、产品和流程，从而提供更加个性化的服务。 健康与饮食建议 ：

Frame 还会根据用户的情况提供饮食建议，比如在用户考虑是否吃第二片蛋糕时，给出适当的健康建议。 Noa 应用主要功能

Noa 应用是与 Frame AR眼镜配对使用的移动应用程序，主要提供与流行的 AI 聊天服务无缝对接的功能，允许用户通过语音与 AI 进行互动并获得即时响应。主要功能包括：

AI 聊天交互 ： Noa 应用允许用户通过语音与 AI 聊天服务进行交互，实现即时通信。用户可以直接通过眼镜与 AI 对话，获取各种信息和回答。

探索和发现 ：应用与 Monocle AR镜片紧密集成，提供增强现实视觉体验，能够识别用户周围的对象和场景，并提供相关信息和历史背景，增强用户的探索和发现体验。使用户能够在查看真实世界的同时接收虚拟信息和交互提示。 增强学习体验 ：Noa 应用利用 AR技术提供沉浸式的学习环境，帮助用户通过视觉化内容更深入地理解复杂的概念和数据。

图片捕捉与增强 ： 允许用户通过长按 Monocle 拍照，随后可以用语音命令让 Noa 增强拍摄的场景，增加了使用的便利性和互动性。

导航与路线规划 ：Noa 应用结合实时位置数据，提供增强现实导航，使用户能够以直观的方式获取前往目的地的路线。

个性化内容推荐 ：根据用户的兴趣和历史互动，Noa 应用能够推荐相关内容和活动，使用户的体验更加贴合个人偏好。

Brilliant Labs开源了该项目的代码，Frame眼镜的代码在MIT许可下开源，任何人都可以访问和修改代码。 官网： https:// brilliant.xyz 技术文档: https:// docs.brilliant.xyz 开源代码: https:// github.com/brilliantlabsAR