Archetype AI 发布了一个创新的人工智能平台 —— Newton™,这是一个专门为理解物理世界设计的基础模型。
Newton™ 与目前的文本和图像分析的生成式 AI 模型不同,它结合了实时传感器数据(如雷达、摄像头、加速度计、温度传感器等)和自然语言处理技术,使用户能够对周围世界提出开放式问题,并做出明智的决策。
- 实时物理数据的连接:Newton 设计用于连接实时物理数据,其数据源是全球数十亿传感器的输入,实现了对物理现实的直接解读。
- 深入物理世界的技术:Newton 利用从各种传感器(如加速度计、陀螺仪、雷达、摄像头、麦克风等)收集的数据,结合自然语言,以新的方式解锁对物理世界的见解。
- 实用应用展示:Newton™ 已经开始在多个行业中应用,帮助改进建筑安全、减少浪费、提供车辆状况感知、增强家庭安全和能效,优化物流和供应链,预测工业设备的维护需求。如将运动传感器置于盒子内,模拟亚马逊包裹中的易碎物品应如何被监控。当盒子被摔落时,显示设备会报告包裹可能已损坏,展示了对实际应用场景的直接应用。
- 推动物理 AI 时代的到来:Archetype AI 相信,我们正处于物理人工智能的黎明时期,这种新型人工智能能够以前所未有的方式感知、理解和推理世界。
- Archetype AI 完成了由 Venrock 领投的1300万美元种子融资,Amazon Industrial Innovation Fund、Hitachi Ventures、Buckley Ventures、Plug and Play Ventures 及多位天使投资者也参与了投资。Venrock 的合伙人 Ganesh Srinivasan 将加入公司董事会。
Archetype 的创始团队由 Ivan Poupyrev、Nick Gillian、Brandon Barbello、Jaime Lien 和 Leonardo Giusti 组成,他们在索尼、迪士尼和谷歌的 ATAP 部门有丰富的工作经验。
Newton 的主要功能特点
-
多模态数据融合:
- Newton 能够处理来自雷达、摄像头、加速度计、陀螺仪等多种传感器的时间序列数据。
- 通过这种多模态输入,Newton 提供了一个全面的视角来理解物理事件和环境的动态变化。
-
实时数据处理与推理:
- 通用嵌入空间:Newton 将来自不同传感器的数据编码到一个统一的嵌入空间(universal embedding space)。这是一个数学表示形式,可以动态更新,用以代表物理世界的状态。
- 生成输出:基于这个嵌入空间,Newton 能够计算和解释这些数据的含义,然后将这些信息转化为用户可以理解的格式,如文本、可视化图表或计算机代码。
-
交互性与可访问性:
- 查询和命令:用户可以通过自然语言向 Newton 提出问题或发出命令。例如,用户可以问:“这个房间现在的温度是多少?”或者指令:“分析昨天晚上的安全录像。”
- 智能回应:Newton 利用其对物理数据的理解,通过自然语言智能回应用户的查询或执行相关的命令。
-
广泛的应用适用性:
- 跨行业应用:由于其强大的数据处理和多模态整合能力,Newton 可以应用于建筑、汽车、制造等多个行业。
- 定制和优化:企业可以根据自己的特定需求定制和优化 Newton,使其更好地适应特定的应用场景和需求。
-
私密性和定制化:
- 用户可以在 Archetype 的基础设施或自己的基础设施上运行 Newton,确保数据的私密性。
- Newton 支持私人定制,用户可以用自己的专有数据对模型进行微调,以满足特定的用例需求。
-
边缘部署能力:
- Newton 允许在设备、车辆或机器上部署边缘模型,这些小型模型能够在计算和功率限制条件下执行特定的任务。
- 这种能力使得 Newton 不仅适用于云计算环境,也适合于需要快速、本地化决策的应用场景。
技术能力和应用:
- API 接口:通过 Newton 的 API,用户可以利用传感器数据来加速或自动化任务,如数据总结、搜索、预测和智能监控。
- 插件任何传感器:Newton 支持与各种传感器(如摄像头、麦克风、雷达)结合使用,支持实时或预录数据流。
- 数据隐私保护:用户可以在 Archetype 的基础设施或自己的基础设施上运行 Newton,确保数据私密性,不与其他开发者共享。
解决方案领域:
- 安全与安防:在建筑工地上通过持续监控来提高安全性,并即时警报潜在危险。
- 空间计算:使智能家居通过自然语言和手势与设备无缝交互,根据用户的存在、注意力和偏好自动执行任务。
- 诊断与预防性维护:在工厂和仓库提高自动化和机器人系统的可靠性,实时检测异常,优化性能并最小化停机时间。
- 数据总结:从可穿戴设备、智能手机和家用设备生成关于健康状况的综合报告,为医疗决策提供定期总结。
官网:https://www.archetypeai.io/
介绍:https://www.archetypeai.io/blog/introducing-archetype-ai—understand-the-real-world-in-real-time