Frame AI智能眼镜改进,优化多模态生成式人工智能系统、引入图像和矢量引擎

2024年7月1日 19人浏览 / 0人评论 / 添加收藏

初创公司Brilliant Labs宣布了旗下Frame AI智能眼镜多项新功能和强大工具,主要更新包括高级文本转语音功能、缩短流式响应延迟以及引入内部图像和矢量引擎。

开发者可基于Frame AI助手Noa进行更直观的交互,从而创建更具创意和创新性的AI应用。

改进功能包括如下:

Noa文本转语音功能:用户可直接从Frame中听到反馈内容。此功能提供了一种直观、免提的方式,可与Noa AI助手进行交流。

图像和矢量引擎:此工具支持开发者创建和交付复杂的图像和矢量内容,这些内容可直接显示在用户眼前,这为交互式内容开辟了新的可能性。

连接服务:用户可通过Perplexity和OpenAI订阅在Frame上不受限制使用,充分发挥语言模型的潜力。

Brilliant Labs推出了世界上第一款内置多模式AI助手的智能眼镜,这款重量39克的眼镜框配备了在线AI助手Noa。

多模态生成式人工智能系统可同时运行GPT4、Stability AI和Whisper AI模型,通过分析用户与人工智能助手之间的互动,Noa可进化并发展出独特的个性。

Brilliant Labs的目标是基于Frame将生成式人工智能从电脑带到现实世界。该系统无需输入问题,而是基于来自环境的输入,Noa可处理摄像头捕获的内容、识别语音和声音、实时翻译或总结整本书的内容。

Frame AI智能眼镜还支持扫描衣服或其他物品以比较商品价格,但不具备Apple Vision Pro或Meta Quest 3等复杂的混合现实功能,其框架内置的MicroOLED可在20度视野范围内显示图像和文本内容。

多模式AI智能眼镜

全部评论