智能AI眼镜OpenGlass的核心是基于乐鑫ESP32-S3的 Seeed Studio XIAO 开发板,集成了Wi-Fi和蓝牙功能的高性能芯片。结合EEMB LP502030电池和3D打印的眼镜架,构建出轻便且持久使用的智能眼镜框架,硬件成本只需25美元。
OpenGlass的软件部分则采用了Node.js和Expo开发的移动端应用,实现了与硬件的无缝交互,为用户提供直观易用的界面。后台调用DeepSeek和OpenAI用于数据处理和智能识别,而Ollama的REST API用于语音转文本功能。
OpenGlass 功能介绍
☑️ 生活记录者: 随时随地记录你的日常生活,重要时刻不再错过。
☑️ 社交达人: 记住新朋友的名字,减少尴尬的忘记瞬间。
☑️ 户外探险: 辨识野生动植物,增加旅行的乐趣。
☑️ 饮食健康: 计算食物卡路里
☑️ 语言翻译:实时翻译文字,跨国交流更无障碍。
☑️ 视觉辅助: 对视力受限的人来说,它可以读取菜单或标签上的文字。
☑️ 智能对话: 搭载了多种开源AI大模型( DeepSeek、OpenAI 、通义千问),通过对话角色自定义、海量知识库、长期记忆、语音声纹识别等功能,成为了一个真正“懂你”的AI助理。
OpenGlass 智能眼镜项目优势如下:
低成本: 无需高昂费用,就能拥有智能眼镜体验。
可扩展性高: 开源设计允许开发者和爱好者添加更多功能。
安装便捷: 易于组装的硬件和清晰的软件设置指南,任何人都可以尝试。
社区支持: 加入Based Hardware Discord社区,获取帮助、分享经验,共同进步。
隐私优先: 自主选择是否自托管API服务,尊重并保护个人数据。
OpenGlass 硬件和软件
Seeed Studio XIAO 开发套件还配备了 OV2640 摄像头传感器,数字麦克风,8MB PSRAM,8MB Flash,支持电池充电,具有丰富接口,适合物联网,嵌入式机器学习领域。结合嵌入式 ML 计算能力和摄影能力,这款开发板可以成为您开始使用智能语音和视觉AI的绝佳工具。
OpenGlass 智能眼镜开发环境为 Arduino IDE,并使用 Moondream (一个专在边缘设备运行的小型的视觉语言模型)在 Ollama 平台上进行图像流的理解和处理。
1.克隆 OpenGlass 仓库并安装依赖项
git clone https://github.com/BasedHardware/openglass.git
cd openglass
npm install
2.在位于 keys.ts 文件中添加 Groq 和 OpenAI 的 API 密钥
https://github.com/BasedHardware/OpenGlass/blob/main/sources/keys.ts
3.关于 Ollama 的仓库自托管 REST API 链接如下:
https://github.com/ollama/ollama
4.打开终端并输入以下命令
ollama pull moondream:1.8b-v2-fp16
5.启动应用程序
npm start
OpenGlass项目源码
Github 完整项目资料获取:
https://github.com/BasedHardware/OpenGlass
推荐站内搜索:最好用的开发软件、免费开源系统、渗透测试工具云盘下载、最新渗透测试资料、最新黑客工具下载……
还没有评论,来说两句吧...