智能AI眼镜OpenGlass的核心是基于乐鑫ESP32-S3的 Seeed Studio XIAO 开发板,集成了Wi-Fi和蓝牙功能的高性能芯片。结合EEMB LP502030电池和3D打印的眼镜架,构建出轻便且持久使用的智能眼镜框架,硬件成本只需25美元。
OpenGlass的软件部分则采用了Node.js和Expo开发的移动端应用,实现了与硬件的无缝交互,为用户提供直观易用的界面。后台调用DeepSeek和OpenAI用于数据处理和智能识别,而Ollama的REST API用于语音转文本功能。
OpenGlass 功能介绍
OpenGlass 智能眼镜应用场景广泛:
☑️ 生活记录者: 随时随地记录你的日常生活,重要时刻不再错过。
☑️ 社交达人: 记住新朋友的名字,减少尴尬的忘记瞬间。
☑️ 户外探险: 辨识野生动植物,增加旅行的乐趣。
☑️ 饮食健康: 计算食物卡路里
☑️ 语言翻译:实时翻译文字,跨国交流更无障碍。
☑️ 视觉辅助: 对视力受限的人来说,它可以读取菜单或标签上的文字。
☑️ 智能对话: 搭载了多种开源AI大模型( DeepSeek、OpenAI 、通义千问),通过对话角色自定义、海量知识库、长期记忆、语音声纹识别等功能,成为了一个真正“懂你”的AI助理。
OpenGlass 智能眼镜项目优势如下:
低成本: 无需高昂费用,就能拥有智能眼镜体验。
可扩展性高: 开源设计允许开发者和爱好者添加更多功能。
安装便捷: 易于组装的硬件和清晰的软件设置指南,任何人都可以尝试。
社区支持: 加入Based Hardware Discord社区,获取帮助、分享经验,共同进步。
隐私优先: 自主选择是否自托管API服务,尊重并保护个人数据。
OpenGlass 硬件和软件
OpenGlass 智能眼镜基于 Seeed Studio XIAO (ESP32-S3) Sense 开发套件,采用了乐鑫 ESP32-S3 芯片,支持 2.4 GHz Wi-Fi 和低功耗蓝牙无线通信,主频高达 240 MHz,芯片集成了高性能的 Xtensa® 32 位 LX7 双核处理器、超低功耗协处理器、Wi-Fi 基带、蓝牙基带、RF 模块以及外设。
Seeed Studio XIAO 开发套件还配备了 OV2640 摄像头传感器,数字麦克风,8MB PSRAM,8MB Flash,支持电池充电,具有丰富接口,适合物联网,嵌入式机器学习领域。结合嵌入式 ML 计算能力和摄影能力,这款开发板可以成为您开始使用智能语音和视觉AI的绝佳工具。
供电采用 EEMB LP502030 3.7v 250mAH 电池,搭配上 3D 打印的结构外壳
OpenGlass 智能眼镜开发环境为 Arduino IDE,并使用 Moondream (一个专在边缘设备运行的小型的视觉语言模型)在 Ollama 平台上进行图像流的理解和处理。
1.克隆 OpenGlass 仓库并安装依赖项
git clone https://github.com/BasedHardware/openglass.git
cd openglass
npm install
2.在位于 keys.ts 文件中添加 Groq 和 OpenAI 的 API 密钥
https://github.com/BasedHardware/OpenGlass/blob/main/sources/keys.ts
3.关于 Ollama 的仓库自托管 REST API 链接如下:
https://github.com/ollama/ollama
4.打开终端并输入以下命令
ollama pull moondream:1.8b-v2-fp16
5.启动应用程序
npm start
OpenGlass项目源码
Github 完整项目资料获取:https://github.com/BasedHardware/OpenGlass
如有需求,请加小编微信: beacon0418