Нужно реализовать приложение, которое будет: 1. Получать голос по ws от sdk mentra 2. Отправлять в real-time API OpenAI 3. Получать ответ от OpenAI 4. Конвертировать Sppech-to-Text с помощью OpenAI 5. Отправлять на рендер в очки текст
Дополнительно нужно реализовать WebView в этом приложении с настройками, куда нужно положить свой OpenAI API KEY
Дока по экосистеме MentraOS -https://docs.mentra.glass/core-concepts Дока по созданию приложений с использованием Mentra SDK - https://docs.mentra.glass/quickstart Demo приложения - https://docs.mentra.glass/example-apps.md Дока real-time-api https://platform.openai.com/docs/guides/realtime
Дебажить можно без очков в приложении есть эмулятор: https://apps.apple.com/us/app/mentra-the-smart-glasses-app/id6747363193 https://play.google.com/store/apps/details?id=com.mentra.mentra&pli=1
Деплой приложения осущесвляется в https://railway.com/ У Mentra есть дока как сделать это с их приложением - https://docs.mentra.glass/railway-deployment