WhatsappImageDescriber (Описание изображений для WhatsApp)

Обзор

WhatsappImageDescriber — это дополнение для NVDA, которое позволяет получать описания изображений в сообщениях WhatsApp, сгенерированные искусственным интеллектом.
Дополнение работает как с настольной версией WhatsApp, так и с версией из Microsoft Store.

Возможности

• Получение детальных описаний изображений в сообщениях WhatsApp
• Поддержка нескольких сервисов компьютерного зрения на базе ИИ:
  • OpenAI (GPT-4 Vision)
  • Google Gemini
  • Anthropic Claude
• Настройка длины ответа и языка описания
• Совместимость с настольной версией WhatsApp и версией из Microsoft Store

Требования

• NVDA версии 2024.2 или новее
• WhatsApp Desktop (стандартная версия или версия из Microsoft Store)
• API-ключ для одного из поддерживаемых сервисов ИИ:
  • API-ключ OpenAI: https://platform.openai.com/api-keys
  • API-ключ Google Gemini: https://aistudio.google.com/app/apikey
  • API-ключ Anthropic Claude: https://console.anthropic.com/
• Gemini предоставляет достаточно щедрые ограничения по запросам бесплатно.

Установка

1. Скачайте пакет дополнения из магазина дополнений NVDA или со страницы релизов этого репозитория.
2. Откройте пакет Дополнения с помощью NVDA, это запустит процесс установки.
3. Следуйте инструкциям на экране для завершения установки.
4. Перезапустите NVDA, когда будет предложено.

Настройка

1. Перейдите в меню NVDA > Параметры > Настройки > Описание изображений для WhatsApp.
2. Выберите предпочитаемый сервис ИИ.
3. Введите ваш API-ключ для выбранного сервиса.
4. Выберите предпочитаемую модель ИИ.
5. При необходимости настройте максимальную длину ответа (в токенах).
6. Выберите предпочитаемый язык описания.
7. Нажмите OK, чтобы сохранить настройки.

Использование

1. Откройте WhatsApp и перейдите к чату.
2. Перейдите к сообщению, содержащему изображение.
3. Нажмите ALT+I, чтобы получить описание изображения.
4. Описание будет отображено в читаемом окне, где вы сможете ознакомиться с ним в удобном темпе.
5. Нажмите ESC, чтобы закрыть окно описания, когда закончите.

Устранение неполадок

• "Эта команда работает только в WhatsApp": Убедитесь, что вы находитесь в WhatsApp и фокус установлен на сообщение.
• "В этом сообщении нет изображения": Убедитесь, что фокус установлен на сообщение, содержащее изображение.
• "Требуется API-ключ": Вам необходимо добавить ваш API-ключ в панели настроек.

Лицензия

Это дополнение лицензировано в соответствии с GNU General Public License v2.

Благодарности

• Спасибо сообществу NVDA за поддержку и обратную связь.