Дополнение NVDA: AI Summarizer v2.5

Расширение возможностей доступности с помощью ИИ-суммаризации мультимедиа

Введение

Дополнение NVDA AI Summarizer v2.5, разработанное Sujan Rai из Team of Tech Visionary, представляет собой современный инструмент доступности, использующий Google Gemini API для создания кратких ИИ-генерованных сводок различных типов контента, включая код, аудио, видео, документы и изображения. Специально разработанное для пользователей NVDA, это дополнение повышает продуктивность и доступность благодаря удобному интерфейсу для суммаризации контента.

Описание

AI Summarizer позволяет пользователям NVDA загружать файлы поддерживаемых форматов и генерировать адаптированные сводки на основе настраиваемых запросов. С доступным интерфейсом, интуитивными комбинациями клавиш и надежной функциональностью дополнение обеспечивает комфортный пользовательский опыт. Ключевые возможности включают потоковую обработку для отзывчивости, опции работы с буфером обмена и экспорта, а также расширенные функции, такие как транскрибирование аудио/видео и извлечение текста из изображений.

Возможности

• Поддержка множества форматов: Суммаризация различных типов файлов:
  • Видео: MP4, MKV
  • Аудио: MP3, WAV
  • Изображения: PNG, JPEG, JPG, ICO
  • Документы: Текстовые файлы (например, TXT, PDF)
• Настраиваемые запросы: Определяйте конкретные инструкции для ИИ, чтобы адаптировать сводки или транскрипции.
• Доступный интерфейс: Полная совместимость с NVDA, включая комбинации клавиш и обратную связь для экранных дикторов.
• Транскрибирование: Точное транскрибирование аудио- и видеофайлов.
• Извлечение текста из изображений: Извлечение текста из изображений с помощью продвинутых ИИ-алгоритмов.
• Работа с буфером обмена и экспорт: Копирование сводок в буфер обмена или их экспорт в текстовые файлы для удобного обмена.
• Проверка интернет-соединения: Проверяет доступ в интернет для надежной работы с API.
• Потоковая обработка: Выполняет задачи суммаризации в отдельном потоке для сохранения отзывчивости интерфейса.
• Дополнительные вопросы: Задавайте ИИ уточняющие вопросы на основе сгенерированных сводок для более глубокого понимания.

Ключевые особенности

• ИИ-суммаризация: Использует модель vision-pro s3 от tech visionary AI для создания качественных и кратких сводок контента.
• Улучшенная доступность: Разработано для seamless-интеграции с NVDA, обеспечивая инклюзивный пользовательский опыт.
• Продвинутое транскрибирование: Точное транскрибирование аудио- и видеоконтента.
• Извлечение текста из изображений: Расширяет доступность визуального контента.
• Интерактивные уточнения: Поддерживает итеративные запросы для уточнения или расширения сводок.

Комбинации клавиш

Дополнение AI Summarizer предоставляет интуитивные комбинации клавиш для эффективной навигации:

• NVDA+Alt+N: Открывает главное окно AI Summarizer.
• Alt+A: Прикрепляет файл в главном окне.
• Alt+R: Удаляет прикрепленный файл в главном окне или повторно генерирует сводку в окне ответа.
• Alt+S: Начинает суммаризацию в главном окне или подписывается на YouTube-канал в окне “О программе”.
• Alt+B: Открывает окно “О программе” или возвращает в главное окно из окна ответа.
• Alt+C: Закрывает любое окно или копирует сводку в буфер обмена в окне ответа.
• Alt+E: Экспортирует сводку как текстовый файл в окне ответа.
• Alt+L: Закрывает окно ответа.
• Escape: Закрывает любое активное окно.
• Backspace: Возвращает в главное окно из окна ответа.

Инструкция по использованию

1. Установка дополнения:

Скачайте дополнение AI Summarizer из официального репозитория GitHub или магазина дополнений NVDA. Следуйте стандартному процессу установки дополнений NVDA.

2. Доступ к дополнению:

Откройте окно AI Summarizer с помощью NVDA+Alt+N или выберите пункт “AI Summarizer” в меню “Сервис” NVDA.

3. Суммаризация контента:
   1. В главном окне введите запрос, указывающий, как ИИ должен обработать контент.
   2. Нажмите Alt+A или кнопку “Прикрепить файл” для выбора поддерживаемого файла.
   3. Нажмите Alt+S или кнопку “Суммаризировать” для обработки файла и генерации сводки.
   4. Просмотрите сгенерированную ИИ сводку в окне ответа.
4. Управление сводками:

В окне ответа вы можете:
* Скопировать сводку в буфер обмена (Alt+C).
* Экспортировать сводку как текстовый файл (Alt+E).
* Повторно сгенерировать сводку с новым запросом (Alt+R).
* Вернуться в главное окно (Alt+B).
5. Дополнительные возможности:

Откройте окно “О программе” через Alt+B в главном окне, чтобы узнать больше о дополнении или подписаться на YouTube-канал Team of Tech Visionary.

Информация об обновлении

Дополнение AI Summarizer NVDA было обновлено до версии 2.5 с существенными улучшениями и новыми возможностями.

Список изменений для v2.5

• Поддержка видеофайлов: Добавлена возможность суммаризации видеофайлов (MP4, MKV) с исправлением ошибок из предыдущих версий.
• Уточняющие вопросы: Добавлена возможность задавать уточняющие вопросы на основе сгенерированных сводок для итеративного взаимодействия с ИИ.
• Транскрибирование: Добавлена возможность транскрибирования аудио- и видеофайлов для создания точных текстовых транскриптов.
• Извлечение текста из изображений: Реализовано ИИ-извлечение текста из изображений (PNG, JPEG, JPG, ICO).
• Улучшение производительности: Повышена стабильность и надежность благодаря исправлению ошибок и оптимизации интеграции с API.
• Планируемые возможности: Дополнительные функции находятся в разработке и будут выпущены в будущих обновлениях.

Важные примечания

• Требуется интернет: Для работы AISummarizer v2.5 требуется активное интернет-подключение.
• Поддерживаемые форматы: Только перечисленные форматы файлов (MP4, MKV, MP3, WAV, PNG, JPEG, JPG, ICO, TXT, PDF) поддерживаются для суммаризации и обработки.
• Обучение и обновления: Подпишитесь на YouTube-канал Team of Tech Visionary для обучения, обновлений и поддержки сообщества.

Лицензия

Дополнение AI Summarizer NVDA лицензировано под GNU General Public License v2 (GPLv2). Полные условия лицензии доступны в файле лицензии в репозитории.

Участие в разработке

Мы приветствуем участие сообщества! Посетите наш репозиторий GitHub для сообщения об ошибках, предложений улучшений или внесения изменений в код.

Домашняя страница проекта

Для получения дополнительной информации, документации и обновлений посетите официальную страницу проекта: https://github.com/s-toolkit/ai-summarizer-nvda-addon.

Разработано Sujan Rai, Team of Tech Visionary. © 2025. Лицензия GPLv2.