Проект: Голосовой помощник для автоматического конспектирования лекций с интеграцией ChatGPT

  1. Введение: Студенты тратят много времени на конспектирование лекций, часто упуская суть. Мой проект — голосовой помощник, решающий эту проблему. Он автоматически записывает уроки, транскрибирует их и предоставляет краткие, качественные конспекты через Telegram-бота, используя передовые технологии обработки речи и естественного языка. Это помогает эффективнее усваивать информацию, фокусируясь на понимании, а не на рутинной записи. Помощник также фиксирует задачи и отвечает на вопросы учеников.

  2. Архитектура системы: ⦁ Модуль записи и распознавания речи: Микрофон захватывает аудио, которое передается на Raspberry Pi. Здесь библиотека Vosk выполняет транскрипцию речи в текст в реальном времени. ⦁ Модуль конспектирования (ChatGPT): Распознанный текст обрабатывается ChatGPT, который создает структурированные конспекты, выделяя ключевые моменты. ⦁ Модуль взаимодействия с Telegram: Telegram-бот обеспечивает получение готовых конспектов и позволяет пользователям задавать вопросы, получая на них ответы.

  3. Алгоритм работы:

  4. Инициализация: Пользователь запускает запись лекции кнопкой, установленной на микрофоне.

  5. Запись и распознавание: микрофон отправляет аудиоданные на локальный сервер Raspberry Pi (одноплатный компьютер). Библиотека Vosk транскрибирует речь в текст.

  6. Обработка в ChatGPT: Текст передается в ChatGPT с запросом на создание конспекта (с указанием уровня детализации).

  7. Формирование и отправка: ChatGPT создает краткий конспект и отправляет его в Telegram-бот. Бот доставляет конспект в чат пользователю.

  8. Реализация и результаты: Тестирование на лекциях с разным темпом речи, акцентами и фоновым шумом показало высокую точность распознавания и отличное качество конспектов от ChatGPT. Использование ИИ помогает устранять неточности транскрибации. Разработанная система — это инновационный инструмент, который значительно повышает эффективность обучения. Она упрощает работу студентов, позволяя им сконцентрироваться на понимании материала, а не на рутинной задаче создания конспектов.

Исходный размер 2400x1080
Исходный размер 2400x1080
Исходный размер 2400x1080
Исходный размер 2400x1080
Исходный размер 2400x1080
Исходный размер 2400x1080

Данный проект находится на стадии создания, так как в данный момент еще не настроена автоматическая отправка текста в chatGPT и нет готового корпуса для микрофона

Загрузка...
Мы используем файлы cookies для улучшения работы сайта и большего удобства его использования. Более подробную информац...
Показать больше