NoTeeline: Поддержка моментального ведения заметок на основе ключевых точек с использованием больших языковых моделей.

NoTeeline: Supporting Real-Time Notetaking from Keypoints with Large Language Models

September 24, 2024

Авторы: Faria Huq, Abdus Samee, David Chuan-en Lin, Xiaodi Alice Tang, Jeffrey P. Bigham

cs.AI

Аннотация

Видео стало популярной формой медиаконтента для обмена информацией и потребления. Однако создание заметок во время просмотра видео требует значительного времени и усилий. Для решения этой проблемы мы предлагаем новую интерактивную систему NoTeeline для создания персонализированных заметок в реальном времени. NoTeeline позволяет пользователям быстро записывать ключевые моменты (микрозаметки), которые автоматически преобразуются в полноценные заметки, отражающие содержание микрозаметок пользователя и соответствующие его стилю письма. В рамках исследования внутри группы (N=12) мы обнаружили, что NoTeeline помогает пользователям создавать качественные заметки, отражающие суть их микрозаметок с более высокой фактической правильностью (93,2%), сохраняя их стиль письма. При использовании NoTeeline участники испытывали значительно меньшее умственное напряжение, создавали удовлетворительные заметки, используя на 47% меньше текста, и завершали процесс ведения заметок на 43,9% быстрее по сравнению с базовым уровнем ручного ведения заметок.

English

Video has become a popular media form for information sharing and consumption. However, taking notes while watching a video requires significant time and effort. To address this, we propose a novel interactive system, NoTeeline, for taking real-time, personalized notes. NoTeeline lets users quickly jot down keypoints (micronotes), which are automatically expanded into full-fledged notes that capture the content of the user's micronotes and are consistent with the user's writing style. In a within-subjects study (N=12), we found that NoTeeline helps users create high-quality notes that capture the essence of their micronotes with a higher factual correctness (93.2%) while accurately reflecting their writing style. While using NoTeeline, participants experienced significantly reduced mental effort, captured satisfactory notes while writing 47% less text, and completed notetaking with 43.9% less time compared to a manual notetaking baseline.