L1 Открытый урок · Интересующийся
L1.4. Мультимодальность: изображения, документы, голос
Что ассистенты умеют с изображениями, PDF и голосом, где ошибаются на сканах, графиках и таблицах и как это проверить. Практикум: скан и график.
- Объём
- 2 урока · 4 часа
- Компетенции
- MM-01·A
Что умеют современные ассистенты
- Изображения: описать, что на фото; прочитать текст на снимке (вывеска, скан, скриншот); разобрать график или схему; сравнить два изображения.
- Документы: PDF, таблицы, презентации — пересказать, найти нужное, сравнить версии, вытащить данные в таблицу.
- Голос: диктовка и голосовой диалог; расшифровка записи встречи и выделение договорённостей.
- Создание: картинки по описанию, диаграммы, иногда — озвучка.
Где ошибаются
| Ситуация | Типовая ошибка | Как проверить |
|---|---|---|
| Плохой скан, рукопись | путает цифры (3/8, 1/7), пропускает строки | сверить числа с оригиналом, особенно суммы и даты |
| График | неверно считывает значения с осей, путает линии | попросить выписать значения и сверить с 2–3 точками на графике |
| Таблица в PDF | съезжают столбцы, склеиваются ячейки | проверить итоговые суммы, сравнить число строк |
| Длинный документ | упускает детали из середины, обобщает | просить ссылку на страницу или раздел для каждого вывода |
| Фото людей | ошибается в возрасте, эмоциях, «узнаёт» не тех | не использовать для выводов о людях |
Правило то же, что в L1.3: чем дороже ошибка — тем тщательнее проверка по оригиналу.
Важно о данных. Фото документа — тоже данные. Скан паспорта, договор с подписями, фото экрана с перепиской клиента подпадают под правила L1.5.
Практикум: скан и график
- Возьмите документ-скан без личных данных: инструкцию, меню, страницу из книги или учебный бланк. Попросите ассистента перенести текст и извлечь из него ключевые данные в таблицу. Отметьте все расхождения с оригиналом.
- Возьмите график из открытого источника (статистика, отчёт компании). Попросите выписать значения и сделать вывод о тренде. Сверьте 3 значения вручную. Верен ли вывод?
Сдаётся: что просили, что получили, найденные ошибки, ваш вывод о надёжности.