Vantage

Что такое Vantage?

Vantage — эксперимент Google Research для оценки навыков будущего с помощью генеративного ИИ. Он использует симулированные многопартийные беседы, чтобы учащиеся практиковали навыки в открытых сценариях, а ИИ-система собирала структурированные доказательства для оценки.

Проект разработан с педагогическими экспертами и исследователями из New York University с целью масштабируемого подхода, соответствующего практикам оценки по основным академическим предметам. Google заявляет, что Vantage предназначен как песочница для старшеклассников и студентов колледжей и включает метод оценки, дающий валидированный скоринг навыков и фидбек.

Ключевые возможности

• Симулированные многопартийные беседы с ИИ-аватарами: Учащиеся взаимодействуют с ИИ-аватарами в открытых задачах (например, подготовка к дебатам или питчинг креативной идеи), генерируя наблюдаемые доказательства навыков в взаимодействии.
• «Executive LLM» для управления оценкой: Executive LLM использует предоставленную оценочную рубрику для управления потоком беседы и ввода целевых вызовов при необходимости (например, возражения против идеи или введение конфликта).
• Адаптивный сбор доказательств по рубрике: Отслеживая состояние беседы, Executive LLM динамически выбирает момент для ввода конкретных вызовов, чтобы к концу задачи собрать нужную информацию для оценки.
• «AI Evaluator» для скоринга по рубрике: После задачи AI Evaluator анализирует транскрипт беседы по той же рубрике, выявляя и измеряя доказательства применения навыков.
• «Карта навыков» с визуальным скорингом и качественным фидбеком: Учащиеся получают подробную карту навыков, связывающую оценки и письменный фидбек с продемонстрированными навыками и поднавыками в беседе.

Как использовать Vantage

1. Зарегистрируйтесь в Google Labs (Vantage доступен на английском, согласно странице).
2. Выберите открытый сценарий, такой как подготовка к дебатам или питчинг креативной идеи.
3. Участвуйте в симулированной беседе с ИИ-аватарами, пока система вводит вызовы, соответствующие оценочной рубрике.
4. Просмотрите результаты после беседы: вы получите карту навыков (визуальный скор плюс качественный фидбек), отражающую доказанные навыки в транскрипте.

Сценарии использования

• Практика навыков будущего в контролируемой среде: Студенты могут отрабатывать коммуникацию, сотрудничество и креативное мышление в сценариях, структурированных для оценки, но открытых.
• Оценка разрешения конфликтов через спровоцированное несогласие: Если беседе нужно несогласие для оценки реакций, Executive LLM вводит конфликт, чтобы учащиеся показали, как его преодолевают.
• Оценка развития идей в совместных настройках: В сценариях, где участники развивают идеи друг друга, адаптивная система побуждает к доработке идей вместо остановки после первого предложения.
• Поддержка преподавателей доказательствами по рубрике: Поскольку процесс управляется рубрикой и дает скоринг на основе транскрипта, преподаватели могут согласовывать уроки с областями навыков из карты навыков.
• Предоставление студентам actionable фидбека по поднавыкам: Карта навыков делает «невидимый» прогресс видимым, связывая качественный фидбек с конкретными навыками и поднавыками из взаимодействия.

FAQ

Vantage — это универсальный чатбот?

Нет. Страница описывает Vantage как эксперимент оценки, создающий симулированные беседы с ИИ-аватарами по рубрике для сбора доказательств навыков будущего.

Для кого предназначен Vantage?

Google заявляет, что он разработан для старшеклассников и студентов колледжей как песочница для практики и валидированной оценки.

Какие задачи выполняет Vantage?

Страница приводит примеры открытых сценариев, таких как подготовка к дебатам или питчинг креативной идеи.

Как Vantage формирует оценку?

После завершения беседы AI Evaluator анализирует транскрипт по оценочной рубрике, и учащийся получает карту навыков с визуальным скорингом и качественным фидбеком.

Где доступен Vantage?

Страница указывает, что Vantage доступен на Google Labs на английском для регистрации.

Альтернативы

• Рубрики с участием человека для задач на основе производительности: Преподаватели могут проводить обсуждения, дебаты или групповые занятия и оценивать по рубрикам. Это может быть более затратно по ресурсам и сложнее стандартизировать в масштабе.
• Стандартизированные тесты и оценки с фиксированными заданиями: Их проще проводить, но они могут быть слишком жесткими, чтобы улавливать паттерны взаимодействия или мыслительные процессы, описанные на странице.
• Другие ИИ-тьюторы или системы ролевых игр с рубриками, созданными преподавателем: Вместо专用ного «адаптивного движка оценки» некоторые инструменты фокусируются на практике разговоров и фидбеке, а оценка проводится инструктором или отдельным процессом рубрики.
• Платформы аналитики обучения, ориентированные на результаты курсовой работы: Они отслеживают измеримые сигналы обучения, но могут не оценивать напрямую межличностные и креативно-мыслительные поведения так, как это делает Vantage в симулированных многопартийных разговорах.