Яндекс сообщил об успешной сдаче ЕГЭ языковой моделью YandexGPT 2. Нейросеть смогла набрать 55 баллов при прохождении заданий в рамках ЕГЭ по литературе. Нижний порог — 40 баллов.
В рамках экзамена оценивались знания, стиль письма, эрудиция и творческие способности. Это первый в России случай, когда ИИ сдаёт экзамен с творческими заданиями. Сложность эксперимента в том, что в базе данных YandexGPT 2 не были записаны ответы на вопросы экзамена. Для эксперимента использовались варианты ЕГЭ из тренировочных экзаменов 2021–2023 годов.
Стандартным тестом для оценки эрудиции языковых моделей в мире считается MMLU: он включает вопросы разной степени сложности из 57 областей знания. Так можно объективно сравнить несколько нейросетей, но нельзя оценить качество их ответов на открытые или творческие вопросы. Именно поэтому мы предложили YandexGPT 2 сдать ЕГЭ по литературе.
Алексей Гусаков Технический директор «Поиска» Яндекса
Smi24.net — ежеминутные новости с ежедневным архивом. Только у нас — все главные новости дня без политической цензуры. "123 Новости" — абсолютно все точки зрения, трезвая аналитика, цивилизованные споры и обсуждения без взаимных обвинений и оскорблений. Помните, что не у всех точка зрения совпадает с Вашей. Уважайте мнение других, даже если Вы отстаиваете свой взгляд и свою позицию. Smi24.net — облегчённая версия старейшего обозревателя новостей 123ru.net. Мы не навязываем Вам своё видение, мы даём Вам срез событий дня без цензуры и без купюр. Новости, какие они есть —онлайн с поминутным архивом по всем городам и регионам России, Украины, Белоруссии и Абхазии. Smi24.net — живые новости в живом эфире! Быстрый поиск от Smi24.net — это не только возможность первым узнать, но и преимущество сообщить срочные новости мгновенно на любом языке мира и быть услышанным тут же. В любую минуту Вы можете добавить свою новость - здесь.
Работник СЛД «Чита» филиала «Забайкальский» ООО «ЛокоТех-Сервис» принял участие в экологической акции по очистке берега и дна озера Кенон
Яндекс, А.С. Пушкин, Святой Ленин ведут следствие. Настоящая сенсация!
Погружение в современное российское искусство – стартовал 3-ий фестиваль «Территория. Красноярск»
Бурятский Театр кукол Ульгэр в Улан-Улан-Удэ показал в Этнографическом музее народов Забайкалья перед детьми и родителями в семейный праздник сказку Колобок - Новости и Культура, Дети и Россия
