Специалисты Яндекса сравнили качество ответов YandexGPT 2 и GPT 3.5.
По данным компании, их нейросеть в 63% случаев отвечала на вопросы лучше конкурента.
Сравнения нейросетей нужны не для того, чтобы получить абстрактные цифры в бенчмарке, а для решения задач продукта, создания новых функций и развития бизнеса. Именно поэтому значительную часть корзины для сравнения составили настоящие запросы из наших сервисов.
— Алексей Гусаков, технический директор Яндекс Поиска
Исследование проводилось методом сравнения Side by Side (SBS). То есть обоим нейросетям задавались одинаковые вопросы, а AI-тренеры выбирали лучшие ответы, не зная, какая именно модель их генерировала.
Запросы взяли из типичных обращений пользователей сервисов Яндекса к YandexGPT 2. Она учитывает реальные потребности людей и охватывает множество тем.
(17 голосов, общий рейтинг: 4.53 из 5)
Артём Баусов
@DralkerГлавный по новостям, кликбейту и опечаткам. Люблю электротехнику и занимаюсь огненной магией. По всем вопросам пишите в Telegram: @TemaBausov
23 комментариев
Форум →комманду ««Яндекс» включи музыку» chatgpt думаю проиграет…
YandexGPT 2 – это жутко зацензурированная хрень. Ни на одну серьезную тему не может говорить.
@moscvitch, 100%
@moscvitch, яндекс это не тоже самое что ChatGPT? Только обученный на разных данных
@Serj, ChatGPT не отказывается говорить на актуальные общественно-политические темы.
@moscvitch, Зачем говорить с нейросетью на актуальные общественно-политические темы? Это верх идиотизма. Глупее только говорить о таких вещах в комментариях.
@moscvitch, с чатом решил поговорить? совсем все плохо?
@moscvitch, я как то попросил ее сказать когда американцы сбросили ядерные бомбы на Японию и она сказала что ответить на вопрос она не может по цензурным причинам. Так же по интеллекту они находятся на поверено разных уровнях развития. Яндексу нужно еще года 3 чтобы нагнать gpt3.5
Там одна цензура, как бы смысла нет использовать. Даже какие-то простые вещи боиться ответить. У нас даже ИИ запугали)))
@Chelovek Chelovekov, если в баклажене все вопросы про сво и политику, то мне вас жаль
Может быть, с такой цензурой тем – диву даюсь что она вообще хоть что-то может.
О каких популярных темах речь? Погода и шопинг?
Заявить можно что угодно и не надо никаких доказательств. Если что, всегда можно принять закон, о штрафе за обратно заявление
Выходит раньше Английский ChatGPT знал русский лучше наших нейросетей? Мне кажется о таких вещах надо молчать а не хвастать.
@oomten, ChatGPT обучался на текстовых данных 50 языков.
А Вы знаете прикол. Opera Aria знает о вхождении ОДНО в состав России, корректно ответит про воссоединение с Крымом, а ЯндексГПТ жует сопли и ничего ответить не может.
Честно говоря, YandexGPT реально хорошо работает с русским. Но про цензуру пишут не зря, реально какие-то даже совсем абсурдные вещи зацензурированы
@Lucas, так не ищи абсурд, а спрашивай по делу
У Яндекса настолько кривой перевод на португальский и испанские языки ,что тут он даже близко не конкурент чату gpt
@DEPEKTOP, беда
программировать может так же как чатГПТ?
@eklektikos, неа, максимум какую-нибудь формулу подсказать или словами описать.
Тем временем – Алиса не умеет говорить о пробках в других городах😅
Нашли орфографическую ошибку в новости?
Выделите ее мышью и нажмите Ctrl+Enter.Как узнать, какие места посещает владелец iPhone?
Как в macOS открывать страницы из Safari в другом браузере
Как сделать снимок экрана на Apple Watch
Можно ли избежать проблем при ремонте Touch ID?
Как проверить работоспособность гарнитуры iPhone
Как на iPhone включить ложный телефонный вызов
Как снизить минимальную яркость экрана на iPhone
Как включить уведомления о COVID-19 в iOS 13.7