Специалисты Яндекса сравнили качество ответов YandexGPT 2 и GPT 3.5.
По данным компании, их нейросеть в 63% случаев отвечала на вопросы лучше конкурента.
Сравнения нейросетей нужны не для того, чтобы получить абстрактные цифры в бенчмарке, а для решения задач продукта, создания новых функций и развития бизнеса. Именно поэтому значительную часть корзины для сравнения составили настоящие запросы из наших сервисов.
— Алексей Гусаков, технический директор Яндекс Поиска
Исследование проводилось методом сравнения Side by Side (SBS). То есть обоим нейросетям задавались одинаковые вопросы, а AI-тренеры выбирали лучшие ответы, не зная, какая именно модель их генерировала.
Запросы взяли из типичных обращений пользователей сервисов Яндекса к YandexGPT 2. Она учитывает реальные потребности людей и охватывает множество тем.
Войди и оставь комментарий
Или войди с помощью
комманду ««Яндекс» включи музыку» chatgpt думаю проиграет…
YandexGPT 2 – это жутко зацензурированная хрень. Ни на одну серьезную тему не может говорить.
@moscvitch, 100%
@moscvitch, яндекс это не тоже самое что ChatGPT? Только обученный на разных данных
@Serj, ChatGPT не отказывается говорить на актуальные общественно-политические темы.
@moscvitch, Зачем говорить с нейросетью на актуальные общественно-политические темы? Это верх идиотизма. Глупее только говорить о таких вещах в комментариях.
@moscvitch, с чатом решил поговорить? совсем все плохо?
@moscvitch, я как то попросил ее сказать когда американцы сбросили ядерные бомбы на Японию и она сказала что ответить на вопрос она не может по цензурным причинам. Так же по интеллекту они находятся на поверено разных уровнях развития. Яндексу нужно еще года 3 чтобы нагнать gpt3.5
Там одна цензура, как бы смысла нет использовать. Даже какие-то простые вещи боиться ответить. У нас даже ИИ запугали)))
@Chelovek Chelovekov, если в баклажене все вопросы про сво и политику, то мне вас жаль
Может быть, с такой цензурой тем – диву даюсь что она вообще хоть что-то может.
О каких популярных темах речь? Погода и шопинг?
Заявить можно что угодно и не надо никаких доказательств. Если что, всегда можно принять закон, о штрафе за обратно заявление
Выходит раньше Английский ChatGPT знал русский лучше наших нейросетей? Мне кажется о таких вещах надо молчать а не хвастать.
@oomten, ChatGPT обучался на текстовых данных 50 языков.
А Вы знаете прикол. Opera Aria знает о вхождении ОДНО в состав России, корректно ответит про воссоединение с Крымом, а ЯндексГПТ жует сопли и ничего ответить не может.
Рекомендуем
Нашли орфографическую ошибку в новости?
Выделите ее мышью и нажмите Ctrl+Enter.