Специалисты Яндекса сравнили качество ответов YandexGPT 2 и GPT 3.5.
По данным компании, их нейросеть в 63% случаев отвечала на вопросы лучше конкурента.
Сравнения нейросетей нужны не для того, чтобы получить абстрактные цифры в бенчмарке, а для решения задач продукта, создания новых функций и развития бизнеса. Именно поэтому значительную часть корзины для сравнения составили настоящие запросы из наших сервисов.
— Алексей Гусаков, технический директор Яндекс Поиска
Исследование проводилось методом сравнения Side by Side (SBS). То есть обоим нейросетям задавались одинаковые вопросы, а AI-тренеры выбирали лучшие ответы, не зная, какая именно модель их генерировала.
Запросы взяли из типичных обращений пользователей сервисов Яндекса к YandexGPT 2. Она учитывает реальные потребности людей и охватывает множество тем.
(17 голосов, общий рейтинг: 4.53 из 5)
Артём Баусов
@DralkerГлавный по новостям, кликбейту и опечаткам. Люблю электротехнику и занимаюсь огненной магией. По всем вопросам пишите в Telegram: @TemaBausov
23 комментариев
Форум →комманду ««Яндекс» включи музыку» chatgpt думаю проиграет…
YandexGPT 2 – это жутко зацензурированная хрень. Ни на одну серьезную тему не может говорить.
@moscvitch, 100%
@moscvitch, яндекс это не тоже самое что ChatGPT? Только обученный на разных данных
@Serj, ChatGPT не отказывается говорить на актуальные общественно-политические темы.
@moscvitch, Зачем говорить с нейросетью на актуальные общественно-политические темы? Это верх идиотизма. Глупее только говорить о таких вещах в комментариях.
@moscvitch, с чатом решил поговорить? совсем все плохо?
@moscvitch, я как то попросил ее сказать когда американцы сбросили ядерные бомбы на Японию и она сказала что ответить на вопрос она не может по цензурным причинам. Так же по интеллекту они находятся на поверено разных уровнях развития. Яндексу нужно еще года 3 чтобы нагнать gpt3.5
Там одна цензура, как бы смысла нет использовать. Даже какие-то простые вещи боиться ответить. У нас даже ИИ запугали)))
@Chelovek Chelovekov, если в баклажене все вопросы про сво и политику, то мне вас жаль
Может быть, с такой цензурой тем – диву даюсь что она вообще хоть что-то может.
О каких популярных темах речь? Погода и шопинг?
Заявить можно что угодно и не надо никаких доказательств. Если что, всегда можно принять закон, о штрафе за обратно заявление
Выходит раньше Английский ChatGPT знал русский лучше наших нейросетей? Мне кажется о таких вещах надо молчать а не хвастать.
@oomten, ChatGPT обучался на текстовых данных 50 языков.
А Вы знаете прикол. Opera Aria знает о вхождении ОДНО в состав России, корректно ответит про воссоединение с Крымом, а ЯндексГПТ жует сопли и ничего ответить не может.
Честно говоря, YandexGPT реально хорошо работает с русским. Но про цензуру пишут не зря, реально какие-то даже совсем абсурдные вещи зацензурированы
@Lucas, так не ищи абсурд, а спрашивай по делу
У Яндекса настолько кривой перевод на португальский и испанские языки ,что тут он даже близко не конкурент чату gpt
@DEPEKTOP, беда
программировать может так же как чатГПТ?
@eklektikos, неа, максимум какую-нибудь формулу подсказать или словами описать.
Тем временем – Алиса не умеет говорить о пробках в других городах😅
Нашли орфографическую ошибку в новости?
Выделите ее мышью и нажмите Ctrl+Enter.Как исправить ошибку NAS после обновления до macOS Sierra?
Что делать, если разговорный динамик iPhone стал звучать тише
Как отключить всплывающее меню скриншотов в macOS Mojave
Что делать, если WhatsApp на iPhone занимает много места
Как на iPhone установить 4-значный пароль вместо 6-значного
Как подарить платное приложение кому-либо?
Как быстро сбросить настройки Bluetooth на Mac
Почему AirPods не зачитывают входящие уведомления