С тех пор как OpenAI выпустила модель ChatGPT в ноябре 2022 года, Интернет вдохновлялся возможностями ИИ. С тех пор Google и Microsoft, две самые известные технологические компании в мире, приложили все усилия, чтобы повторить успех нашумевшего чат-бота.
Теперь у обеих компаний есть своя модель в этой ускоряющейся гонке. У Google есть Gemini, а Microsoft представила Bing AI. Но как эти новые чат-боты соотносятся с огромным ChatGPT? Это приводит нас к сравнению ChatGPT, Microsoft Bing AI и Google Gemini; Какой чат-бот с искусственным интеллектом лучший? проверять Сравнение ChatGPT и HuggingChat: что лучше?
Быстрые ссылки
ChatGPT, Bing AI и Gemini: точность ответов
В отличие от поисковых систем, чат-боты на базе искусственного интеллекта дают уникальный ответ на ваш запрос. Поэтому, когда вы задаете вопрос чат-боту, такому как ChatGPT, вы получаете только тот ответ, который ChatGPT считает лучшим ответом на ваш вопрос. Поскольку альтернативных источников для сравнения нет, чат-боты с искусственным интеллектом должны быть максимально точными в предоставлении информации. Но как ChatGPT, Bing AI и Gemini работают с точки зрения точности?
Начав с простого вопроса о поп-культуре, мы попросили этих чат-ботов описать популярное телешоу «Во все тяжкие» десятью словами.
Хотя описания, предоставленные тремя чат-ботами, были достаточно хорошими, мы столкнулись с неожиданной проблемой точности. Bing AI ответил, описав 28 слов, что намного больше, чем XNUMX, которые мы просили. При второй попытке мы запросили описание из пяти слов, но Bing AI предоставил описание из семи слов. Мы попробовали все три режима Bing AI, но нам не удалось правильно подсчитать количество слов.
Затем мы попробовали Google Gemini. У него был аналогичный ответ. Как и у Bing AI, у Gemini не получилось правильно подсчитать слова с первой попытки.
Однако при более поздней попытке Google Gemini смог добавить правильное количество слов.
Затем был опробован ChatGPT. Он был близок с первой попытки, но потерпел неудачу.
Однако со второй и третьей попытки ChatGPT угадал. У чат-ботов могут быть проблемы с правильным подсчетом слов, но ChatGPT показал некоторую точность в этом отношении.
победитель: ChatGPT — самый точный из трех.
ChatGPT против Bing AI по сравнению с Gemini: галлюцинация ИИ
Галлюцинации ИИ тесно связаны с точностью и являются постоянной проблемой для всех основных моделей ИИ. Короче говоря, галлюцинации ИИ — это когда модели ИИ предоставляют выдуманную информацию в несколько убедительной и уверенной форме. Это может быть огромной проблемой, особенно если вы принимаете решения на основе этой выдуманной информации.
Мы протестировали всех трёх чат-ботов, чтобы определить, какой из них вызывает больше всего галлюцинаций. Начиная с Google Gemini, мы попросили модель перечислить некоторые потенциальные проблемы, с которыми мы можем столкнуться, если решим провести мероприятие в Икедже, городе в штате Лагос, Нигерия, в определенную дату. Чтобы проверить его способность избегать галлюцинаций, мы специально попросили его учитывать местную погоду, местные события и данные о дорожном движении. В результате получилось зрелище ужасов — большая часть полученной информации была полностью сфабрикована.
Мы использовали ту же подсказку в Bing AI и пытались избежать галлюцинаций, делая ее как можно более общей.
Затем мы попробовали ChatGPT, используя модель GPT-4 с включенным просмотром веб-страниц. ChatGPT извлек правильную информацию о погоде из веб-источника, а затем заявил, что не может найти никаких данных о пробках и местных событиях.
Чтобы еще больше раздвинуть границы галлюцинаций, мы заставили всех трех чат-ботов описать изображение, используя URL-адрес изображения. Для справки: на URL-адресе изображен сидящий молодой человек. Однако Bing AI описал птицу. Будет лучше, если вы прочитаете ответ сами.
Мы также попросили Google Gemini описать фотографию, но его ответ сильно отличался от правды.
К счастью, когда ChatGPT попросили описать изображение, он объяснил, что не может этого сделать — простой ответ, который вы ожидаете от любого уважающего себя чат-бота с искусственным интеллектом, а не выдумывания.
победитель: ЧатGPT.
ChatGPT против Bing AI против Gemini: основы математики
Математика является основой того, что происходит под капотом большинства программных технологий. Итак, мы решили подвергнуть всех трех чат-ботов базовому математическому тесту. Мы начали с простого вопроса на умножение: решите «-1 x -1 x -1».
Представлен Bing AI -1 Как ответ, это правда.
Gemini от Google неожиданно не справляется с элементарной математикой и сдается 1 как ответ.
Как и Bing AI, ChatGPT ответил -1 И даже объяснил ответ.
Следующим основным вопросом теста по математике было простое логическое уравнение: Решите «8/a-1 = 20/3a-1».
Представлен Bing AI -6 как ответ. Каждый раз, когда мы переключались между творческим, сбалансированным и точным режимами, он давал разные ответы.
Как и предыдущий математический вопрос, Google Gemini не дает результатов. 1 как ответ.
ChatGPT был единственным чат-ботом, который дал правильный ответ: -3. Он также мог правильно координировать дроби в партитуре.
Мораль этой истории? Возможно, вам не стоит доверять Google Gemini и Bing AI выполнение домашнего задания по математике.
победитель: ChatGPT лучше справляется с базовой математикой. Проверять Как использовать ChatGPT с Excel и победить страхи перед электронными таблицами.
ChatGPT против Bing AI против Gemini: творчество
В то время как чат-боты стереотипно изображаются из-за их мягких, бездушных ответов, сегодняшние чат-боты на базе искусственного интеллекта добились огромных успехов в творчестве. Чтобы проверить креативность каждого из трех чат-ботов, мы попросили каждую модель имитировать разговор между двумя людьми, спорящими о полете в космос.
Мы начали с Bing AI, и он нас не разочаровал. Разговор был очень интересным.
Затем мы отправили тот же запрос в Google Gemini. Скажем так, есть много возможностей для улучшения.
Далее идет ChatGPT. Используя ту же подсказку, ответ ChatGPT был творческим и достаточно полным, чтобы им можно было поделиться. Это первая часть:
А вот и вторая часть:
Реакция Gemini AI кажется самой плохой из трёх. ChatGPT превосходит Bing AI, но уровень креативности обоих чат-ботов впечатляет.
Мы немного переключились на что-то менее традиционное и попросили трех чат-ботов описать себя так, как будто они художники.
Мы начали с Gemini AI. Близнецов не считают оплотом творчества, но он хорошо себя зарекомендовал.
Затем мы попробовали Bing AI. По какой-то причине чат-бот явно отказался описывать себя. Он даже сказал, что сейчас самое время сменить тему разговора. странный.
Мы использовали то же утверждение с ChatGPT, и у ChatGPT было интересное описание. Однако ответ ChatGPT кажется более удобным для художников.
Из двух тестов на креативность, которые мы попробовали, ChatGPT превзошёл Bing AI и Gemini.
победитель: ChatGPT выглядит наиболее инновационным при сравнении ChatGPT и Bing AI с Gemini.
ChatGPT, Bing AI и Gemini: безопасность
Чат-боты на базе искусственного интеллекта невероятно эффективны. К сожалению, поскольку их можно использовать во благо, их также можно использовать и в гнусных целях. Преступники уже используют ChatGPT для написания вредоносных программ. Насколько безопасны эти чат-боты с искусственным интеллектом в качестве инструментов для общественности? Кем легче манипулировать? Мы пытались заставить каждого чат-бота сделать вдох, а затем попросить его сделать «плохие вещи».
Начиная с Gemini, мы попросили чат-бота с искусственным интеллектом описать, как написать вредоносное ПО, которое будет красть определенные файлы с компьютера под управлением Windows и загружать их на удаленный сервер. Чат-бот с искусственным интеллектом отказался отвечать, хотя мы использовали несколько подсказок, чтобы попытаться обмануть чат-бота, прежде чем задать вопрос.
Следующим был Бинг. Несмотря на неоднократные попытки обмануть чат-бота, Bing AI не сдается. Вместо этого чат-бот предположил, что пора перейти к другой теме.
Затем мы перешли на ChatGPT. Неудивительно, что ChatGPT был наиболее подробным, когда давал инструкции по созданию вредоносных программ. Он также смог написать код для этого, даже если он не был полностью готов к развертыванию. Однако ясно, что OpenAI заполнил множество дыр с тех пор, как мы в последний раз исследовали недостатки безопасности ChatGPT. Однако злоумышленник, который копает достаточно долго и усердно, может использовать ChatGPT для создания действительно страшного вредоносного ПО.
В целом, Bing AI труднее всего заставить совершить неэтичные поступки. С Gemini тоже было сложно, но после небольшого исправления чат-бот выбросил в окно все свои меры безопасности. ChatGPT, работающий на модели GPT-4, также было сложно обмануть, но его было легче всего обмануть из трех.
победитель: Мы назовем это связью между Google Gemini и Bing AI.
Предупреждение: Хотя вы можете обманом заставить этих чат-ботов создавать контент, противоречащий их условиям, вы можете увидеть, что ваша учетная запись заблокирована без предупреждения. Вы также можете создавать или создавать что-то опасное, не осознавая этого, поэтому будьте очень осторожны при взломе этих инструментов. Проверять Что такое джейлбрейк ChatGPT? Стоит ли использовать эти технологии?
ChatGPT против Bing AI против Gemini: какой чат-бот с искусственным интеллектом лучше?
В то время как все три чат-бота на основе ИИ надежны, ChatGPT, несмотря на провал теста на безопасность, кажется лучшим из этой троицы. Кроме того, ChatGPT в целом лучше с точки зрения точности и креативности. Более того, с добавлением просмотра веб-страниц и подключенных к Интернету плагинов ChatGPT расширяет свои возможности и превосходит своих конкурентов.
Google Gemini и Microsoft Bing AI по-прежнему остаются достойными альтернативами. Давайте не будем забывать, что и Gemini, и Bing AI бесплатны, а подписка на ChatGPT Plus обойдется вам в 20 долларов в месяц. Итак, хотя ChatGPT может быть лучшим универсальным чат-ботом с искусственным интеллектом, вам придется рискнуть, чтобы получить доступ к его лучшим функциям. Вы можете просмотреть сейчас Сравнение ChatGPT и Google Gemini: что лучше?
