Чат-бот OpenAI, ChatGPT, не справляется с ответами

Прошло уже почти 6 месяцев, с тех пор как ChatGPT от OpenAI появился. Фактически, компания недавно запустила ChatGPT 4. Эта технология подняла мир на новый уровень.

ChatGPT - это языковая модель, которая работает на основе искусственного интеллекта и была обучена выполнять множество задач, включая перевод языков, суммирование информации и ответ на вопросы. Исключительные возможности модели привлекли большое внимание и вызвали у многих людей вопросы относительно их трудоустройства.

Модель обработки языка GPT-4 может использоваться для анализа огромных объемов данных, после чего на основе результатов анализа она может генерировать контент. Кроме того, новая технология способна анализировать большие объемы текста, чтобы предоставить потребителям информацию о конкретной точке данных.

Нет сомнения, что технологии останутся надолго. Конечно, они помогают пользователям во многих отношениях. Во множестве случаев они продемонстрировали свою способность выполнять все, начиная от написания сценариев до решения самых сложных экзаменационных заданий. Нет ничего, что ChatGPT не может сделать. Однако, есть некоторые вещи, которые для ChatGPT тоже сложнее.

1. Искусственный интеллект ChatGPT, работающий при помощи искусственного интеллекта, потерпел поражение, когда не смог пройти заветный совместный вступительный экзамен (JEE) в Индии. Совместный вступительный экзамен известен своей сложностью и каждый год привлекает тысячи студентов, которые хотят поступить в престижные инженерные вузы Индии. Это один из самых сложных количественных экзаменов, включающих сложные диаграммы и числа.

Студенты, которые заинтересованы в поступлении в престижные учебные заведения, такие как ИИТы и НИТы, должны сначала пройти совместный вступительный экзамен. Согласно отчетам, ChatGPT плохо справился с экзаменом JEE Advanced.

Результаты испытания ChatGPT были менее удовлетворительными, поскольку он смог решить только 11 из общего количества вопросов в работе.

2. В прошлом ChatGPT успешно прошел множество других тестов, которые являются как известными, так и сложными. Впечатляет факт, что ChatGPT попытался и успешно ответил на все 200 вопросов национального экзамена по праву на поступление в медицинские колледжи (NEET), который требует от кандидатов ответить на 180 вопросов из общего числа в 200.

Несмотря на это, ChatGPT попытался ответить на все 200 вопросов, и результат его работы составил 359 из 800. В частности, ChatGPT проявил отличные навыки в биологическом компоненте экзамена NEET, демонстрируя более высокую точность в своих ответах на вопросы, заданные в этом разделе. Результаты ChatGPT в экзамене NEET говорят о его потенциале для успеха в других областях, несмотря на то, что он не смог пройти экзамен JEE Advanced.

Поражение, которое ChatGPT испытал в тесте JEE Advanced, демонстрирует ограничения, которые присутствуют даже в самых передовых моделях искусственного интеллекта. Несмотря на то, что искусственный интеллект имеет потенциал потрясти множество различных отраслей, у него все равно есть долгий путь, прежде чем он сможет конкурировать с человеческим интеллектом в сложных задачах.

Чатбот ChatGPT от OpenAI в очередной раз не справился с конкурсным экзаменом.

3. ChatGPT сдал экзамен Всероссийской общественной службы (ВОС) по просьбе журнала Analytics India Magazine (AIM). Экзамен ВОС считается одним из самых трудных конкурсных экзаменов в мире. Каждый год более 10 лакх (миллионов) аспирантов сдают экзамен ВОС, но только 5% из них могут пройти его.

AIM предоставил ChatGPT 100 вопросов из предварительного экзамена UPSC 2022.

Чатбот плохо справился с экзаменом UPSC Prelims 2022, набрав всего лишь 54 из 100 баллов на Вопросной Бумаге 1 (Группа A), в то время как требуемый балл составлял 87.54. Это свидетельствует о том, что ChatGPT не прошел тест UPSC.

Вопросы основаны на темах индийской общей науки, истории, географии, экономики, экологии и актуальных событий. Чат-бот справлялся хорошо с вопросами о местоположениях и экономике, но крахнул, когда ему задали вопросы о исторических событиях, произошедших до 2021 года.

Факт того, что набор данных ChatGPT ограничен только 2021 годом, вероятно, является решающим фактором в неспособности интеллектуального чат-бота правильно ответить на все вопросы экзамена.

4. Кроме того, результаты экзамена CLAT для ChatGPT также были выше среднего. Во время экзамена CLAT UG, этот инструмент искусственного интеллекта смог точно решить только 50,83 процента вопросов. ChatGPT не справился с вопросами, связанными с логикой и количественными методами. Однако он показал отличные результаты в категориях английского языка и современной политической обстановки. С вопросами, основанными на концепциях, этот инструмент имел большие проблемы.

Выпущенный в ноябре 2022 года, ChatGPT пользуется большим успехом в Соединенных Штатах. Эта технология искусственного интеллекта успешно проходит тест Совета по медицинской лицензии Соединенных Штатов (USMLE) и различные экзамены MBA в США. Кроме того, она успешно справляется с собеседованиями о программировании в Google для инженеров 3-го уровня.

Ветеринарные специалисты были взбудоражены недавно, когда ChatGPT смог правильно поставить диагноз состояния собаки и спасти жизнь животного.

Многие страны, однако, сейчас имеют противоположные точки зрения на ChatGPT и готовы принять решительные меры против новой инновации. Недавно технология была запрещена в двух крупных странах, включая Германию и Италию. Эти государства утверждают, что ChatGPT от ОпенЭЙАЙ лишен необходимых механизмов для предотвращения доступа несовершеннолетних к оскорбительному материалу, таких как система проверки возраста.

Ульрих Кельбер, комиссар по защите данных Германии, предупредил, что Chat-GPT может быть подвержен потенциальному запрету в Германии из-за опасений относительно безопасности данных пользователей, аналогично тому, что произошло в Италии.

Ну, посмотрим, как будут вести себя технологии, основанные на искусственном интеллекте, в будущем.

Спасибо за чтение! Следите за новыми такими информативными статьями!