Тесты для ИИ на чтение страницы в интернете

В предыдущем посте мы выяснили, что просто так прочитать страницу в интернете могут далеко не все модели ИИ.

Не смогли прочитать страницу в интернете:

1. Perplexity

2. Qwen (сначала не смог, потом что-то смог, но врет и юлит, надо его дальше тестировать)

3. Deepseek

Отлично прочитал GigaChat.

Точно так же прочитал Grok и ChatGPT.

Спасибо Андрею Степанову, за дополнительные интереснейшие тесты.

Мы совместно выяснили, что Qwen - крайне подозрительон себя ведет.

Сначала он прочитал неправильно и выдал неверную информацию. Потом стал еще врать, что еще там что-то прочитал.

А потом (может проиндексировалась яндексом запись?) он вдруг прочитал страницу.

Но если страницу изменить - Qwen этого не видит.

То есть Qwen - лютый врун и махинатор.

Но, когда я тестировал ChatGPT, то обнаружил очень серьёзную проблему - он читает простейшие страницы.

А вот если страница сложная (да тот же itaka ru) он даже не все телефоны на странице может прочитать.

Я долго пытался его заставить это сделать.

После долгих экспериментов я пришёл к выводу, что:

1. Читать надо не текст, а картинку, как её видит человек. Только так. Только картинку, как её видит человек. Потому что сейчас ИИ читают именно тексты, и они не понимают куски программ и прочее.

2. А потом распознавание запускать на эту картинку.

Но таких ИИ я пока не знаю.

Общий вывод:

По-настоящему ИИ не умеют читать интернет страницы. Могут только кое-что прочитать на простых страницах. А далее - как повезет.

Но не думайте, что ИИ для вас что-то реально проанализирует в интернете по ряду сайтов.

Это пока сейчас невозможно.

ИИ тут еще очень много есть куда расти.

Источник: vk.com

Комментарии: