Первый Open Source аналог Deep Research от OpenAI

Реализация ИИ-ресерчера, который непрерывно ищет информацию по запросу пользователя, пока система не убедится, что собрала все необходимые данные.

Для этого он использует несколько сервисов:

- SERPAPI: Для выполнения поиска в Google.

- Jina: Для получения и извлечения содержимого веб-страниц.

- OpenRouter (модель по умолчанию: anthropic/claude-3.5-haiku): Взаимодействует с LLM для генерации поисковых запросов, оценки релевантности страниц и понимания контекста.

Функции

- Итеративный цикл исследования: Система итеративно уточняет свои поисковые запросы.

- Асинхронная обработка: Поиск, парсинг веб-страниц и оценка контекста, - выполняются параллельно для повышения скорости.

- Фильтрация дубликатов: Агрегирует и дедуплицирует ссылки в каждом цикле, проверяя, что одна и та же ссылка не будет обработана дважды.

Github (https://github.com/mshumer/OpenDeepResearcher)

Источник: github.com

Комментарии: