SerpApi показала 97,6% точности на SimpleQA Verified
SerpApi подключила Google Search API и Extract API к GPT-6.1 Sol с низким уровнем рассуждений и получила 97,6% точности на бенчмарке SimpleQA Verified от Google DeepMind. После исключения 40 вопросов с утечкой ответов модель верно ответила на 937 из 960. Результат совпал с оценкой Tavily и стал лучшим в сравнении с Parallel (97%), Perplexity (95%) и Exa (91%).
- Модель ответила верно на 937 из 960 вопросов после исключений
- 40 вопросов убрали из-за раскрытия ответов бенчмарка в выдаче
- Tavily Search показала те же 97,6%, Parallel Advanced — 97,0%
- На SealQA результат SerpApi составил 58,56% (65 из 111)
Читать дальше
ИИ