Tsinghua представила SRHarness и MechBench для ИИ-агентов в науке
Лаборатория Tsinghua выпустила SRHarness — открытый фреймворк для агентной символьной регрессии, и MechBench — бенчмарк, проверяющий, понимает ли ИИ механизм за формулой. SRHarness даёт 93,69% восстановления формул на LSR-Transform против 62,16% у SR-Scientist.
- SRHarness: 93,69% на LSR-Transform против 62,16% у SR-Scientist
- Без контекста: 72,97% против 39,64% у SR-Scientist и 20,72% у Codex
- Codex с GPT-5.6-sol восстанавливает механизмы лишь в 13,75% случаев
- Код открыт на GitHub, доступен в PyPI, есть онлайн-демо
Читать дальше
ИИ