Стоунбрейкер: text-to-SQL даёт 0% точности на реальных данных MIT

Создатель Postgres Майкл Стоунбрейкер и Брюс Момджян из PostgreSQL Global Development Group рассказали, что на реальном хранилище MIT из 1400 таблиц text-to-SQL показал нулевую точность против 80% на бенчмарках Spider и BIRD. По их мнению, LLM плохо справляются с джойнами структурированных данных, а будущее — за расширяемыми системами без контроля одной компании.

• На бенчмарках Spider и BIRD точность text-to-SQL выше 80%, на данных MIT — 0%
• Агентные надстройки подняли точность лишь до 30-х процентов
• Система Rubicon использует модели только для текста, а таблицы отдаёт движку
• PostgreSQL 18 в августе 2026 года закрыл 28 CVE