Вопросы к показателям WHOOP и анализам крови за два года через агента на Claude
Автор заменил агента Genie в Databricks небольшим агентом на Claude и сравнил их на 30 вопросах о своих данных WHOOP и анализах крови. После исправления ошибок в данных Sonnet отвечал верно в 90% случаев, Genie в 67%.
Что сделали
Таблицы в Databricks автор оставил прежними. Они собраны из выгрузки WHOOP и PDF с результатами анализов из почты (их разобрал Agent Bricks). Агента Genie он заменил небольшим агентом на Claude. Тот пишет SQL, запускает его через инструмент только для чтения, читает строки и при необходимости делает новый запрос. Ответы на 30 вопросов оценивал судья на Claude Opus. Он сверял их с эталонным SQL, проверенным вручную.
Что получилось
Все агенты провалили вопросы, где сказывались две ошибки с датами в эталонной таблице автора. После исправления данных доля верных ответов у Sonnet выросла с 47% до 90%, у Genie с 47% до 67%.
На что обратить внимание
Выборка маленькая, по одному прогону на конфигурацию и 30 вопросов. Ответы Claude оценивал тоже Claude. Один вопрос к Sonnet стоил около $0,017, к Opus около $0,062.
Пояснение
WHOOP это фитнес-браслет, он круглосуточно пишет пульс, вариабельность пульса (HRV), сон и нагрузку. Databricks это облачная платформа для данных, Genie в ней отвечает на вопросы к таблицам обычным языком, а Agent Bricks помогает собирать агентов, например для разбора документов.
Кому пригодится
Тем, кто носит трекер здоровья, сдаёт анализы и хочет задавать вопросы к своим показателям обычным языком.
Попробуйте сами с Claude
Загружаю мою [выгрузка WHOOP или другого трекера] и PDF с анализами крови за [период]. Вынеси показатели анализов в таблицу, сопоставь их по датам с моими биометрическими данными и ответь на вопрос [вопрос, например как менялись мой HRV и сон перед двумя последними анализами]. Покажи цифры за каждым ответом и отметь всё, в чём есть неуверенность, и что это не медицинская рекомендация. В конце предложи 3 вопроса, которые стоит задать моему врачу.
Нужна помощь с запуском? Вступайте в сообщество AI Pack ↗
Источник: github.com ·