Агент по анализу данных занял первое место в dabstep

Мы создали агента, который мыслит как специалист по данным и занял первое место в рейтинге DABStep благодаря повторно используемому созданию инструментов. Агент использует подход, основанный на инструментах, и опирается на механизм "выбор инструмента, а затем действие". Он использует LLM для генерации инструментов на основе описания задачи, а затем использует эти инструменты для решения задачи.

Создание инструментов

Мы разработали систему, которая создает инструменты на лету. Вместо того, чтобы заранее определять набор инструментов, мы позволяем агенту создавать новые инструменты по мере необходимости. Это достигается за счет использования LLM для генерации кода инструмента на основе описания задачи.

DABStep

DABStep - это конкурс, в котором агенты соревнуются в решении задач анализа данных. Мы использовали DABStep в качестве платформы для тестирования и оценки нашего агента. Наш агент занял первое место в рейтинге DABStep, что свидетельствует об эффективности нашего подхода. Мы превзошли другие команды, использующие предварительно заданный набор инструментов, и продемонстрировали преимущества динамического создания инструментов.

Повторное использование инструментов

Ключевым аспектом нашего подхода является повторное использование инструментов. После того, как инструмент был создан, он сохраняется и может быть использован повторно в других задачах. Это позволяет агенту накапливать базу знаний и улучшать свои навыки решения задач с течением времени.

ReAct Tool-use