Grandes Modelos de Linguagem como Geradores de Domínio de Planejamento

Desenvolver modelos de domínio é um dos poucos locais restantes que exigem trabalho manual humano no planejamento de IA. Portanto, para tornar o planejamento mais acessível, é desejável automatizar o processo de geração de modelos de domínio. Para isso, investigamos se grandes modelos de linguagem (LLMs) podem ser usados para gerar modelos de domínio de planejamento a partir de descrições textuais simples. Especificamente, introduzimos uma estrutura para avaliação automatizada de domínios gerados por LLMs, comparando os conjuntos de planos para instâncias de domínio. Finalmente, realizamos uma análise empírica de 7 grandes modelos de linguagem, incluindo modelos de codificação e chat em 9 diferentes domínios de planejamento, e sob três classes de descrições de domínio em linguagem natural. Nossos resultados indicam que os LLMs, particularmente aqueles com alta contagem de parâmetros, exibem um nível moderado de proficiência na geração correta de domínios de planejamento a partir de descrições em linguagem natural. Nosso código está disponível em https://github.com/IBM/NL2PDDL.