Pydantic AI Articles· Michael Pfaffenberger·· 4 天前精选AI 评分74
Pydantic AI 基准测试:code mode 让长任务成本降 58%、耗时减半
Code mode: make your agents 2x faster and 2x cheaper on long tasks
AI 导读
Pydantic AI 团队用五个小型 CRUD 应用、八款模型和 5,276 次评分运行对比 code mode 与普通工具调用,长任务上成本降 58%、实际耗时降 51%、成功率提升 16 个百分点。
推荐理由
作者用 5,276 次自建基准测试对比 code mode 与普通工具调用,给出长任务下成本、耗时与正确率的具体变化。
来源:Pydantic AI Articles · pydantic.dev