All Posts
News bits
Vercelが"Bash is all you need"仮説を検証
Vercelが"Bash is all you need"仮説を検証
BraintrustとVercelが、AIエージェントにとってBashとファイルシステムが最適な抽象化であるという仮説を検証した結果を公開した。GitHubのIssueやPRのデータセットを用いた比較実験において、SQLエージェントが精度100%を達成した一方、Bashエージェントは52.7%にとどまる結果となった。
Bashエージェントは高度なシェルコマンドを生成するものの、パフォーマンスのボトルネックやスキーマコンテキストの欠如が課題として浮き彫りになった。一方で、SQLでクエリを実行しBashで結果を検証するハイブリッドアプローチでは、コストは増加するものの高い信頼性を実現できることが示された。構造化データにはSQLが、探索や検証にはBashが適していると結論付けている。
著者について
Hi there. I'm hrdtbs, a frontend expert and technical consultant. I started my career in the creative industry over 13 years ago, learning on the job as a 3DCG modeler and game engineer in the indie scene.
In 2015 I began working as a freelance web designer and engineer. I handled everything from design and development to operation and advertising, delivering comprehensive solutions for various clients.
In 2016 I joined Wemotion as CTO, where I built the engineering team from the ground up and led the development of core web and mobile applications for three years.
In 2019 I joined matsuri technologies as a Frontend Expert, and in 2020 I also began serving as a technical manager supporting streamers and content creators.
I'm so grateful to be working in this field, doing something that brings me so much joy. Thanks for stopping by.