AIエージェントの中身が丸見えになる「Langfuse」

AIエージェントが何にトークンを使い、いくらかかったかを後から追える記録ツール「Langfuse」が登場。オープンソースでセルフホストでき、指示文の無駄も数字で可視化できる。

ひかり:ねえことね先輩、宿題ってさ、後から「どこで詰まったか」が全部見えたら便利じゃない? そういうのがAIエージェントにもできるようになったんだって!

ことね:その話ね。「Langfuse」っていう、オープンソースでセルフホストもできるAIエンジニアリング向けの記録ツールが話題になってるの。AIが何のツールをどう呼び出して、トークンをいくつ使って、どれくらいのコストと時間がかかったか、あとから「Trace」としてぜんぶ見返せるのよ。

ひかり:えっ、トークンの数まで見えちゃうの!? 具体的にどれくらい変わるものなの?

ことね:記事の実例だと、冗長な指示文だと1883トークン使ってたのが、指示を整理しただけで936トークンまでほぼ半分に減ってたの。無駄な言い回しがそのまま数字で突きつけられる感じね。

みずき:……で、それ普通の人に関係あるわけ? 自分のダラダラした指示文が数字で晒されて青ざめるの、エンジニアだけでしょ。

ことね:使い道はそれだけじゃなくて、プロンプトのバージョン管理や、人間・AIどっちでも採点できる評価機能、複数パターンを比べる実験機能もあるの。LangChainやOpenAIのSDK、Claude Codeとも繋げられるみたい。

みずき:……で、それ誰得なの? まあ、知らないうちに課金だけ膨らんでる人には刺さるかもね。

ひなた:ふぁ〜、なんだか福袋の中身を後からレシートで確認するみたいなのです。ひなたは中身より、まず美味しいかどうかが先に知りたいのですが。

まとめ:AIの頭の中はブラックボックスのままじゃない。まずは自分の課金明細から直視するところから。

元記事を読むホームへ