記事のサマリー(TL;DR)
- DevRevはサービス・業務チーム向けに「Computer」と「Operator」を開発し、GPT-6 AstraおよびGPT-6.1 SolなどのOpenAIモデルと、自社のハーネス(企業知識の接続とエージェントの行動制御の仕組み)を組み合わせている
- DevRevの独自ベンチマーク「Enterprise-Bench」で、データが複数バージョンあり、情報が異なるシステムに分散し、アクセス権限が役割によって異なるという条件下でのモデル性能を評価しており、GPT-6.1 Solはこの評価で良好な成績を示しているという
- DevRev社内のエンジニアチームは全員がコーディングツール「Codex」を使用しており、以前使用していたCursorのライセンスは廃止済み。営業チームはGPT-6 Astraを使って国際カンファレンスのブース向けデモを作成している
詳細
Computer と Operator について
DevRev(opens in a new window)は、サービスおよび業務チームが顧客や従業員からの難易度の高い依頼にも対応し、完了まで導けるよう「Computer」と「Operator」を開発しました。これらはライブデータを横断して推論するよう設計されており、実行するアクションは取り消し可能(reversible)で、回答には情報源が明示されるとDevRevの最高技術責任者(CTO)であるAhmed Bashir氏は説明しています。
DevRevは、GPT-6 AstraやGPT-6.1 SolなどのOpenAIモデルと、企業知識を接続しエージェントが取れる行動をチームが制御できるようにする自社のハーネスを組み合わせています。DevRevは、OpenAIのモデルが顧客や従業員への対応に必要な速度とコストを保ちながら、推論力と信頼性を提供すると捉えています。
「適切な推論能力を持ちながら、信頼でき、高度に整合性が取れていること、そして何より、レイテンシーの観点で機能することが重要です」とBashir氏は述べています。
企業固有のコンテキストでAIを機能させる
OpenAIのモデルは、ComputerとOperatorの両方で推論、計画立案、ツール選択を担っています。DevRevの「Agent Studio」では、ユーザーが会話を通じてツールにどう動作してほしいかを記述でき、挙動の一部を固定ルールとして定義することもできます。
DevRevは、企業のコンテキストを提供し、権限を強制し、アクションを制御するソフトウェアとともにモデルをテストしています。同社のベンチマーク「Enterprise-Bench」は、データに複数バージョンが存在し、情報が異なるシステムに分散し、アクセス権限が個人の役割に依存する状況で、モデルがどの程度うまく機能するかを評価します。
Bashir氏によれば、GPT-6.1 Solはこれらの評価で良好な成績を収めているといいます。顧客や従業員がAIエージェントとやり取りする際、モデルは依頼内容の微妙なニュアンスを理解し、ビジネスが継続できるコストの範囲で素早く応答する必要があります。「このモデルは、そのバランスを完璧にとっていると思います」とBashir氏は述べています。
Codexを使ったソフトウェア開発と営業デモの作成
DevRev社内では、エンジニアたちが開発方法について明確な選択をしています。「私たちのチーム全員がCodexを使っています」とBashir氏は話します。この採用は、エンジニアが複数のコーディングツールを試した結果、自然に広がったものです。インタビュー時点で、DevRevは完全にCodexへ移行し、Cursorのライセンスを廃止していました。
Bashir氏にとって、これは開発者が重視するものを反映しています。「開発者は単純に最良のツールを求めているのであり、ごまかすことはできません」。彼のチームのエンジニアたちは、Codexを使い続けたいという点で意見が一致していたといいます。
「Codexは群を抜いて最良の体験だと考えています」とBashir氏は述べています。
DevRevの営業エンジニアも、GPT-6 Astraを使って国際カンファレンスのブース向けのデモを作成しています。
顧客と従業員へのより迅速な対応
顧客や従業員が支援を求める際、その依頼にはOperatorが問題を理解したり、承認済みのアクションを実行したり、適切な担当者が対応できるようComputerへ振り分けたりすることが必要になる場合があります。Bashir氏は、Decisions APIとUltrafastが、すべてのステップで深い推論を必要とせずに、こうしたワークフローを迅速に完了させる助けになる可能性を見出しています。
こうした判断の一部は、依存する情報が絶えず変化するため、固定ルールで定義するのが難しく、コストもかかります。Bashir氏は、開発者がそうしたロジックの多くを会話形式で記述できるようにし、タスクごとに適切な種類の知能を選べるようにしたいと考えています。「これらの処理は、数分ではなく数秒で実行・完了できる必要があります」と同氏は述べています。
セルフサービスの可能性を実現する
DevRevの次の目標は、Operatorがより長く、より高度な顧客・従業員からの依頼に対応できるようにしながら、アクションの追跡可能性、権限管理、取り消し可能性を維持することです。
Bashir氏は、ナレッジベースでの回答の検索、プランのアップグレード、返金対応といった従来からあるサポート業務は、あくまで出発点に過ぎないと見ています。「私たちは、セルフサービスという約束を本当の意味で実現したいのです」と同氏は語ります。
OpenAIのフロンティアインテリジェンスを活用し、DevRevは、企業知識と制御の仕組みを備え、本人に代わって行動できる形で、ComputerとOperatorがより複雑な依頼を解決まで導けるようにすることを目指して開発を進めています。