HackerOneの$81Mバグ報奨金ボトルネック

HackerOneは過去1年間に$81 millionの報奨金を支払った。前年比13%増である。その3カ月後、curlプロジェクトはHackerOneプログラムを終了すると発表した。低品質なAI生成レポートがチャネルを圧倒したためだ。

HackerOneの支払額は、レビューを通過した発見の価値を測る。curlの離脱は、どの発見を通過させるに値するか判断するコストを測る。curlの創設者Daniel Stenbergは、投稿の負荷をメンテナーに対するサービス拒否攻撃になぞらえた。受信箱はなお機能していたが、その開放性が目的を損ない始めていた。

報告件数モデルは逆転した。エージェント型セキュリティリサーチがもっともらしい脆弱性主張を生み出すコストを圧縮するにつれ、信頼でき、再現可能な証拠と裁定能力が希少になっている。バグ報奨金プラットフォームは、投稿に最適化されたマーケットプレイスから、発見を検証し、振り分け、優先順位を付け、保護し、修正へ引き渡す運用保証システムへ移行している。

安価な発見が攻撃面を受信箱へ移す

脆弱性の主張は単独では届かない。メンテナーは影響するバージョンを特定し、環境を再現し、提案されたエクスプロイトを試し、新たな欠陥と重複報告を区別し、深刻度を評価し、担当者を見つけ、開示と修正のどちらを先にすべきか決めなければならない。AIシステムは、その下流コストを一切負担せず、もう1つの仮説を生成できる。受信側がすべてを負担する。

生成器は、もっともらしい文章をレビュアーの作業へ変えられる。レポートは実在する関数を引用し、もっともらしい障害モードを説明し、表面的なスクリーニングを通るだけの技術用語を含められる。それでもメンテナーが再現しようとすれば崩れる。生成器に必要なのはもう一度の試行だけだが、メンテナーはすでに希少な数分を使っている。

自動化された脆弱性リサーチは有効な発見も生み出せる。Xbowの自律型ペネトレーションテストツールはHackerOneの米国リーダーボードで首位に立った。curlが扱いきれないと判断したのと同じインセンティブシステムの内部で、セキュリティ欠陥の報告を巡り成功したのである。機械は両方を生み出せるため、Xbowは人間のシグナルと機械のノイズについての安易な物語を複雑にする。

メンテナーに必要なのは検証可能なケースである。影響する構成を特定し、挙動を再現し、エクスプロイトに至る経路を記録する自動リサーチャーなら、防御側の作業を減らせる。説得力のある可能性だけを出力するシステムは、その不確実性を受信側へ移す。両者とも出力を脆弱性レポートと呼ぶかもしれないが、その名称を正当化するだけの作業を済ませているのは一方だけである。

20%の手数料は希少な到達範囲のために作られた

HackerOneの2015年の売り文句は単純だった。ホワイトハットハッカーと企業をつなぎ、報奨金の20%を手数料として受け取る。企業は有能なリサーチャーを全員雇えるわけではなく、リサーチャーには企業へ正当な経路で入る手段がないことも多かった。プラットフォームは到達範囲、ルール、本人確認、支払い、そして保護された開示チャネルを提供した。

HackerOneは市場の当初の問いに答えた。企業は、求めていない侵入のすべてを法務・運用上の危機に変えずに、より多くの外部者を招いて自社ソフトウェアを調べてもらうにはどうすればよいか。後にBugcrowdの世界でおよそ1,000社の顧客が、仲介モデルがどこまで拡大できるかを示した。より大きな群衆は、社内チームが見逃した目立たないミスを企業が発見する機会を増やした。

手数料は成功した発見に価格を付ける一方、失敗したレビューの負担は企業に残した。企業が報奨金を支払うのは発見を受理した後だが、メンテナーは受理前に注意力を費やす。リサーチャーがコードを調べ、エクスプロイトを開発し、レポートを書くために相応のコストを負担していた間、そのコストは弱い主張の多くをプラットフォーム到達前にふるい落としていた。安価な生成は、その上流フィルターの一部を取り除いたが、下流の義務は何も取り除かなかった。

プログラム運営者は、身元調査を厳格化し、AIトリアージエージェントを構築することで対応している。身元調査はキューに入れる者を絞り、トリアージエージェントは人間の注意を受ける主張を絞る。参加者それぞれが相応のリサーチコストを負担するなら、アクセスの拡大は希少な発見を増やす。一方、参加者それぞれが疲れを知らない仮説生成器を動かせるなら、逆効果になる。

検証者を持たない発見者はキューを長くするだけだ

受信側で防御者に必要なのは、結果を再現し、エクスプロイト可能性をテストし、既存レポートと比較し、深刻度を見積もり、所有者を特定し、修正への引き渡しを準備できる検証者である。

OpenAIはCodex Securityを、発見、検証、修正案の全域に位置付けた。各段階は異なる不確実性を取り除く。発見は、欠陥が存在する可能性があるかを問う。検証は、主張された挙動がソフトウェアに触れても成り立つかを問う。修正は、変更が欠陥を単に移すことなく塞げるかを問う。

Microsoftは、MAI-Cyber-1-Flashサイバーセキュリティモデルと行動を組み合わせ、脆弱性を修正するためにProject Perceptionを設計した。Trellixは、およそ350,000プロジェクトに影響した欠陥の影響を受ける、ほぼ62,000件のオープンソースプロジェクトを修正した。この影響には、検出規模での修正が必要だった。影響を受けたリポジトリの一覧だけでは、コードは変わらなかっただろう。

範囲を限定した引き渡しは、セキュリティチームに各移行を確認する場所を与える。発見エージェントは、影響するバージョンと疑わしい経路を検証者に提供できる。検証者は、再現トレースと信頼度評価を返せる。裁定者は、修正エージェントがパッチとテストを提案する前に、重複、深刻度、所有権を判断できる。各エージェントは、次の担当者が異議を唱えられる成果物を生み出す。

セキュリティチームはますます、エージェント実行のガバナンスに注目している。別の機械または人間が作業を却下できる、目に見える継ぎ目が必要なのだ。

信頼階層は開放性を代価にレビュアーの時間を節約する

GitHubが計画する2階層の報奨金プログラムは、そのトレードオフを明示する。GitHubは、公開投稿には低い報奨金を、招待制のリサーチャーには高い支払いを計画している。アクセスと報酬を使い、これまでの仕事からレポートの評価コストが低いと見込まれる人々へ努力を誘導する。

プラットフォームはAIレポート急増以前からリサーチャーを審査していた。ES&Sは2020年、Synackと提携し、Synackが審査したセキュリティ専門家に同社製品の一部をテストさせた。2023年には、HackerOne、Bugcrowd、Google、Intelが、セキュリティリサーチャーを保護する法律を提唱するHacking Policy Councilの立ち上げを支援した。これらの企業はすでに、リサーチャーの正当性と合法的アクセスを戦略的インフラとして扱っていた。

AIは境界を誤るコストを引き上げる。完全にオープンなプログラムは、未知のリサーチャーが承認済みの専門家全員が見逃したものに気付く可能性を残すが、低コストの投稿がレビュー能力を消費することも許す。クローズドなプログラムはキューを守るが、昨日のアクセスを明日のアクセスの資格にしてしまう。一度も招待されたことのない外部者は、招待に必要な評判を積み上げられない。

身元調査は、誰がレポートを提出したかを確立する。再現トレースは、レポートが正しいかを確立する。招待は過去の実績を反映するが、新たな主張はそれぞれ独自の証拠をなお備えなければならない。したがってプログラム運営者には、信頼をアイデンティティだけでなく証拠の軌跡にも結び付ける必要がある。再現可能な作業を繰り返し提出する新人は振り分けやすくなるべきであり、裏付けのない主張を送る既存リサーチャーは恒久的な優先順位を継承すべきではない。

GitHubの公開レーンは入口を維持し、招待制レーンは信頼できるリサーチャーのためにより多くの資金を確保する。この2階層は、開放性をデフォルトの条件から管理対象の資源へ変える。群衆を維持しつつ、すべてのノックに同じレビュー優先度を与えない。

より良い証拠は、より危険な秘密を集約する

検証者にはより豊かな証明が必要だ。再現可能なレポートは、別の担当者が結果を確認できるだけの情報を、対象、影響する構成、エクスプロイト経路、観測された挙動について明らかにしなければならない。その証拠は曖昧さを減らすため、防御者を助ける。同じ理由で攻撃者も助ける。

Uberの2022年の侵害では、攻撃者が同社のHackerOneプログラムにアクセスし、脆弱性レポートをダウンロードした後、アクセスを失った。同年の別の事案では、HackerOneは従業員が提出済みレポートを盗み、金銭的報酬のために7社へ開示したと述べた。2026年には、Klueの侵害がHackerOneと他のセキュリティベンダーに影響した。

これらの事案は、Uberでの顧客アクセス、HackerOneでの内部者アクセス、Klueを取り巻くベンダーエコシステムという、3つの信頼関係を通じて価値あるセキュリティ情報に到達した。

より深い検証を行うプラットフォームは、レビュアーと顧客がその判断を再現できるだけの証拠を保持しなければならない。しかし成果物が1つ増えるごとに、不正アクセスの結果は重くなる。プラットフォームは、エクスプロイトトレース、影響するバージョン、修正案、開示状況を、通常のマーケットプレイス履歴として扱えない。顧客、プログラム、ワークフロー段階ごとに分離し、各レビュアーまたはエージェントには、限定された担当作業に必要な証拠だけを与えなければならない。

レポート品質を高める同じ引き渡しが、セキュリティ境界にもなり得る。発見エージェントは対象コンテキストから作業し、検証者は再現環境への一時的なアクセスから作業し、修正システムはコードコンテキストと承認済みの発見から作業できる。トレーサビリティは次の担当者に結果を監査させ、弱点が修復される前に誰が地図に触れたかを記録する。

curlが報奨金の扉を閉じようとする一方で、HackerOneの報奨金経済は$81 millionに達した。報奨金は受理された発見を数える一方、残りを却下するコストはメンテナーが負担するからだ。プラットフォームの荷重を支える壁は、玄関から証拠保管室へ移った。