金融の場面では「ロブスター」を慎重に育てるべきであり、インターネット金融協会は四つの主要なリスクを警告している

robot
概要作成中

AI・インテリジェントエージェントは、どのようにして説明性のハードルを越え、金融業界にサービスを提供できるのか?

最近、オープンソースのAIインテリジェントエージェント「OpenClaw」(通称「ロブスター」)のダウンロードと利用熱が高まり続けている。このインテリジェントエージェントは、デフォルトで高いシステム権限を持ち、自然言語指示に基づいてコンピュータ端末を直接操作できる。先日、工業・情報化部のネットワークセキュリティ脅威・脆弱性情報共有プラットフォーム(NVDB)や国家インターネット緊急対応センター(CNCERT)は、関連するセキュリティリスクの警告を発表した。

2023年3月15日、中国インターネット金融協会は「OpenClawのインターネット金融業界における安全性に関するリスク警告」(以下「リスク警告」)を発表し、現在、インターネット金融業界はオンライン化・デジタル化が非常に進んでおり、顧客の資金・資産・口座・個人金融データなどの重要な敏感情報を直接取り扱っていると指摘した。OpenClawインテリジェントエージェントは作業効率を向上させることができるが、そのデフォルトの高いシステム権限と脆弱なセキュリティ設定は、攻撃者に悪用されやすく、敏感なデータの窃取や不正操作の突破口となり得るため、業界に深刻なリスクをもたらす。

ブロードコムコンサルティングのチーフアナリスト、王蓬博氏は第一财经に対し、「最近、OpenClawを中心としたオープンソースインテリジェントエージェントの潮流が高まっているが、この流れが金融業界に向かうと、その適合性と実現性には厳しい課題がある」と述べた。規制が厳しくリスクが高く責任も重い業界では、金融機関は慎重さを保ち、技術トレンドに盲目的に追随すべきではない。

データと取引には潜在的なリスクが存在

「金融業界のコアビジネスには、信用供与、取引、リスク管理、決済などがあり、これらは資金の安全性、利用者の権益、システムの安定性に直結している。いかなる技術の適用も、コンプライアンスと安全性を前提としなければならない。現段階のオープンソースインテリジェントエージェントは、エンドツーエンドの自動化実行を重視しているが、その動作ロジックは金融監督の求める説明性、追跡性、人為的介入メカニズムと根本的に矛盾している」と王氏は述べる。

インターネット金融協会は、OpenClawがインターネット金融業界において直面する4つの主要リスクを指摘している。一つは資金損失リスクだ。リスク警告によると、OpenClawは複数の中高危険度の脆弱性を公開しており、攻撃者はこれらの脆弱性やプロンプトインジェクションを利用してデバイスの制御権を奪うことができる。また、機能プラグイン(Skills)には有効なコミュニティ安全審査メカニズムがなく、悪意あるプラグインの投毒事件も発生している。金融シナリオでは、これらのリスクはネットバンキングのパスワードや支払いキー、証券取引APIの認証情報などの敏感情報を窃取し、ネットバンキングや証券取引システムに不正にログインして資金操作を行うために悪用され、顧客資金の損失を直接引き起こす可能性がある。

二つ目は取引責任リスクだ。インターネット金融協会は、OpenClawは複数の操作を自律的に実行できる能力を持ち、既に株式監視や投資戦略のバックテストなどの金融シナリオに利用されていると指摘している。自動化された実行過程で誤操作により資金の振替や投資商品の購入が行われ、実際の損失につながる可能性もある。現段階のAI技術は完全な説明性を持たず、自動化された金融取引の背後にある責任主体の特定は困難であり、法的責任の所在も不確定性が高い。

三つ目はデータのコンプライアンスリスクだ。OpenClawは持続的な記憶機能を備え、動作中に生成されたデータはローカルのセッション記録や記憶ファイルに保存される。これらのデータが大規模モデルAPIや他の操作を呼び出す際に第三者に送信される可能性もある。

インターネット金融シナリオでは、信用情報、信用審査資料、取引履歴などの高度に敏感なデータが扱われるが、これらのデータがAI処理のチェーンに入ると、そのアクセス範囲や保存期間が元の業務目的を超える可能性があり、金融データ管理のコンプライアンスリスクを引き起こす。

さらに、新たな詐欺リスクも存在する。インターネット金融協会は、不法な者が「AI代わりの株取引」「確実に儲かる」などの言葉を用いて投資詐欺を行い、「ロブスター」の熱狂を利用して金融機関の虚偽情報を大量に偽造し、社会一般に偽アプリのダウンロードや指定口座への送金を誘導する可能性を指摘している。また、不法者は「代行インストール」「リモート調整」などの名目で消費者の端末を制御し、悪意のあるプログラムを埋め込んだり、金融敏感情報を窃取したりすることもある。関連報告によると、AIを用いた金融詐欺事件は急速に増加しており、一般の人々の新たな詐欺手口の識別能力向上が求められている。

慎重なインストールと詐欺に注意

これらのリスクに対し、中国インターネット金融協会は4つの防止策を提案している。

まず、金融消費者はネットバンキングや証券取引、決済などの個人金融取引を行う端末において、OpenClawのインストールには極めて慎重になるべきだ。必要な場合でも、金融サービス系システムの操作権限を付与せず、OpenClawの脆弱性修正を迅速に行い、機能プラグインのインストールを厳しく管理し、使用時には身分証番号や銀行カード番号、支払いパスワードなどの敏感情報を入力しないこと。さらに、これらのアプリは動作中に大規模モデルAPIを呼び出すため、トークン費用が高額になる可能性があるため、利用者は注意を払う必要がある。

次に、消費者は「養虾ファンド」「AI代わりの株取引」「確実に儲かる」などの名目の金融詐欺に警戒し、送金や投資の操作は正規のルートを通じて行い、「代行インストール」「リモート調整」などの名目で個人端末に接触しないよう注意する。

また、関係機関は、顧客情報処理や資金操作、リスク管理、取引実行などの金融業務に関わる端末にOpenClawをインストールしないこと、顧客の金融情報や取引データ、信用審査資料などの敏感データをインテリジェントエージェントに入力したり、その処理チェーンに接続したりしないことを推奨している。

最後に、関係機関はOpenClawなどのインテリジェントエージェントの安全管理を自組織の情報セキュリティ管理範囲に含め、社員向けに専門的な安全研修を実施し、これらのインテリジェントエージェントの安全リスクの認識と防止能力を向上させることを提案している。

王蓬博氏は、「オープンソースのインテリジェントエージェントは金融業界にとって全く価値がないわけではないが、その最大の利点はコスト削減と効率向上にあり、多くの繰り返し作業やルールが明確な補助作業を自動化できる点にある」と述べる。もしオープンソースAIインテリジェントエージェントが金融の中核シナリオに本格的に進出したいのであれば、いくつかの重要なハードルを越える必要がある。それには、アルゴリズムの説明性と追跡性を確保し、ブラックボックスを根絶すること、責任と権限の明確な分担メカニズムを構築し、問題の追及を可能にすること、金融レベルのデータコンプライアンスとプライバシー保護体系を整備すること、人工介入の権限を強制的に保持し、リスクの不可逆的な発生を防ぐためのフェイルセーフ機能を設置することなどが挙げられる。

(この記事は第一财经からの転載)

原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • コメント
  • リポスト
  • 共有
コメント
コメントを追加
コメントを追加
コメントなし
  • ピン