IT用語帳
FE2027New情報セキュリティの脅威 · 攻撃手法

ジェイルブレイク

Jailbreak

じぇいるぶれいく

生成AIに対して、架空の役割を演じさせる指示や巧妙な言い回しを与え、開発者が設けた安全上の制約(ガードレール)をすり抜けさせる攻撃。本来は回答を拒否するはずの有害な情報や、禁止された内容を出力させることが目的となる。

共有:

Related

他の資格での定義

Related

関連キーワードの用語

PD-Dシステムプロンプト

生成AIのアプリケーションで、利用者の入力とは別に、開発者や管理者があらかじめ与えておく指示。AIの役割、口調、回答の範囲、禁止事項、参照する情報などを定め、すべての対話に共通して適用される。利用者の入力で上書きされないよう、プロンプトインジェクションへの対策も必要になる。

PD-Sプロンプトインジェクション対策

大規模言語モデルを使うアプリケーションで、入力や参照する外部の文書に紛れ込ませた指示によってモデルが本来の指示に反する動作をさせられることを防ぐ対策。システムの指示と利用者の入力・外部のデータを区別して扱う、入力と出力を検査するガードレールを設ける、モデルに与える権限やツールを必要最小限にし、重要な操作には人の確認を挟む、などを組み合わせる。

FE拡散モデル

データにノイズを少しずつ加えていく過程を逆にたどり、ノイズから元のデータを復元するように学習する生成モデル。高品質な画像生成AIの主流方式で、テキストから画像を作るサービスの中核技術。

FEAI生成物の著作権

生成AIが作成したコンテンツに関する著作権上の論点。著作権法第30条の4により、AI学習目的の著作物利用は原則として許容される。AI生成物が既存著作物に類似する場合、依拠性と類似性が認められれば著作権侵害となり得る。AI自体は著作者にはなれない。

FEマルチモーダルAI

テキスト、画像、音声、動画など、種類の異なる複数のデータ(モダリティ)を組み合わせて入力・処理・出力できる AI。画像を見て内容を文章で説明する、音声で質問して画像付きで回答を得る、といった使い方ができる。

FEランダム性の制御

生成 AI が出力する文章の多様さと安定性を、パラメータで調整すること。Temperature を高くすると多様で意外性のある出力に、低くすると安定した出力になる。Top-p や Top-k で次の語の候補を絞ることでも調整できる。