Loading AI tools
深層学習 (ディープ・ラーニング) による人物画像合成の技術を指す混成語 ウィキペディアから
ディープフェイク(英: deepfake)とは、「ディープラーニング(深層学習)」と「フェイク(偽物)」を組み合わせた造語。詐欺などを目的に悪意を持って本物のように合成された偽画像、偽音声、偽映像を指す[1][2][3]。
この用語は人工知能を応用したメディア合成技術全般を指して使用されることもあるが、悪意を持って使われた場合にのみディープフェイクと呼び、そうでない場合には合成メディアとして区別することもある[1][2]。
ディープフェイクによるフェイクニュース、デマ、プロパガンダは、民主的な意思決定を妨げ、民主主義の機能や規範を損なう可能性があると指摘されており[4]、規制を求める意見が増えている[5][6]。ほかにも詐欺、いじめ、児童ポルノ、フェイクポルノ、リベンジポルノなどへの利用が懸念されている[7][8][9][10]。
技術的には「敵対的生成ネットワーク(GANs)」を使用して、既存の画像や映像を、ある意図に沿った別の画像または映像に重ね合わせて(スーパーインポーズ)結合する手法や[11]、生成的人工知能を用いたテキストなどのプロンプトから生成する手法などがある。
この記事は中立的な観点に基づく疑問が提出されているか、議論中です。 (2024年3月) |
写真の偽造は歴史上数多く存在していたが、精巧な偽造は手間がかかり、動画の偽造はより困難だった。しかし、ディープフェイク技術の進化により偽造のコストが低下し、さらに偽の動画を作成することが可能となってきている[12]。
ディープフェイクは偽情報の拡散だけでなく、標的が絞られた名誉毀損、なりすまし、デマやリベンジポルノなどの犯罪応用が想定されている[13]。ディープフェイクはデータに対する疑念を生み出し、社会的な課題の特定、問題の議論、決定、政治的意志の行使による問題の解決など、社会における民主的機能を妨害する可能性があると指摘されている[4]。
また、ディープフェイクは真偽の判断の難しいメディアや信念に影響を与えるのに十分に説得力のあるメディアを作成することで、世論に悪影響を与えることができる[14][15]。
著名人や政治家の肖像を用いディープフェイクを作成して投資詐欺、金融詐欺の嘘の信頼性を向上させることや、声を含めた個人情報がフィッシング、特殊詐欺などの巧妙化に悪用されている[16][17]。
ディープフェイク音声は、詐欺などに悪用されている[18]。2023年の時点では、数秒から1分ほどの音声データから個人の声を複製できるディープフェイク技術と、テキスト生成ツールの組み合わせにより、友人や家族のデジタルクローンを作成して被害者を狙うなりすまし詐欺を自動化することが可能になった[19]。
有名人の肖像を悪用してフェイクポルノ動画が作成されることがある。エマ・ワトソン、スカーレット・ヨハンソン、テイラー・スウィフトなど女性有名人がフェイクポルノ被害に遭っている[20][21]。また、ディープフェイク技術により、既存の児童ポルノから新たな児童性的虐待コンテンツ(CSAM)を作成したり、存在しないCSAMを作成できるようになった。ディープフェイクで作成された児童ポルノは名誉毀損、グルーミング、恐喝、いじめなどの子供に現実的な悪影響を与えることが懸念されている[22]。
ディープフェイクは、冤罪を生み出すために使用される可能性がある。合衆国議会調査局の報告書は、スパイ行為等を目的に政治家や機密情報にアクセスできる人物を脅迫するためにディープフェイクが使用される可能性があると警告した[23]。
ディープフェイクは、オンラインを含むメディアで架空のデータやメディアを用いたフェイクニュースや架空の人物(ソックパペット)を作成するために使用され、政治的な虚偽報道や悪意のあるでっち上げを作成するためにも使用される[24] [25]。選挙運動で対立候補を陥れるネガティブ・キャンペーン、政権政党への批判、戦時下における扇動などの工作にも使われている。
ハリウッドの名作映画の俳優を別人に入れ替える際にディープフェイクを用いることで、笑いを取るものがある[70]。コントローラーシフトフェイスというYouTuberは映画『ホーム・アローン』の主演であるマコーレ・カルキンをシルバー・スタローンに入れ替えた動画を作成したり、ダープフェイクスというYouTuberが映画『サウンド・オブ・ミュージック』から『ファイト・クラブ』まで出演者の顔をニコラス・ケイジの顔に替えた映画を集めた「ニコラス・ケイジ・メガ・ミックス」を作成した[70]。
2024年3月、欧州議会は偽情報対策のため生成AIで作成したコンテンツに明示義務を課すAI法(人工知能法)を可決した。違反したプロバイダには巨額の制裁金が課せられる[72]。
アメリカでは選挙介入やフェイクニュースに利用される懸念があり[73]、ディープフェイクの問題に対して立法の動きが見られる。 2018年に悪意のあるディープフェイクを禁止する法案が上院に提出され[74]、2019年にディープフェイク責任法が下院に提出された[6]。バージニア州[75]、テキサス州、カリフォルニア州、ニューヨーク州など、いくつかの州でもディープフェイクに関する法を導入している[76]。 2019年10月3日、カリフォルニア州知事ギャビン・ニューサムは法案第602号および第730号に署名した[77][78]。法案第602号は、同意なしに作成された性的なディープフェイクの標的となった個人に対し、コンテンツの作成者に対する訴訟請求権を規定する[77]。法案第730号は、選挙期間の60日間における公職への立候補者をターゲットにしたディープフェイク音声またはディープフェイク動画の配布を禁止する[78]。なりすまし、サイバーストーカー、リベンジポルノのようなさまざまなものが告発する包括的な法令の制定を目指す動きもある[79]。
2019年11月、中国では政府のサイバースペース管理局が、ディープフェイクやその他の偽造された映像にはフェイクであることを明示する必要があると発表し、従わない場合は犯罪とみなされる可能性があると通知した[80]。中国政府は、規則を遵守しないユーザーとプラットフォームの両方を訴追する権限を有する可能性がある[81]。
イギリスでは、”嫌がらせ目的”としてでしかディープフェイクの製作者を起訴できず、ディープフェイクそれ自体を犯罪に指定することが求められている[82]。
AI研究者のアレックス・シャンパンダルは、ディープフェイク技術によって世界がいかに早く混乱するかが知られるべきであり、この問題は技術的な問題ではなく、むしろ情報とジャーナリズムへの信頼によって解決されるべき問題であると述べた[12]。問題はメディアの内容が真実かどうかを判断できない時代に人類が陥る可能性であるとした[12]。
南カリフォルニア大学のコンピューター科学者ハオ・リーは、ディープフェイク技術の認識を広めるために何もしなければ、フェイクニュースなどの悪意のある使用のために作成されたディープフェイクはさらに有害になるだろうと述べている[84]。リーは、人工知能とコンピューターグラフィックスの急速な進歩により、2019年10月の時点で、早ければ半年以内には本物の動画とディープフェイクの区別がつかなくなるだろうと予測した[84]。
グーグルで詐欺対策に従事していたシュマン・ゴーセマジュムダーは、ディープフェイクを「社会的問題」の領域とし、ディープフェイクは必然的に自動生成の段階まで進化し、個人がその技術を利用して何百万ものディープフェイク動画を制作できる可能性があると述べた[85]。
スイスに本社を置く新聞社であるAargauer Zeitungは、人工知能を使った画像やビデオの操作は、危険な大量のメディアがあふれることになる可能性があると述べている。しかし、画像やビデオの改ざん自体は、動画編集ソフトウェアや画像編集ソフトウェアの登場よりもずっと古いものであり、このたびのディープフェイクの場合、新しい側面はそのリアリズムにあると主張している[49]。
Twitter(現・X)やGfycatなどのいくつかのウェブサイトでは、ディープフェイクのコンテンツを削除し、その発行元をブロックすると発表している。以前、チャットプラットフォームのDiscordは、有名人のフェイクポルノビデオのチャットチャンネルをブロックした。ポルノグラフィのウェブサイトの Pornhubもそのようなコンテンツをブロックする予定であるが、その禁止を強制していないと報告されている[86] [87]。 Redditでは、2018年2月7日に「不本意のポルノ」のポリシー違反により、subreddit(Redditのサブフォーラム)が一時停止されるまで、初期の状態が削除されないまま残っていた[88] [89] [90]。2018年9月、グーグルは、誰もが自分の本物あるいは偽物ヌードのブロックを要求でき、その禁止リストに「不本意の合成ポルノ画像」を追加した[79]。
2018年1月、FakeAppというデスクトップのアプリケーションが発表された。このアプリケーションでは、ユーザーが顔を入替えた動画を簡単に作成および共有できる[35] [91] [92]。
2018年8月、カリフォルニア大学バークレー校の研究者は、人工知能を使って子供をプロのダンサーに置き換えることができるフェイクダンスアプリケーションを紹介する論文を発表した[93][94]。
2019年8月、中国で1枚の顔写真でディープフェイクを作成できるZAOというアプリケーションが発表されて同年9月にApp Storeの人気ランキングで1位になるもユーザーの同意なしにデータを使用される可能性があるプライバシーポリシーが物議を醸した[95][96]、
Seamless Wikipedia browsing. On steroids.
Every time you click a link to Wikipedia, Wiktionary or Wikiquote in your browser's search results, it will show the modern Wikiwand interface.
Wikiwand extension is a five stars, simple, with minimum permission required to keep your browsing private, safe and transparent.