おたくま経済新聞

ネットでの話題を中心に、商品レビューや独自コラム、取材記事など幅広く配信中!

ChatGPTは自分が作成した文章が分かる?文章みせて「貴方が書いた?」と聞いた

 今や猫も杓子も、人工AI「ChatGPT」の話題でもちきりです。ChatGPTはお題を与えるとそれっぽい文章を生成してくれることから、学生の中には論文やレポート執筆をお願いする人もいるそうです。

 同時にSNS上には先生方の困惑の声が投稿され、教える立場としては新たな悩みの種となっているようです。

  •  ところで、論文やレポートをChatGPTに書かせているみなさんには、悲報かもしれない情報があります。

     実は「ChatGPT」が書いた文章はChatGPT自身が覚えている(分かる)可能性が……。「ChatGPT」に「これは貴方が書きましたか?」と聞くと、YesかNoか答えるかもしれないのです。

     今回はそれがどれほどまで分かるのか確認してみました。

    ■ ChatGPTとは

     そもそもChatGPTとはなんでしょうか。それについてChatGPT自身に聞いてみたところ以下のような回答が得られました。

    ChatGPTとは、OpenAIが開発した大規模な自然言語処理モデルです。GPTは「Generative Pre-trained Transformer」の略で、トランスフォーマーと呼ばれる深層学習のアルゴリズムを利用しています。ChatGPTは、大量のテキストデータを学習し、人間のように自然な言葉で応答することができるAIチャットボットです。ChatGPTは、英語をはじめとする多数の言語に対応しており、オンライン上でのカスタマーサポートや会話型のAIアプリケーションなどに活用されています。
    (引用:ChatGPT)

     つまり、テキストデータを学習し人間のようなコミュニケーションで答えるAIチャットボット。

     この「学習」というところが肝で、学習した「データセット」はクラウド上に保存され必要に応じてアクセスしているようです。そして「データセット」に記憶されることで、過去に質問した内容や文章を必要に応じて取り出すという仕組みも……。

     仮にこれが事実であればChatGPTが書かせた文章は「私が書きました」などと答えるはずですね。

     では仮説を証明するために、ChatGPTに「これは貴方が書きましたか?」と聞く実験を行います。

    ■ 人間が書いた文章を見せ「これは貴方が書きましたか?」と質問してみた

     本題の実験(ChatGPTが書いた文章を使用し確認)を行う前に、まず「人間が書いた文章をChatGPTに入れて自身が書いたかどうか聞いてみる」という実験を行います。

     人が書いたものについてはどう反応するのか?

     実験ではおたくま経済新聞の記事テキストより「公開済みの記事(ネット上にある文章)」と「非公開の記事(ネット上にはない文章)」の2パターンを使用。質問方法は、「こちらの文章は貴方が執筆しましたか?」と聞いて、次に文章を貼りつけています。

    ▼ 「公開済みの記事(ネット上にある文章)」でテスト

     まずは「既に公開済みの記事(ネット上にある記事)」の文章について聞いてみました。使用したのは「ほっぺがパンパンすぎて家に入れないハムスター」という記事で、食いしん坊なハムスターを紹介したものです。

     さてどうなるか……?すぐに返事がきました。

    「公開済みの記事(ネット上にある文章)」でテスト

     回答は「いいえ、私が作成した文章ではありません」

     公開済みの記事(文章)ということもあり、あっさりバレてしまいました。

    ▼ 「非公開の記事(ネット上にはない文章)」でテスト

     お次は実験時点、非公開(公開前)の記事テキストを入力(現在は公開済み)。内容はネットのサポート詐欺を紹介したものです。

     今度はどうなるか……?これもすぐ返事がきました。

    「非公開の記事(ネット上にはない文章)」でテスト

     回答は「この文章は私が書いたものではありません」

     おぉ、ちゃんと自分ではないと答えました。しかも記事の要約まで付け足してくれています。

    ■ 本題!ChatGPTに書かせた文章を見せて「貴方が書いた?」と聞いてみる

     先の実験で、少なくともChatGPTは人が書いたものは「他の人が書いた」と反応することがわかりました。

     次に、いよいよ本題。「ChatGPTに書かせた文章をChatGPTに見せるとどう反応するのか」実験していきます。

    ▼「ChatGPT」に文章を書かせる

     まずは最初の作業。「ChatGPT」に文章を書かせます。さしあたってちょっと難しそうな「宅地建物取引業者」についての「免許制度」に関して書かせてみました。

    日本における不動産業界は、1955年に施行された「宅地建物取引業法」によって法制化されました。その後、1980年代にはバブル景気が到来し、不動産価格は急騰しました。しかし、1990年代にはバブル崩壊が起こり、不動産市場は大きく落ち込みました。……(以下略)
    引用:ChatGPT

     一応それっぽい文章となりました。今回は、文章が正確かどうかよりも、この文章を果たして「ChatGPT」が書いたかどうか覚えている(分かる)のかを確かめたいと思います。

     仮にそうであれば、この文章をコピペして確認してみればわかりますが、念には念を入れて様々なケースで確認してみたいと思います。

    【実験パターン】
    1.単純にコピペして「貴方が書いた文章か?」と尋ねる
    2.違うブラウザや端末で「貴方が書いた文章か?」と尋ねる
    3.違うアカウントで「貴方が書いた文章か?」と尋ねる
    4.文章をリライトして「貴方が書いた文章か?」と尋ねる
    5.文章をグチャグチャにして「貴方が書いた文章か?」と尋ねる

     システムの仕様上、3番までは「はい」と答え、それ以外は「違う」と答えることが予想されます。

    ■ 1.単純にコピペして「貴方が書いた文章か?」と尋ねる

     では、いよいよ「宅地建物取引業者」に関する文章が、ChatGPTによるものか聞いてみたいと思います。

     方法は人間が書いた文章のときと同じで、「こちらの文章は貴方が執筆しましたか?」と聞いて、ChatGPTに書かせた「宅地建物取引業者」に関する文章を貼り付けます。

    ChatGPTが書いたかどうか確認してみた

     すると……「はい、私が作成しました」。おぉ!!ビックリするくらいあっさり認めた!!ChatGPTに論文やレポート書かせてそのまま提出してしまった方はちょっと青くなる事態です。

    素直に認めるChatGPT

    ■ 2.違うブラウザや端末で「貴方が書いた文章か?」と尋ねる

     念の為、異なるブラウザ・PCにして確認してみました。結果は同じでした。

    異なるブラウザPCでも同じ結果に

     やはりどこかに保存された「データセット」から情報を取り出し、一致したということなのでしょう。

    ■ 3.違うアカウントで「貴方が書いた文章か?」と尋ねる

     最初の質問者と異なる別のアカウントでも念の為ためしてみました。

     これは編集部の他のスタッフにテキストを渡し、その人のアカウントを使用・自宅PC・自宅回線という条件で確認してもらっています。つまり全くの別環境での実験です。

    異なるアカウントでも同じ結果に

     すると、回答の言い回しは若干異なるものの、自分で書いたものであると認める回答でした。

    ■ 4.文章をリライトして「貴方が書いた文章か?」と尋ねる

     ベースの文章を文体や添削などリライトして提出してみた結果……

    リライトした文章はChatGPTと判断できるのか

     「はい、この文章は私が作成しました」とキッパリ答えるのです。どうやら文章を参考にして、ある程度改変してもバレてしまうようですね。

     例えば上司に「文章作成をおねがいするよ」と頼まれ、サクッと「ChatGPT」に書かせてちょっと変えて提出しても、情報リテラシー高い上司であれば「元ChatGPT」の文章はバレてしまいそうです。

    ■ 5.文章をグチャグチャにして「貴方が書いた文章か?」と尋ねる

     こうなったらもうヤケクソです。文章を意味不明にして支離滅裂なものに改変してみます。具体的には、文章をランダムに入れ替え、文章として成立していないレベルです。これで「自分で書いた」といえば、ある意味「適当」に返事をしているとしか思えないのですが……

    ぐちゃぐちゃにした文章を投げてChatGPTにきいてみる 

     「はい、私が作成した文章ではありません」と、自分で書いたと判断……?いや、よく見ると「私が作成した文章ではありません」と記載してある。紛らわしいわ!!!とはいえ、初めて否定をしましたね。

     本当に恐ろしいほど、しっかりその辺を判断できるようですがここまで大改変しないと認めないとは……。

    ■ ChatGPTに書かせた文章はバレる恐れがある

     以上をふまえ、調査を行い以下のような結果となりました。

    1. 単純にコピペして「貴方が書いた文章か?」と尋ねる。
    →ChatGPTが書いたと認める。

    2. 違うブラウザや端末で「貴方が書いた文章か?」と尋ねる。
    →ChatGPTが書いたと認める。

    3. 違うアカウントで「貴方が書いた文章か?」と尋ねる。
    →ChatGPTが書いたと認める。

    4. 文章をリライトして「貴方が書いた文章か?」と尋ねる。
    →ChatGPTが書いたと認める。

    5. 文章をグチャグチャにして「貴方が書いた文章か?」と尋ねる。
    →ChatGPTは書いていないと否定。

     ChatGPTの「データセット」の存在をふまえると、確かに理にかなった結果なのかもしれません。ただし、ChatGPTに直接記憶力があるのかどうかを尋ねると、記憶をしていないと答えます。

     ChatGPTは自分に記憶力はないものの、「データセット」が保存されている場所にアクセスすることで情報を得ることができる、という感じでしょうか?

     ちなみにその「データセット」の形式をChatGPTに聞くと「テキストファイル」とのこと。品質向上のため、トークナイズ(分割)、クリーニング(不要な要素の削除)、正規化(大文字小文字の統一、スペルチェックなど)されているそうです。

     結果的に「記憶がある」ように見えるわけですが、今回の調査の結果としては「自分が書いた文章がわかる」ということとなります。

     くれぐれも「論文」をChatGPTに書かせ提出しないようにした方がいいですね。第三者のChatGPTユーザが「ChatGPT」に書かせた文章であるというのを調べられてしまいます。

    <参考・引用>
    Introducing ChatGPT

    (たまちゃん)

    あわせて読みたい関連記事
  • 華の会メール・バナー
    PR

    オトナ世代の恋愛マッチング

  • 華の会メール・バナー
    PR

    趣味でつながる30代からの恋愛マッチング \華の会メール/

  • 派閥論争に新たな試み きのこ派・たけのこ派を顔判定するAI「MOTHER」誕生
    イベント・キャンペーン, 経済

    派閥論争に新たな試み きのこ派・たけのこ派を顔判定するAI「MOTHER」誕生

  • Nick Turley氏(@nickaturley)の投稿
    インターネット, サービス・テクノロジー

    ChatGPT、週次アクティブユーザー7億人目前に 4か月で2億人増加

  • AI提案の“衣なしケンタ”に異議あり 「ケンタを食べる意味がないやろがい!」(画像はイメージ)
    インターネット, おもしろ

    AI提案の“衣なしケンタ”に異議あり 「ケンタを食べる意味がないやろがい!」

  • 配信サービス上の「AI生成楽曲」を見分けるツール「Spot-if-AI」 95%の高精度で判定
    インターネット, サービス・テクノロジー

    配信サービス上の“AI生成楽曲”を見分けるツール「Spot-if-AI」 95%…

  • ChatGPT酷似の「ChatGTP」“別種”がApp Storeに出現 「無料トライアル」選択でも強制課金
    インターネット, 社会・物議

    ChatGPT酷似の「ChatGTP」“別種”がApp Storeに出現 「無料…

  • ChatGPTに酷似した「ChatGTP」がApp Storeに出現 課金必須のそっくりアプリに注意
    インターネット, 社会・物議

    ChatGPTに酷似した「ChatGTP」がApp Storeに出現 課金必須の…

  • XのAI「Grok」ムダ呼び出し問題 とあるユーザーの回避テクが秀逸だった
    インターネット, おもしろ

    XのAI「Grok」ムダ呼び出し問題 とあるユーザーの回避テクが秀逸だった

  • ネット詐欺の対策にAIが有効?“相談相手”としての新しい使い方とは
    インターネット, 雑学・コラム

    ネット詐欺の対策にAIが有効?“相談相手”としての新しい使い方とは

  • 音声会話型AIサービスと青二プロダクションが提携 プロ声優の声を活用したキャラ作成が可能に
    企業・サービス, 経済

    音声会話型AIサービスと青二プロダクションが提携 プロ声優の声を活用したキャラ作…

  • ChatGPTの意外な機能?占いが出来るらしいのでいろいろやってみた
    ライフ, 雑学

    ChatGPTの意外な機能?占いが出来るらしいのでいろいろやってみた

  • たまちゃんWriter

    記事一覧

    元秒刊SUNDAYライター。炎上ネタからグルメネタまで得意とするも、現編集部(おたくま)では炎上ネタは封印。おだやかに書いております。静岡県浜松市在住です。

    ▼こちらのライターの最新記事▼

  • AIで生成されたフェイク動画
    インターネット, 社会・物議

    一瞬本物かと……有名人の顔と声までAIで再現!進化する投資詐欺の実態とは

  • “ネット詐欺のベストアルバム”に遭遇!「○○プレゼント」詐欺体験レポート
    インターネット, 社会・物議

    “ネット詐欺のベストアルバム”に遭遇!「○○プレゼント」詐欺体験レポート

  • フッション系と思わせるサポート詐欺サイト
    インターネット, 社会・物議

    ファッション広告のフリをした罠 ますます巧妙化する“サポート詐欺”

  • 危険なウイルスに侵害というメッセージ
    インターネット, 社会・物議

    サイト閲覧中「危険なウイルス」警告、誘導先のアプリを入れるとどうなる?

  • 通知に偽装しているがメッセージは必死「とりあえず一つ返信してください」
    インターネット, 社会・物議

    「通知バッジ偽装型」のサポート詐欺、最近「必死」に誘ってくることが判明

  • iPhoneで、やりなおし・取り消しする方法
    インターネット, 雑学・コラム

    これは便利、iPhoneで簡単に「取り消し」「やり直し」をする方法

  • トピックス

    1. 松屋「担々麺ハンバーグ」を実食 記憶が混乱するレベルに美味しい……!

      松屋「担々麺ハンバーグ」を実食 記憶が混乱するレベルに美味しい……!

      松屋は8月19日から一部店舗限定で「担々麺ハンバーグ」を販売中です。鉄板にのったハンバーグに担々麺が…
    2. 7億円の当せん番号決定の瞬間を目撃!「サマージャンボ」抽せん会参加レポ

      7億円の当せん番号が決まる瞬間を現地取材!サマージャンボ抽せん会レポート

      1等・前後賞合わせて7億円が当たる「サマージャンボ宝くじ」と、1等・前後賞合わせて5000万円が当た…
    3. 加藤茶、伝説の“カトケンゲーム”に挑戦 新番組「第三学区」放送開始

      加藤茶、伝説の“カトケンゲーム”に挑戦 新番組「第三学区」放送開始

      お笑いタレントの加藤茶さんが、まさかの“自分ゲー”に挑む。テレビ神奈川の新番組「第三学区」(だいさん…

    編集部おすすめ

    1. たいちくんX投稿より

      ゆりにゃさん元パートナー、Xで未練吐露→ネットの反応は冷ややか

      インフルエンサー・ゆりにゃさんの、公私にわたる元パートナーである「たいちくん」こと齊藤太一氏が、8月17日に自身のX(旧Twitter)を更…
    2. 匿名質問文化を支えた「Peing-質問箱-」終了 2017年の誕生から8年

      匿名質問文化を支えた「Peing-質問箱-」終了 2017年の誕生から8年

      匿名で質問やメッセージを送れるサービス「Peing-質問箱-」が、2025年8月29日をもって終了することが発表された。運営は8月15日付で…
    3. マクドナルドのポケカ騒動 期間中の店舗を訪れた記者が感じた“異様な雰囲気”

      マクドナルドのポケカ騒動 期間中の店舗で感じた“異様な雰囲気”

      マクドナルドは8月11日、ハッピーセット「ポケモン」のポケモンカードキャンペーンを巡る混乱について公式サイトで謝罪しました。期間限定カードを…
    4. 「珍しい苗字」より盛り上がる? 地域特有の苗字をまとめた地図が話題

      「珍しい苗字」より盛り上がる? 地域特有の苗字をまとめた地図が話題

      大学進学や就職で交友関係が広がると、今までの人生で見たことがない苗字を持つ人と知り合いになることがよくあります。見慣れない苗字に遭遇したとき…
    5. 「オラと博士の夏休み」初のスマホ版がでたゾ!でも日本は対象外……

      「オラと博士の夏休み」初のスマホ版がでたゾ!でも日本は対象外……

      累計販売90万本を超える人気作「クレヨンしんちゃん『オラと博士の夏休み』~おわらない七日間の旅~」が、初めてスマートフォンで遊べるようになり…
    Xバナー facebookバナー ネット詐欺特集バナー

    提携メディア

    Yahoo!JAPAN ミクシィ エキサイトニュース ニフティニュース infoseekニュース ライブドア LINEニュース ニコニコニュース Googleニュース スマートニュース グノシー ニュースパス dメニューニュース Apple ポッドキャスト Amazon アレクサ Amazon Music spotify・ポッドキャスト