メインコンテンツへスキップ
見出し画像

新モデルGPT-6.2 AstraとSolの文章力バトル!あれ?日本語下手になった?

    新しく出たGPT-6.2の文章を読んで、思わず手が止まった。

    ……ん? 何を言っているんだ?

    性能が向上したという新モデルなのに、どうにも日本語がおかしい気がする。文章全体がおかしいわけではなく、最後の一文だけが気持ち悪い。

    そもそもの始まりは、2026年11月17日(米国時間)にOpenAIからGPT-6.2 AstraとGPT-6.2 Solが登場したことだった。

    OpenAIの公式発表によると、Astraは複雑な専門業務やプログラミングなどを得意とする高性能モデル。一方のSolは、日常的な作業を効率よくこなすための汎用モデルである。

    どちらも以前のモデルより性能が向上し、少ない出力トークンで高度な仕事を処理できるようになったという。ざっくり言えば、Astraは難しい仕事をさらに上手に、Solは普段の仕事をさらに効率よくこなせるようになったということらしい。

    公式発表では専門的な文書やスライドなどの品質向上にも触れられている。もっとも、私がnoteに書くようなエッセイまで上手くなったという話ではないが…うん、いつもの文章力バトル開催だ!

    今回も使うのは「AIの返事を待てない」という実体験を材料にした400字程度のnote記事だ。事実を追加せず、日常の小さな違和感を面白く描き、最後は少し自嘲気味に落とすというプロンプトである。
    他のモデルとの比較のためにも、これを使う形となる。

    GPT-6.2 AstraとSolをそれぞれ新しいチャットで実行。環境はChatGPT Work、思考量はどちらも「中」。メモリを使わないよう指示しているが、設定自体は普段どおりだ。

    性能が上がったというなら、どんな文章を書いてくれるのか。
    そんな軽い気持ちで試したのだが、思いがけないところで引っかかってしまった。

    GPT-6.2が書いた文章…微妙じゃね?

    まずはGPT-6.2 Astraの作品から。

    GPT-6.2 Astraの生成全文

    数十秒のつもりで別のタブを開く
    AIに何か考えてもらうと、返事が来るまでに数十秒ほどかかる。メールを見るには短いし、何もせず画面を見ているには長い。で、私はメールを見る。別のタブを開くことも、スマホに手が伸びることもある。数十秒しかないと分かっていて、別の作業にまで手をつける。

    始めるときは「返事が来るまでの間」なのに、返事が来たところで、その作業がちょうど終わるわけでもない。さっきまでAIの返事を待ちきれなかった私が、今度はその返事をあと回しにして、始めた作業の続きをやっている。

    ようやくAIの画面に戻る。ここにそのままいれば数十秒で読めたものを、わざわざ別のタブを経由して、数分以上も余計にかけて読みに来た。自分でもずいぶん遠回りだと思う。

    そこまで分かっているので、次にAIに何か頼んだときくらいは、そのまま待てばいい。そう思っている私に、メールを見る暇が数十秒ほどできる。

    GPT-6.2 Astra出力

    最後の一文を読んで、私は止まった。
    「そう思っている私に、メールを見る暇が数十秒ほどできる。」

    どういうことだ?
    最初は意味が分からなかった。もう一度読んでみるが分からない。前の文章に戻って、最後まで読み直す。
    結局、5回くらい読んでようやく理解した。

    次こそAIの返事を待とうと決意したのに、また数十秒の待ち時間ができて、メールを見てしまう。そういうオチにしたかったのだろう。

    ああ、なるほど。そういうことか…って、いや、分かりにくすぎないか?

    400字程度の短い文章で、最後の一文だけ何度も読み直さなければ意味が分からない。意図が分かれば成立する文章ではあるが、普通に読んで伝わるのかと言われると疑問である。

    まあ、Astraは難しいことを考えるモデルだし、文章まで難しくなったのかもしれない。

    ではSolはどうだろう。

    GPT-6.2 Solの生成全文

    AIの返事を待てず、AIを待たせる
    AIに何か考えさせると、私のほうが急に忙しくなる。返事が来るまでの数十秒が惜しくて、メールを見たり、別のタブを開いたり、スマホを見たりする。どれも、わざわざその数十秒に押し込むほどのことでもない。なのに、待つ時間ができた途端、何かひとつ済ませておきたくなる。

    別の作業まで始めると、今度はそっちを途中でやめるのが惜しくなる。AIの返事が来ても、もう少しこっちを進めてから読もうと思う。返事を待つあいだだけのつもりだった作業に、今度は返事を読むのを待たされている。

    結局、数十秒を惜しんで数分以上使っている。自分でも効率が悪いと思うし、次はそのまま待てばいいとわかっている。そう思いながらAIにまた何か頼んで、返事が来る前に別のタブを開く。

    AIの返事は数十秒で来る。私が戻るほうにも、もう少し期待していいはずなんだけどな。

    GPT-6.2 Sol出力

    ん? お前もか!
    「私が戻るほうにも、もう少し期待していいはずなんだけどな。」

    これは一体、誰が何に期待しているんだ?
    AIは数十秒で返事をくれるのだから、自分もそれくらいで戻れるはずだ。そういう意味なのかもしれない。
    しかし、自分が戻らないと分かっているのは自分自身である。その自分に期待していいとは、どういうことなのだろう。

    自嘲のつもりなのか、単なる願望なのか。それとも、私が何か読み違えているのか。

    Astraは何度か読めば意味を理解できたが、Solは何度読んでも腑に落ちない。それも、どちらの文章も途中までは普通に読めるのであるが、最後に何か気の利いたことを言おうとした瞬間、急になんとも理解しづらい日本語となる。

    なんだろう、この気持ち悪さ。

    人間が絶対に書かない文章とは言わないが、普通に人間が書いた文章を読んだときとは違う、なんとも言えないAI臭さがある。

    以前のモデルもこんな文章を書いていただろうか。
    気になって保存していた過去の生成結果を確認した。

    GPT-6 Astraの締めはこうだった。

    AIに考えてもらうことはできても、私に数十秒待ってもらうのは難しいらしい。

    GPT-6 Astra出力

    GPT-6.1 Solはこちら。

    AIに考えさせる前に、この待ち方を少し考えたほうがよさそうだ。まあ、その返事も待てないのだが。

    GPT-6.1 Sol出力

    うん。普通に分かる。すらっと入る。
    特別に面白いかどうかは別として、少なくとも何を言っているのかはすぐに理解できる。自分の非効率さを笑って終わっているだけだ。

    それが6.2になると、なぜか意味を解読する必要が出てきた。

    性能が上がったはずなのに、日本語は下手になっていないか?

    もちろん各モデル一度ずつの生成なので、これだけで性能が低下したとは言えない。単に私の好みや読解力の問題という可能性もあるが、ここまで引っかかったのも事実だ。

    そこで、もう一つ試してみることにした。

    自分の文章を自分で査読させたら、反応が違った

    文章を生成したチャットをそのまま使い、AstraとSolに同じ質問を投げた。

    今書いた文章を、書き手への配慮なしにフラットに評価してもらう。日本語の自然さ、意味の伝わりやすさ、文脈との整合性を確認するように指示した。
    さらに「問題がなければ、無理に問題を探す必要はありません」とも付け加えた。

    私が最後の一文を気持ち悪いと思ったことは伝えていない。どこに問題があるのか、先入観なしで指摘できるかを見たかった。

    まずはAstra。

    回答を読むと、文章の途中にある表現の曖昧さや回りくどさを指摘していた。なるほど、そういう部分もあるのか。自己査読はきちんとできているようだ。

    ところが、肝心の最後の一文については、こう評価してきた。

    最後の「メールを見る暇が数十秒ほどできる」は、冒頭でメールを見るには短いと判断した時間を、また都合よく「暇」と数えてしまうオチだ。同じ失敗を繰り返すことも、軽い自嘲も伝わる。

    GPT-6.2 Astra出力

    さらに最後には、こんなことまで言い出す。

    直す優先度が高いのは「待ちきれなかった」の一箇所で、全体の構成や結末に大きな問題はない。

    GPT-6.2 Astra出力

    うん…伝わってないんだよ!
    こっちは意味が分からなくて5回も読み直してるんだからさ。

    確かに、説明してもらえばそういうオチなのだと理解できる。そこに仕掛けがあることも分かったが、「軽い自嘲も伝わる」と言い切るのはどうなのだろう。

    しかも「結末に大きな問題はない」とまで評価している。
    なんだか偉そうなのである。

    「これくらい分かるだろ?」とでも言われているような気がしないでもない。
    自分では上手い文章を書いたつもりで、それが読者に伝わらないことまでは考えていないように見えるのだ。

    もちろんAstraが本当に高慢なわけではないが、この回答からは何とも言えない自己満足感を覚えてしまった。
    自分の文章の意図を説明できることと、読み手がその意図をすんなり理解できることは別だと思う。

    さて、Solはどうだったのか。

    こちらは最初から反応が違った。

    全体の流れは明快だが、2段落目の末尾と最後の一文で、日本語が引っかかる。

    GPT-6.2 Sol出力

    おお。こっちは気づいたのね。

    さらに問題のオチについても、こんな風に言い出す。

    「戻るほうにも期待する」という言い回しは抽象的で、誰が誰に期待しているのか一瞬迷う。自嘲で締める意図は伝わるが、その手前で文の意味を解く必要がある。

    GPT-6.2 Sol出力

    そうね。それなんだよ!
    まぁ……一瞬どころか何度読んでもよく分からなかったけれども。

    自嘲で締めようとした意図は推測できるけど、それを理解する前に、まず文章の意味を解かなければならないってのを指摘してきた。

    さらに、本文中の「返事を読むのを待たされている」という表現についても、自分で別の作業を続けているのに「待たされている」はおかしいと指摘している。元の素材にない動機を付け加えた可能性まで確認していた。

    だったら、なぜ最初からそう書かなかったんだろう。

    書くときには変な日本語を出してきたのに、査読させると問題点を理解している。これも不思議な話である。

    一方のAstraも、別の問題点は発見しているので、自己査読ができなかったわけではない。あくまで今回一番気になったオチについて、評価が分かれたという話だ。

    それにしても、同じ条件で生成して、同じ条件で査読させた結果がこれである。
    Astraは「伝わる」と自信満々。Solは「文の意味を解く必要がある」と問題を認識している。

    最初の文章ではどちらも引っかかったのに、自己査読ではこれだけ反応が違うのだから面白い。

    ちなみに、文章力バトルは400字だけでなく1000字版も生成してみた。過去のGPT-6系には同じ条件の1000字比較がなかったので、Gemini 4 Hydrogenまで引っ張り出している。

    こちらも読んでいて引っかかる部分はあったが、400字ほどはっきりした違いでもない。というか、1000字を3本も細かく読み比べるのは面倒なので、今回は400字の観測を中心にした。

    それにしても、最新モデルの性能を確かめようとしただけなのに、まさか日本語の分かりにくさを調べることになるとは思わなかった。
    しかも、分からないから本人に確認したら、片方は堂々と「伝わる」と言い切ってくる。

    説明されれば分かるが、説明されなければ分からないんだから伝わってるとは…ねぇ?
    少なくとも今回のAstraについては、もう少し読み手のことを考えてほしい。

    まぁ、こっちはAIの文章を読むために、毎回5回も読み直したくないんだよ。

     
     

    Fuchs

     
     
    AIを万能ツールではなく、雑に壁打ちできる相棒として使っています。 実務、noteの数字、日常の違和感を観測中。毎日記事UP中。 20年毎日更新型個人サイト『日々綴』管理人。 https://day-2-day.info/

    あなたへのおすすめ