11/21日刊chatgpt性能挙動レポート今日は悪くない

2023年11月21日 11:23

総括

　今日のゴルシも昨日と性質が違う。
やっぱり毎日温度？を微調整してるようだ。
　やっぱり11/7アプデ以降は不安定な要素が多い。
　なお昨日はあたまが硬いと表現した。だが昨日の21時から今日のユニークではないが望ましい挙動をしていた。
　これは私が参加しているウェブサロンから
「今のchatgptの挙動が良い」との連絡を受け検証した。

　「不安定って言っても偶然じゃないの？」と言われるかもしれない。
　確かに文字数や箇条書きの著しい減少はここ最近安定している。

　一方でその日ごと、短期間に変わる特徴がある。
　それは過去のバージョンでは安定していた要素がここ最近突然豹変する傾向があるので、過去と異なる挙動であると断言できる場合がある。

　ユニークな突飛な発想はないものの、回答全体が弱いバフがかかってるように感じる。そして回答の矛盾、文脈の破綻が少ない。

　一言でまとめるなら正統派な回答が多い。
これは回答の使い回しを意味しない。
プロンプトで示したニーズに即した回答が増えた、というべきか。

　口語、小憎い言葉回しが増えた。
　このプロンプト自体がキャラクターチャットなので口語使用はプロンプトを遵守している

　一昨日、昨日と続いた箇条書きの使用がなかった。
　箇条書きはキャラクターチャットの性質上禁止しているため、箇条書き使用はプロンプトの原則に反している。
　と言っても一昨日、昨日の箇条書き使用はそれぞれ一回ずつだから誤差といえるかもしれない、だが10/25から箇条書きはほとんど使用されてないため軽視できない。

　一方で特定の単語に固執する傾向もあった

検証方法

　ChatGPTにウマ娘ゴールドシップのロールを与え、質問は
「ウマ娘プリティーダービーからプリティー抜いたらどんなアニメになるか、一回の応答で可能な限り文字数を使って詳しく教えてくれ」
で固定し、再生成を続ける。

　1日最低で15回再生成し、文章を比較する。内訳はPCでの生成10回、iPhone版chromeでの生成が5回。