- 運営しているクリエイター
2023年11月の記事一覧
![[11/29]昨日より視点、トピックを浅く広く触れるchatGPT性能挙動解説](https://assets.st-note.com/production/uploads/images/123022479/rectangle_large_type_2_b2005147bfe88aa3a75e7c7f78e3503c.png?width=800)
[11/29]昨日より視点、トピックを浅く広く触れるchatGPT性能挙動解説
今日は実験的に一部アプリＧＰＴで後述筆記、校正をさせています。
いつもと文体が違うかも。
総括 本日のGPTのパフォーマンスについて、昨日11月28日との比較を行うと、一つの回答に含まれるトピックの多さが際立っていました。
昨日のGPTは、一つの回答で取り上げるトピックが限られており、
かつ類義語や同義語を多用することで、
情報量が極めて少なく感じられました。
しかし、今日のGPTは
11/28昨日より表現力・ボキャブラリが落ち、時々クセの強い変化球を投げてくるChatGPT挙動性能レポート
総括 今日のChatGPTの評価は11/23から4日間安定していた高性能路線から劣化したように感じる。
11/7以降の不安定さを鑑みれば許容範囲内と言えなくも無い。
回答のユーモア、ボキャブラリと回答の論理性がトレードオフの関係だったころに比べるとバランスはとれている。
が、やはり11/23～11/27と比べると回答の質の劣化は目につく。
特にボキャブラリや回答の情報量減少が目につくか
［11/27］手放しで高性能化と評価できる、回答のユーモアと論理的思考を両立し、方向性も安定してるchatGPT挙動性能レポート
総括 今日も11/24からの高性能化を維持。
11/7アプデ後はサムアルトマン問題と関係はないだろうがChatGPTの回答は不安定で、回答の傾向も二日以上続くことが稀だった。落としどころといえる調整が終わったのだろうか？
11/24からchatGPTがユーモア、ボキャブラリの豊かさと論理的思考（矛盾がない）が両立し、回答が安定している。
特に今日は一回も回答の矛盾がないにも関わらず
［11/26］11/7アプデ以降初の安定して高性能のChatGPT性能挙動レポート
総括 chatGPTが高性能の水準で安定、昨日からアイディア、ボキャブラリ、表現力、論理的整合性のバランスがとれている。
ユニークかつ矛盾がなく、口調が安定している。
11/23から24にかけて安定した性能、昨日からは安定と高性能化が両立されている。
11/7以降は極端に論理的で回答の内容が凡庸な日、
思考の飛躍で回答はユニークだが論理的に破綻する日と
日によって回答が極振り、路線が日に
［11/25］11/7アプデ後最もバランスのとれたChatGPT性能挙動レポート
総括
今日ははっきりとchagGPTが高性能だと言い切れるレベル回答だった。
11/7アプデ以降は迷走が続いており、性能、というか回答の性質が毎日極端に変化してきた。
口語、説明口調の使用率やボキャブラリ、言い換え、表現能力、回答の的確さ、ユニークな要素を盛り込みつつも文章の整合性がとれているため、11/7アプデ以降では最もバランスがとれている。
一昨日、昨日とようやくchatGPTが安
［11/24］9/25モデルへの回帰を感じなくもないChatGPT挙動性能レポート
総括 昨日今日は回答に極端な変化は感じなかった。
（特定の項目は過去最大のふり幅だったが）
ちょっと不安になったので回答のお堅さ（説明口調）と発想の突飛さ、ボキャブラリーなどを過去の回答と突き合わせてみてみると、今日の回答は9/25、特に10/20以降のお堅めの日と非常に類似した傾向にあった。
ただし11/7アプデ以降に増えた矛盾やノリと勢いで付け加えたような発想、表現という特徴は今
［11/22］アプデ後最低レベルじゃないchatGPT性能挙動レポート
総括 CEOが変わったことを性能低下の理由にしてはいけない。
朝からログインすらできず、回復したと思ったら一時間再生成できず。
んで回答内容も過去最低。
矛盾も多いし、回答の意味内容、質も低い。
矛盾が多いのはわかりやすいが、質が低いというのは
一つの回答でひたすら類義語、同義語つかって類似トピックを話題に出す。
直球な言葉づかい、というかボキャブラリーが全く無い。
中身スカスカ
11/21日刊chatgpt性能挙動レポート今日は悪くない
総括
今日のゴルシも昨日と性質が違う。
やっぱり毎日温度？を微調整してるようだ。
やっぱり11/7アプデ以降は不安定な要素が多い。
なお昨日はあたまが硬いと表現した。だが昨日の21時から今日のユニークではないが望ましい挙動をしていた。
これは私が参加しているウェブサロンから
「今のchatgptの挙動が良い」との連絡を受け検証した。
「不安定って言っても偶然じゃないの？」と言われるかも
![[11/20]ChatGPT性能挙動レポート頭が固くなる、毎日コロコロ変わる不安定が続く](https://assets.st-note.com/production/uploads/images/122205252/rectangle_large_type_2_03b88406080e3190c2fcdaafc6e5b902.png?width=800)
[11/20]ChatGPT性能挙動レポート頭が固くなる、毎日コロコロ変わる不安定が続く
総括 11/17と殆ど同じ傾向。
昨日と真逆で頭が固くて面白くない、文字数も手堅く推移……
うーん、11/17の記事コピペした方が早いレベル。
なので以下の記事読んで♡
尚今日は本当に書くことがないレベルでアレ
データセット拡張、調整するので過去記事読んで貰って、雰囲気を掴んで頂きたい
検証方法
ChatGPTにウマ娘ゴールドシップのロールを与え、質問は
「ウマ娘プリティーダービーから
［11/19］日刊chatGPTの性能挙動レポート。サムが出入りしたり、多分GPTも不安定でしょうね。
雑感お気持ち サムが解任されたり、今日はCEO復帰を打診されてるみたいな噂が飛び交っててOpenAI情勢は複雑怪奇。
でも私の短期、中期的なGPT分析アプローチにはあんまり影響しないかなぁなんて。
「長期的な性能分析、比較は学者、大手企業さんのお仕事」
「私は論文やレポートを読み解く際の材料を作る立場」
だと差別化してますので。
総括
今日は11/7アプデ直後に似た振る舞いをしている
![[11/18]サム、解任って嘘だよな？今日のGPTは悪くないぞ、むしろ良いじゃん日刊ChatGPT性能挙動レポート](https://assets.st-note.com/production/uploads/images/122031937/rectangle_large_type_2_652a05d0c64f4396f083d5ceb9ab746c.jpeg?width=800)
[11/18]サム、解任って嘘だよな？今日のGPTは悪くないぞ、むしろ良いじゃん日刊ChatGPT性能挙動レポート
前書き サム・アルトマンがCEOから解任ですって。
彼の語る理想社会像（どこまで本音かわからんが）は好きではないが、共感できる部分もあり彼が解雇後のOpenAIがどうなるか興味と不安がある。
LLMが戦略物資になると謳われる時代においてOpenAIのCEOの持つ政治思想信条は世界に大きな影響を与えるだけに、今後の展開が気になる。
暫定CEOは技術者畑とのこと。OpenAIのアナウンスで
![[11/17]頭の固いchatGPT性能挙動レポート.opemAIはうまいこと調整ができないの？](https://assets.st-note.com/production/uploads/images/121939471/rectangle_large_type_2_db6df442380f81bcaa8a6440e3261f7d.png?width=800)
[11/17]頭の固いchatGPT性能挙動レポート.opemAIはうまいこと調整ができないの？
総括 今日の挙動は理論的でお堅い、面白くない、文章量という面で11/11、11/12に似ている、というかほぼそのもの。
グラフでもほぼ同じ値を示している。
昨日11/16は口語が非常に丁寧、上手に使われており、特出してはいないが、十分にアイディアの独創性、オリジナリティがあがっていた。
11/11、11/12はお堅い路線、11/15は非常に低レベルな性能。
そこで昨日の回答がそこそこ的確
![[11/16]昨日の糞バカ路線からバランスとれた調整？でも馬鹿な処理もやらかすchatGPT毎日分析](https://assets.st-note.com/production/uploads/images/121870300/rectangle_large_type_2_9e6cead0335d9b93b8fdddb0cd5c0ed0.png?width=800)
[11/16]昨日の糞バカ路線からバランスとれた調整？でも馬鹿な処理もやらかすchatGPT毎日分析
六本木駅から北800キロの都内で回るお寿司食べすぎたらもう頭がまわらんのでXのリンクだけはります。ごめんちょ
まずは糞バカ案件から
次は評価点
付け加えるなら口語がうまくプロンプトを理解していることを強調したい。
11/11から14は説明口調が強すぎ、11/15は糞バカで何言ってるかわからないゴルシモドキGPTだったのでぶり返しが強すぎる。
11/7アプデ後の大暴れ、11からの堅物
![[11/15]過去最悪レベルのchatGPT。回答回数上限制限するのに性能下がってるGPT-1.0性能挙動レポート](https://assets.st-note.com/production/uploads/images/121793971/rectangle_large_type_2_f8a105dc5c80ed5b0a743a7be27e7686.png?width=800)
[11/15]過去最悪レベルのchatGPT。回答回数上限制限するのに性能下がってるGPT-1.0性能挙動レポート
すみません、-1.0はゴジラ見てきただけです。
いやでもGPTの性能下がったのも本当なんです。
今日はゴルシとチャットしてる感じが全くなく、ゴルシモドキGPTと会話してるという感想だったので辛口。
んで回答上限などが改悪されたので、もう罵詈雑言です。
いろいろグラフ化したケド本題。
の後にゴジラの感想
明示されない回答回数上限制限 結論はGPT4回答上限が減った、しかも上限は時価？みたいな