2022年11月30日(水)、OpenAI は対話型言語モデル「ChatGPT」を発表した。 文章の続きを生成する従来の GPT-3 と異なり、ChatGPT は、人間相手の 対話に特化している。GPT-3 に対して、性能が大幅に向上したと謳っている。 ・ フォローアップの質問に答えたり ・ 誤りを認めたり ・ 間違った前提に異議を唱えたり ・ 不適切な要求を拒否したり 今は、無料公開している。評判が世界的に急速に拡大しており、 公開から 5 日目の 12月6日(火) にはユーザー数が 100 万人を 突破している。 日本語が格段に上手くなっているということもあり、日本でも 大いに話題になっている。 私も試してみた。 なるほど、性格が変わったな、と思える。以前は、知らないことを 聞かれると、しれっと口から出まかせを言ってくることがよくあり、 そのお調子者ぶりは何とかならんもんか、と思っていた。 それが、知らないことは知らないと答えるようになり、ずいぶん 誠実な性格になったな、と。 しかし、まだ完璧ではなく、相変わらずやらかしてくれる事例が、 自力でも比較的簡単に見つかる。 このレポートを参照して解説する YouTube 動画: ■ セーラー服で機関銃トーク: ChatGPT 第 2 弾、詳細編 　 https://www.youtube.com/watch?v=E0Zzph7UzbI 　　2022/12/10 　　収録日: 2022年12月8日(木) 　　YouTube 動画 1時間21分53秒 　　YouTube チャンネル シンギュラリティサロン・オンライン 　　セーラー服で機関銃トーク: ChatGPT 第 2 弾、詳細編 　　～ これは iPhone 以来の大発展かもしれない 　　2022年12月10日(土) の時点で視聴回数は 525 回。

1. 2022 年 12 月 8 日 (木)
小林 秀章
資料
ChatGPT を使ってみた

2. 概要

3. 概要
米国時間 11月30日(水)、OpenAI は対話型言語モデル「ChatGPT」を発表した。
今は無料で使える。
今までの GPT-3 と異なり、知らないことは正直に「知らない」と言うし、
間違いを指摘されると認める。飛躍的な進歩だ！
日本語にも対応。SNS などで驚嘆の声。
しかし、まだ、例の「口から出まかせ」をやらかすようだ。
どれどれ。試してみた。

4. ChatGPT について

5. ■ 質問に答えてくれる言語モデル「ChatGPT」― プレビューは無料公開
https://japan.zdnet.com/article/35196862/
2022-12-02 10:52
ZDNet Japan
質問に答えてくれる言語モデル「ChatGPT」― プレビューは無料公開
CNET Japan Staff
米国時間 11月30日、OpenAI は対話型言語モデル「ChatGPT」を発表した。
日本語にも対応。
・ フォローアップの質問に答えたり
・ 誤りを認めたり
・ 間違った前提に異議を唱えたり
・ 不適切な要求を拒否したり
現段階では、もっともらしく聞こえるが不正確な回答や意味不明な回答を
することがあるという。
OpenAI はユーザーのフィードバックを得て問題点を把握し、
システムの改善に生かしたい考えだ。

6. ■ ChatGPT、公開 6 日目で 100 万ユーザー突破
https://www.itmedia.co.jp/news/articles/2212/06/news110.html
2022年12月06日 13時31分 公開
ITmedia
ChatGPT、公開 6 日目で 100 万ユーザー突破
「ChatGPT」のユーザー数が、5 日時点で 100 万人を突破したと、
この bot を開発した米 OpenAI のサム・アルトマン CEO がツイートした。
アルトマン氏:「どこかの段階で有料にしなければならないだろう。
コストは涙が出るほどかかっている」。

7. いろいろ言われている

8. ■ ChatGPT による回答を Stack Overflow が一時的に禁止
大量のもっともらしいが不正確な回答に対処しきれず
https://www.itmedia.co.jp/news/articles/2212/06/news069.html
2022年12月06日 06時47分 公開
ITmedia
ChatGPT による回答を Stack Overflow が一時的に禁止
大量のもっともらしいが不正確な回答に対処しきれず
プログラミング関連 Q&A サイトの米 Stack Overflow は
12月5日 (現地時間)、AI チャットボット「ChatGPT」によって生成した
回答の投稿を一時的に禁止した。ChatGPT による回答に間違っているものが
多く、「ユーザーにとって実質的に有害」だとしている。
Stack Overflow によると、ChatGPT が生成する回答が間違っている
可能性が高いにもかかわらず、一見もっともらしく見え、かつ、回答が
非常に簡単に生成できることから、投稿前に回答の正しさを確認せずに
投稿している人が多数いるという。

9. ■ 対話 AI「ChatGPT」が大学生レベルの試験の自由記述問題に
合格してしまう
https://gigazine.net/news/20221205-chatgpt-passes-ap-computer-
science-a/
2022年12月05日 11時20分
GigaZINE
対話 AI「ChatGPT」が大学生レベルの試験の自由記述問題に
合格してしまう
Posted by log1l_ks
スコットランドにあるセント・アンドルーズ大学でコンピューター
サイエンスを学んでいる学生のガエラン・スティール氏は GitHubで、
「面白半分に ChatGPT に AP Computer Science A の自由記述問題の試験を
受けさせたところ、36点満点中 32点でした」と報告した。
今回 ChatGPT が解いたのは、高校生に大学レベルの教育を提供することを
目的に作られた「AP Computer Science A」の 2022年版に含まれている
自由記述問題。主に Java の知識を問うこの試験では、ビデオゲームの
得点を集計するプログラムをテーマとした問題が出題された。

10. ■ 「AI 相手に TRPG の GM やる」... 最後までプレイが成立してしまった。
https://togetter.com/li/1982049
2022年12月4日
togetter
「AI 相手に TRPG の GM やる」... 最後までプレイが成立してしまった。
metoro_2954
「AI 相手に TRPG の GM やる！」というテーマで ChatGPT で遊んでいたら
最後までプレイが成立してしまった「一人で TRPG 楽しめる時代が来る？」
※ TRPG: Table-talk Role Playing Game
GM: Game Master

13. ■ しりとり
https://twitter.com/tsuyoi_yatsu/status/1598967312153219073
っょぃゃっ @tsuyoi_yatsu
返信先: @ssw_639_3 さん
ごりら以外絶対認めない AI
午後6:08 ・ 2022年12月3日

15. ■ Building A Virtual Machine inside ChatGPT
https://www.engraved.blog/building-a-virtual-machine-inside/
3rd December 2022
Engraved
Building A Virtual Machine inside ChatGPT
JONAS DEGRAVE
Today, Frederic Besse told me that you can run a whole virtual machine
inside of ChatGPT.

19. ■ Open AI Gives us a Sneak Peak at GPT-4?
https://www.youtube.com/watch?v=HYFu6DONT90
2022/12/06
YouTube 動画 18分27秒
YouTube チャンネル MattVidPro AI
Open AI Gives us a Sneak Peak at GPT-4?
― First Impressions & Examples of ChatGPT
2022年12月6日(火) の時点で視聴回数は 10,140 回。
2022年12月7日(水) の時点で視聴回数は 19,261 回。
2022年12月8日(木) の時点で視聴回数は 34,303 回。
twitter の評判:
・ 現代物理学の歴史について、ChatGPT と 20 分
間にわたって語り合った。
自分の学生時代に、もしこういう家庭教師がい
てくれたなら！
教育が塗り変わるかも。我々の知る大学は消滅
するかも。
・ ChatGPT は恐ろしいまでに出来がよい。
遠からず、危険な「強い AI」が出現か？

20. 試してみた

21. バナナはおやつか問題

23. 最近のことは知らない

25. 口から出まかせは言わなくなったのか？

26. アイドルとして出てきて、女優としても活躍している、ってことは
分かっているようだが。
AKB48 ではなく、Rev.from DVL。

27. どこのコーパスに「私は大型言語モデル」とか書いてあった？
言い訳が無理すぎる。

28. 福岡県福岡市ですけど？

30. 1999年生まれだけど？
愛なんて登場人物、いませんけど？

32. 大学受験レベルの数学の問題

33. 先に、模範解答。
x + 2 x y + y = 22
両辺を 2 倍すると
4 x y + 2 x + 2 y = 44
両辺に 1 を足すと因数分解できる。
(2 x + 1) (2 y + 1) = 45
x, y は正の整数なので、
(2 x + 1) と (2 y + 1) は 3 以上の奇数。
3 * 15, 5 * 9, 9 * 5, 15 * 3 の組合せしかなく、
(x, y) = (1, 7), (2, 4), (4, 2), (7, 1)

35. 解けてないじゃん。

37. 不正解！

38. 字数が尽きるまで無限ループ。
誤りを認めた！

39. 指示されたことは
正しく実行できている！

41. 指示されたことは正しく実行できている！
これでもう、解けたも同然なのだが…。

44. いちおう、解が 2 つ見つかった。あとは入れ替えだけなんだが。
じれったい。出来の悪い子の家庭教師をやっている気分。
しかし、いちおう誘導してやると、したがってくるところは
よく出来ている。

45. 所感
(x,y)の一方が 10 以上になると、もう左辺が 22 を超えるので、
その先に解はない。
なら、10 × 10 通りのすべての組合せを代入して、
しらみつぶしで解いちゃえばいいのに。
自分の得意技が分かっていない。

46. くりこみ群とは何か？

47. 百科事典的な説明としては、まあまあ悪くないのではないかと。

48. くりこみ群を使うことでうまく解ける問題の具体的な実例として、
現代物理学における摂動の発散問題を挙げている。
まあ、よいでしょう。

49. 物性物理だと、(1) 相転移、(2) 臨界現象、(3) 強く相関する系に適用できる、と。はいはい。

50. くりこみ群が強力なのは、系のふるまいをさまざまなスケールで解析する方法を提供するからだ、と。はいはい。

52. 具体的な数式の導出過程を言ってほしかったのだが、百科事典的な一般論しか言わない。

53. 結晶格子と言ってきた。

54. 結晶格子は分かった。「イジング・モデル」と言わせたいのだが、
なかなか言ってくれないなぁ。

55. 「イジング・モデル」、やっと言ってくれた。

57. くりこみ群は、現代代数学で言うところの「群 (group)」をなすわけではないのが通例だが、
いちおう「半群 (semigroup)」にはなっているので、まったく無関係ではない。
しかし、具体的なくりこみ群の計算において、半群としての性質なんてぜんぜん
使わないので、無関係と言っても間違いとは言い切れないのだが。

58. 「粗視化 (coarse graining)」というキーワードを出してきてほしくて聞いているのだが、
言ってくれないなぁ。

59. 要求すれば数式を返してくるけれど、
体系的・論理的に解説してくれるわけではない。

60. ググってみたけど、「埋め込み群」とか「embedding group」とか、そんな概念、見当たらない。
口から出まかせくさい。

62. 所感
ChatGPT と対話を続けるうちに「くりこみ群」が理解できちゃうぐらいの
家庭教師のような機能を期待したのだが、百科事典のような概要説明に
終始しがちで、具体的な各論に入っていかない。
「粗視化」など、くりこみ群に欠かせないキーワードをなかなか出してこない。
すでに言った概要説明の繰り返しが多い。
言葉をたくさん返してくる割には、説明が前に進んでいく感じが乏しい。
日本語、ひどい。知識の乏しさのギャップがすごい。
知らないことを知らないと言わず、口から出まかせを言ってくることが、
まだあるようだ。

63. AdS / CFT 対応

67. 他者の意識

68. 両論併記し、結論を濁す、当たり障りのない答え。

72. 長々と答えているが、クオリアには触れていない。

73. 「意識あるか」と聞かれて、「ない」と返してくる。
言葉のやりとりが意味的にかみ合っているのに、
意識はない、とな。そんなやつが世に出現した、と。

84. 死生観の問題

90. 英語では “unlikely”だったのに、
日本語では「可能性はない」と断定されてしまった。

93. 全体にわたる所感

94. 全体にわたる所感
両論併記 + 結論濁しの当たり障りのない優等生回答をしてくる
→ 炎上しないけど、おもしろくもない。自分の意見を言わない。
知らないことを知らないと言ったり、間違いを認めたりするようになったのは
大きな進歩だが、まだ、やらかす。
科学領域のワンポイントについて、家庭教師代わりになるか？
→ 与えた質問に対して百科事典的な答えをしてくるが、
理論の内容に立ち入りたがらないし、論理的・構造的な説明をしてくれない。
統一的な人格が見えない。言語によって答えが異なる。
やりとりが意味的にかみ合っているので、会話相手として楽しい。
「私もドリンクいただいていいかしら？」とか言わないし。タダだし。
ネトゲ廃人みたく、チャットボットと延々々々会話したあげくに
発狂するやつとか、出てくるのではないか？
Transformer ベース + スケーリングで、こなせるタスクの種類は
増えていくけれど。限界はあるか？ あるとしたら、何か？