■X(旧Twitter)より
ChatGPT、東大入試に挑む 英語8割超も数学1点で「不合格」https://t.co/KTjzQ0M8mc
— 日本経済新聞 電子版(日経電子版) (@nikkei) May 5, 2024
「この計算は手作業では困難。数学の専門書をおすすめする」。人ごとのような答案もありました。古文も文脈を理解できず0点。一方、英作文や英訳は満点でした。 pic.twitter.com/9kPN1Dlkwf
ChatGPT、東大入試に挑む 英語8割超も数学1点で「不合格」
「この計算は手作業では困難。数学の専門書をおすすめする」。人ごとのような答案もありました。
古文も文脈を理解できず0点。
一方、英作文や英訳は満点でした。
GPTvs東大、こんな感じだったのか https://t.co/pDiW3sYuZB pic.twitter.com/o0kIS6ACK2
— いい話 (@goodstoriez) May 5, 2024
GPTvs東大、こんな感じだったのか
<このポストへの反応>
英語の宿題はChatGPTにやらせて大丈夫だと分かりました。
英語がそれだけ取れるなら国立は無理でも早慶なら余裕で受かるね。
「コンピュータみたいな人」が,今までは数理が得意な人の表現だったのが,今度からは英語や国語が得意な人の表現になってしまう
↑文系の人ってしたり顔で、それは○○がこんな風に言ってたとか、あの本読んでないの?とか言うことが多くて、確かにそれを血肉にして考えてるんだろうけど、それってLLMだよね?
「AIに負けないスキルを習得する必要がある!」とか言ってた人たち
とりあえず高校数学を東大に受かるレベルまできちんとやりましょう
こういうのをみるたびに悪意を感じる。
ひとことだけ言うとすれば「使い方が悪い」
これは、プロンプトの問題。
試しに、2024年東大入試数学の第1問の(1)をプロンプトを工夫して解いてみたら、一発で解けた。これだけで5点くらい取れているはず。
↑足りなかったのはChatGPTの性能を引き出す人間の能力という皮肉・・・
発展途上で進化が速い世界なので、今年出るはずのGPT5で世界が変わり、GPTに〇〇は無理だという理解は一気に過去のものになる。
一般人がいろいろ考えても仕方がない気がする。
人ごとのような答案が好きすぎる。
一浪したら大丈夫!
文系科目は古文を除けばほぼ合格点・・・
ChatGPTって普段は“馬鹿なフリ”をしていて、より求められやすい一般的な回答を返してくるらしいね
「あなたは数学オリンピックの金メダリストです」とか
「持てる能力をすべて駆使して全身全霊で回答してください」とか
人間への忖度を捨て去る『呪文』を唱えると性能が全く変わるらしいので、おそらく理系科目もやり方次第ではすでに・・・
ワールドトリガー 27 (ジャンプコミックスDIGITAL) 発売日:2024-05-02 メーカー: 価格:502 カテゴリ:Digital Ebook Purchas セールスランク: Amazon.co.jp で詳細を見る |
月曜日のたわわ(10) (ヤングマガジンコミックス) 発売日:2024-05-07 メーカー: 価格:759 カテゴリ:Digital Ebook Purchas セールスランク: Amazon.co.jp で詳細を見る |
キリン 生茶 からだ晴れ茶 525ml 24本 緑茶 プラズマ乳酸菌 免疫ケア 乳酸菌 機能性表示食品 ペットボトル 発売日:2024-04-02 メーカー:生茶 価格:2990 カテゴリ:Grocery セールスランク:1317 Amazon.co.jp で詳細を見る |
[ 雑談・その他の話の記事一覧 ]
今週の人気記事
その他おすすめサイト
この記事へのコメント
-
- 1 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:01 返信する
- うんち
-
- 2 名前: マッスルウィザード 2024年05月06日 07:02 返信する
-
>>1
東大行くやつゴミ
魔法使いと黒猫のウィズ
-
- 3 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:04 返信する
- そりゃ日本人が作ったんじゃないから当たり前だろwww
-
- 4 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:05 返信する
-
>>2
ピーナスインバジーナ死ねやなりすましやめろ
-
- 5 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:05 返信する
-
>>2
マッスルウィザードを騙らないとイキれないの?
-
- 6 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:06 返信する
- プロンプトは一問ごとにかなり細かく設定してるし、そも企画趣旨として『受験用に特化させた学習をせずに』回答させる企画なんで、使い方だのプロンプトだのの非難してるやつは一回月4000円払って記事読んでからポストして欲しい
-
- 7 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:08 返信する
- いらない職業がわかったわね
-
- 8 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:08 返信する
-
僕ちんは違うのですwww
嘘こけキモブタ
-
- 9 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:09 返信する
- アメリカの会社が作ったAIだからそら英語の方が得意やろな
-
- 10 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:09 返信する
-
数学ができないってことは考えられないから、問題文の解釈が間違えてるってことなんだろうけど、国語の方は問題なく解けてる
この理由がわかればAIをより人間らしく作ることができるかもしれないな(´・ω・`)🤘
-
- 11 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:09 返信する
-
>>2
黙ろうな三流大学のゴミなりすまし
-
- 12 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:10 返信する
- AI君…、F欄だね
-
- 13 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:11 返信する
-
>>1
んちゃ!
-
- 14 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:13 返信する
- 東大生には国産AIを作って欲しい
-
- 15 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:14 返信する
-
>>7
一平!?!?!!?
-
- 16 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:16 返信する
- 記憶するだけの文系はいならい子ってことやんね
-
- 17 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:19 返信する
- 入力側の人間の問題か
-
- 18 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:21 返信する
- AIが計算は苦手なのは有名。
-
- 19 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:24 返信する
-
何だよ!
アホやん
-
- 20 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:32 返信する
-
東大法学部は数学出来ないからアホだぞ
ChatGPTと同レベル
-
- 21 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:37 返信する
- 次こそは最新!つぎこそは最新!とかいってGPT12でも同じで頭打ちだったりして。
-
- 22 名前: アッシュ™🎌 2024年05月06日 07:44 返信する
-
>>4
それでも財務官僚より頭が良くて玊袋がかゆい
-
- 23 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:45 返信する
-
AIは思考力皆無か
模範解答ではなく思考力のある人間は減ったな
-
- 24 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:49 返信する
-
これって元々が英語で作られてるから
日本語がまだ苦手なだけでは
-
- 25 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 07:51 返信する
-
一点取れたのは凄いよ
大量の情報を持ってるだけで知能で言ったら5歳児くらいの印象だったからな
-
- 26 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:12 返信する
- 数学過去問をラーニングさせれば余裕だろ
-
- 27 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:19 返信する
-
つつつ使い方ガーwwwwwww
AIカスの言い訳wwwwwww
-
- 28 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:19 返信する
- 問題文が日本語だったのも原因のひとつでは
-
- 29 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:20 返信する
- 日本語で聞いたらわからない、そういった情報がないとか言うのに同じ質問を英語でするとスラスラ答えることが多いので、日本語で聞かれると日本のサイト探すようになってて日本語のサイトが情報貧弱ってことなんだろうね。
-
- 30 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:20 返信する
- 数学1点とか言うChatGPTの性能を引き出す人間の能力がない馬鹿
-
- 31 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:22 返信する
- 小学生の国語のテストも苦手そう
-
- 32 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:24 返信する
- プロンプトを工夫して解いてみたら〜ってつまり問題文読めないんじゃん
-
- 33 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:35 返信する
-
>>7
英語翻訳家
-
- 34 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:38 返信する
-
記事の中で一度英語にし直してから英語で回答出させてそれ翻訳する工程も検討してるから読んでないやつはちゃんと読んでこい
てか何でソースちゃんと確認しないで批評するん?
-
- 35 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:43 返信する
- 元記事読んでないけど、無料の3.5だったりしないよね?
-
- 36 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:47 返信する
-
>>1
文系の人間ってやっぱり不要なんだなあwww
-
- 37 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 08:55 返信する
-
>>22
ピーナスインバジーナ死ねやなりすましやめろ
-
- 38 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:03 返信する
-
現状それっぽい文章を並べてるだけで、受け手が好意的に解釈してるだけ
顔付無能ロボットを持て囃した時と同じ
-
- 39 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:11 返信する
-
古文はできないけど漢文はできるんだな
マジで入力次第か
-
- 40 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:12 返信する
-
英語の試験って、英文で書かれてるから英単語を覚えきっていない日本人には難しく感じるけど、質問されてる内容とかは小学生レベルの内容だからなw
そりゃ簡単だろうよ。
-
- 41 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:13 返信する
- 使えるのは英語分野だけか
-
- 42 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:14 返信する
-
>>38
漢文てか中国語って結局、アルファベットの代わりに漢字を使ってる英文法系の文章だから文法解析が簡単なんだろ。
-
- 43 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:15 返信する
-
だからAIなんて高性能になったgoogle検索だって500年前から言ってるだろ
検索してヒットしたもんの中からタグ付けされた関連性の高いもんを引っ張り出してそれっぽく並べてるだけのまがい物だよ
イラストAIでも触ってればわかる、ただの検索機だ
-
- 44 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:18 返信する
- AIが全力で機能するとき電力はどのくらいなんだろ
-
- 45 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:23 返信する
-
>>43
主語をLLMじゃなくAIに拡大するのは主語でけーしChatGPTがリリースされたのは一昨年の11月末だからまだ2年経ってね―わけで定期構文も盛りすぎ
-
- 46 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:30 返信する
-
>>10
AIは1+1を解いているわけでなく
1+1の次に最も多く答えられる物を答えてる
よって学習に用いるデータに答えが依存されるし数学的思考と言う本質はない
ただ誰もが考えることは当てられるので数学的直感は正しいのかも
-
- 47 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:30 返信する
-
今後満点に近い結果には寄ってくだろうけど人間のほうが学習能力は高そうやな
記憶力と検索力はAI君の勝ち
-
- 48 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 09:53 返信する
-
Zero-shotでやるから意味があるのに使い方に転嫁するの面白いな
第三者が問題文にない指示を書き出したらカンニングだろうが
-
- 49 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 10:03 返信する
-
>>48
問われた問への回答は文脈によって変わるもんだよ
人間が腰を上げて試験問題を解く場合だって「私は与えられた試験問題を解くという状況です」という自己認識があってそれを解くのに、LLMにその文脈を与えずに回答させるのは公平ではないぞ
-
- 50 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 10:11 返信する
-
>>49
試験の解答であることを踏まえた回答をしろと伝えて質問してるぞ
何で記事読まないの?
-
- 51 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 10:35 返信する
-
現状のAIの出力した物は一見頭がよく理解している様に見えるそれっぽい物であるだけで
実際はカンニングして(ため込んだデータからそれらしい物を利用した)解答を出力しているだけで実際の意味は理解して居る訳では無い、ってな感があるのだが・・・どうなんだろね。
-
- 52 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 10:55 返信する
-
そりゃ誰かが一回解いた問題しか解けないからな
公式を憶えてるどころじゃない参考書の回答だけ暗記してるバリバリの文系だろ
-
- 53 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 11:06 返信する
-
>>51
すげえ!
じゃあ人間が記憶を引き出して回答するのもカンニングじゃん!
-
- 54 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 11:32 返信する
-
>>53
暗記が完璧な人間なんて極少数な気がするが・・・つーか
持ち込んだ情報のみカンニング可能な環境でのテストの解答って感があるってだけよ?
-
- 55 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 11:48 返信する
-
だからAIはただの道具できちんとした命令や情報を入力することができないといけないといわれているんだよ
使う側が無能なら間違った回答やそもそも何の成果も出せない
AIがやってくれるなんていうのならAIにいろんなことを認識するAIをいくつも乗せてさらにそれについて理解するAIをのせてさらにって
何百でも足りないAIの集合体を作ってようやく初歩のことができるという段階に入る
逆に言うとそういう複数のAIの代わりを人間はできるのだが
-
- 56 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 12:03 返信する
-
まだChatGPTで正しい正しくないって使ってるガチ無能のアホは置いておいて・・・
正解が明確に存在する学習問題程度の精度は上げて欲しいね
ノイズに与えるベクトルの性質上100%正解はかなり難しいから
センシティブ質問の定型返答みたいに別処理にするのが楽だけど
それだとただの検索だし意味ねーんだよな。なかなか難しい
-
- 57 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 12:14 返信する
-
なーんだ、肝心かなめの「文章読解能力」ゼロじゃんw
逆に英語が高得点ってのは、「基になる単語が、研究職間で知れ渡っている」せいだな。
-
- 58 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 12:21 返信する
-
プロンプトの問題とか言って例を出してるアホがいるけど
正しい回答させるのが目的ではないんだわ
-
- 59 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 12:28 返信する
-
だから今のAIはみんなが思い描くAIじゃないんだって!!
何でそれが未だに理解されてないんだよ
-
- 60 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:13 返信する
-
>>39
日本文の古文と現代文程文法は違うらしいが、漢文は現代中国文(感じは自動置換)として解いているのだろう。
だから比較的成績が良い。
-
- 61 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:13 返信する
-
LLMはプロンプトで挙動が激変する
どんなプロンプトを与えたのかが分からないとモデルの性能を引き出してるのかどうか分からない
LLMは勝手によしなにしてくれるほどユーザーフレンドリーにはできてない
-
- 62 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:23 返信する
-
>>1
なおぶっつけの本試験の場合全科目が壊滅の模様。東大合格AIはセンターすら無理だったんだっけ。
-
- 63 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:26 返信する
-
>>26
無理無理。数的論理力自体がないからなんの公式当てはめていいか分からずフリーズするよ
-
- 64 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:30 返信する
- 現代文で参考になったというのはどんな回答したんだろうなw
-
- 65 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:42 返信する
-
>>47
いうて14億文覚えさせた東大合格用AIが余裕で英語不合格だったらしいから無理じゃね?
なんか思考力欠けてるからビジネス英語と日常英語と試験英語を別言語とカテゴリしたり
暑い夏に冷たい飲み物と冷たい夏に暑い飲み物の二択に悩んで外したりかなり厳しいものがあるらしい
-
- 66 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:56 返信する
- 普通の問題だったら小学生でも解けるような問題をプロントをきちんとしてても普通に間違えるぞ
-
- 67 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 13:57 返信する
-
プロンプトを工夫しないと解けない時点でねぇ
GPT は存在しない作者や作品を出したり色々とめちゃくちゃやぞ
-
- 68 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:01 返信する
-
>>29
東大の日本語問題文の入試の話で「日本語で聞いたらわからない」って面白すぎるw
-
- 69 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:03 返信する
-
>>32
シチュエーション無視して問題文だけ言われたらお前ですら???ってなるわ
-
- 70 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:06 返信する
-
>>43
プログラムとAIの違いは何ですか?w
(必死に回答を検索する43)
-
- 71 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:07 返信する
-
>ChatGPTって普段は“馬鹿なフリ”をしていて、より求められやすい一般的な回答を返してくるらしいね
バイトくん、全然違うよ
-
- 72 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:28 返信する
- つまり英語の翻訳なんてAIに取って代わられて消えてしまうことが確定ってことか!?
-
- 73 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:39 返信する
- ほんやくこんにゃくが完成する日が一番近いという事かな
-
- 74 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 15:58 返信する
-
古文はAIも切ってるということよ
さっさと教科から外せよこのクソの役にも立たんゴミ
-
- 75 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 17:31 返信する
-
>>74
役には立たんが、点とりやすい科目だから受験生から見ればあったほうが便利
-
- 76 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 18:24 返信する
-
今後は性能が向上して行く一方だから上がり目は凄まじいものがある
-
- 77 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 18:37 返信する
- 頭の悪い外人ですね
-
- 78 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 18:37 返信する
- 平気で虚偽情報を垂れ流してくるしな
-
- 79 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 18:54 返信する
- 手加減というか油断というかね
-
- 80 名前: 名無しオレ的ゲーム速報さん 2024年05月06日 23:31 返信する
- 3.5使ってそう
-
- 81 名前: 名無しオレ的ゲーム速報さん 2024年05月07日 02:58 返信する
-
プロンプト書いたやつが文系だったってオチか
-
- 82 名前: 名無しオレ的ゲーム速報さん 2024年05月07日 10:29 返信する
-
AIすぐ嘘つくからな
あれがある限り頼りにならん
コメントする
・NGワードはライブドア基準です。・スパム対策で「http://〜」はコメントできません。
・住所や電話番号等の個人情報は書込みしないでください。
・特定個人や特定団体を酷く誹謗・中傷するようなコメントは控えて下さい。
・ブログの運営を著しく妨害するようなコメントについては法的措置も検討しておりますのでご理解の上コメントをお願い致します。
コメントする
・NGワードはライブドア基準です。・スパム対策で「http://〜」はコメントできません。
・住所や電話番号等の個人情報は書込みしないでください。
・特定個人や特定団体を酷く誹謗・中傷するようなコメントは控えて下さい。
・ブログの運営を著しく妨害するようなコメントについては法的措置も検討しておりますのでご理解の上コメントをお願い致します。