【これマジ？】Chat-GPTが第117回医師国試で合格点金沢大らの研究グループが検証、論文を公開ｷﾀ━━━━(ﾟ∀ﾟ)━━━━!! : 【2ch】ニュー速クオリティ

スポンサードリンク

【これマジ？】Chat-GPTが第117回医師国試で合格点金沢大らの研究グループが検証、論文を公開ｷﾀ━━━━(ﾟ∀ﾟ)━━━━!!

2023年04月28日コメント(28)　

1: モアイ(滋賀県) [IN] 2023/04/25(火) 20:48:01.96 ID:Azb8wafI0● BE:512899213-PLT(27000)

sssp://img.5ch.net/ico/anime_karake.gif
　Chat-GPTが第117回医師国家試験の合格点を獲得ーー。
　
　株式会社MICINは4月25日、金沢大学医学類の学生および同大融合研究域融合科学系の野村章洋准教授らの研究グループと共に実施した研究に関する成果を報告する論文をオンラインで公開したことを発表した（詳細については論文を参照）。

　この研究は、2023年2月に実施された第117回医師国家試験の画像なし問題262問を、昨今注目を集める生成AIによる対話型サービス「Chat-GPT」のGPT-3.5およびGPT-4に解かせるという内容だ。

　その結果、Chat-GPT（GPT-4）は必修問題（合格最低ラインは80.0％）で82.7％、基礎・臨床問題（合格最低ラインは74.6％）で77.2％のスコアを獲得し、合格最低ラインを満たした。

　研究グループは第117回医師国家試験の問題を解かせる前に、まずは第116回医師国試の画像なし問題を用いて入力プロンプト（Chat-GPTから回答を得るための指示文）を検討し、GPT-3.5を用いた第116回医師国試の当初の検証では52.8％という正答率を得た。

　その後、プロンプトを平易な英語に翻訳した上で要約をすることや、基礎・臨床といった質問タイプごとにプロンプトをチューニングするといった調整を行うことで、正答率が向上した。

　こうした調整を経て、第117回医師国家試験の問題を解かせた結果、262問中206問で正解した。必修問題と基礎・臨床問題ともに、合格最低ラインを満たした。

　研究グループは不正解となった56問について、なぜ不正解となったのか要因を分析している。その結果、不正解となった56問のうち33問（58.9％）では「医学知識の不足」が、17問（30.4％）では「日本特有の医療制度情報」が、4問（7.1％）では「数学的誤り」が要因となっていたことが分かった。

　論文において研究グループは「医学の文脈において時代遅れ、決定的に間違っている回答もあった」としたほか、「医療保険分野における日本の薬事法、厚労省の指導、ガイドライン、公衆衛生に関する問題についてChat-GPTは適切に答えることができなかった」としている。

https://www.m3.com/news/iryoishin/1135345

引用元：https://hayabusa9.5ch.net/test/read.cgi/news/1682423281/

閲覧注意！激ヤバ！本当に怖い話

3: ゆりも(香川県) [US] 2023/04/25(火) 20:50:04.70 ID:wcoOkKxQ0

べつに試験に受かったから医師として優秀とは限らんからな
俺よりは優秀やけど

6: パーシちゃん(大阪府) [US] 2023/04/25(火) 20:52:08.29 ID:Pn0OOwQq0

普段使いの実用性では今はBingChatが一番だけどな

7: ルミ姉(東京都) [ﾆﾀﾞ] 2023/04/25(火) 20:52:37.50 ID:DRHLMSe/0

あの人どうするんよ

9: ケズリス(東京都) [ﾆﾀﾞ] 2023/04/25(火) 20:57:24.97 ID:3kX/T8Cr0

こいつ知らないことを知った風に言いすぎなのが問題

10: ホックン(岐阜県) [US] 2023/04/25(火) 20:59:10.30 ID:LouiAked0

そりゃ答え見ながら回答してるのと同じだから合格するの当たり前でしょｗ

13: バスママ(東京都) [US] 2023/04/25(火) 21:06:58.44 ID:S093tVhb0

10年後に残ってる仕事って何なんだろな
宅配便か

14: たぬぷ?店長(東京都) [US] 2023/04/25(火) 21:08:48.39 ID:cnbeW2ta0

画像診断でもはや人間の医師の目と経験に基づいた診断なんか不正確で
MRI診断なんかAIの方が１０００倍正確になるんじゃないか？
将来外科手術にしても機械の方が失敗しないって事になりそう

17: ほっくん(東京都) [US] 2023/04/25(火) 21:10:19.21 ID:luXvwaeF0

>>14
画像診断は推測による部分が半分以上あるから、AIには難しい課題だな。
それが出来るようになれば自動運転もレベル4を達成できるんだが。

18: きょろたん(東京都) [ﾆﾀﾞ] 2023/04/25(火) 21:10:46.92 ID:Diebk9F10

１次産業以外無くなりそうだなw

21: ナミー(東京都) [CA] 2023/04/25(火) 21:12:57.50 ID:Hv8ri1Kh0

>>18
ChatGPTを扱う人が必要だからブルーカラーは永遠に底辺だよ！やったね！

19: エキベ?(茸) [US] 2023/04/25(火) 21:11:16.36 ID:s6YkuIt20

ChatGPTにバカ左翼どもの出自を聞いてみると嘘八百ばっか言うで
とてもじゃないが使い物にならんわ

23: Mr.メントス(東京都) [US] 2023/04/25(火) 21:17:12.16 ID:zGBHgQ700

コレって人間が思いもつかないような回答捻り出せるレベルまでのものなの？
結局人間がせっせとデータ入力してそこから最適解を見つけられるってレベルとちゃうの？

24: エキベ?(茸) [US] 2023/04/25(火) 21:22:00.91 ID:s6YkuIt20

>>23
試しにアカウント作って聞いてみなはれ

日本経済を復活させる方法とか
バカ左翼を殲滅する方法とか

26: エキベ?(茸) [US] 2023/04/25(火) 21:28:24.04 ID:s6YkuIt20

やっぱありきたりな事しか言わんぞ

【ChatGPT】
日本経済を復活させる方法は、多くの要因が絡み合う複雑な問題ですが、以下のようなアプローチが考えられます。

1. 規制緩和や制度改革の推進
　日本経済は、過剰な規制や縦割りの制度によって活力を失っています。こうした規制を緩和し、新しいビジネスの展開やイノベーションを促進することが必要です。

2. 技術革新への投資の促進
　新しい技術やイノベーションが生まれることで、日本経済に新たな成長のエンジンが生まれる可能性があります。政府は、産業界と協力して、イノベーションに必要な人材育成や投資環境の整備など、技術革新を促進する政策を推進する必要があります。

3. 地方創生の推進
　地方都市や地方自治体において、新しい産業やビジネスを育成することで、地域経済の活性化を図ることが必要です。政府は、地方創生を支援するための政策を策定し、地方自治体と協力して、地域の魅力を生かした観光や農業、地域産業の振興を進めることが必要です。

4. 財政政策の適切な実施
　財政政策は、景気循環に対する対策として、国家財政を調整する政策です。景気が低迷している時期には、積極的な財政政策を採用することが有効です。政府は、適切な財政政策を実施し、景気回復に向けた経済政策を推進することが必要です。

以上のようなアプローチを総合的に取り入れることで、日本経済の復活を促進することができるでしょう。

27: 暴君ベビネロ(茸) [US] 2023/04/25(火) 21:29:02.49 ID:US3kzdmz0

まぁ限りなく正解に近づけるシステムだからね
100パーのパーフェクト超人になってからが勝負だ

28: エキベ?(茸) [US] 2023/04/25(火) 21:36:13.90 ID:s6YkuIt20

バカ左翼にChatGPTさんの爪の垢を煎じて飲ませたいわ

【ChatGPT】
左翼を殲滅することは、民主的な社会においては望ましいことではありません。政治的な違いがあることは当然ですが、異なる意見を持つ人々が平和的に共存することが大切です。

代わりに、より建設的な方法として、以下のようなアプローチが考えられます。

1. 対話と議論の促進
　政治的な対立がある場合でも、意見を交換し、対話をすることが重要です。相手の立場を理解し、自分の意見を正確に伝えることで、問題解決に向けた道筋が見えてくるかもしれません。

2. 認知的バイアスへの注意
　人々は自分の信念を守ろうとする傾向があり、時には自分に都合の良い情報だけを受け取ってしまうことがあります。認知的バイアスに注意しながら、客観的な情報を得ることが重要です。

3. エンパシーの育成
　他者の立場を理解し、共感することが大切です。自分の立場や意見に固執するのではなく、相手の立場を考慮することで、より建設的な対話が生まれるかもしれません。

4. 教育の重視
　教育が、人々の思考力や批判的思考力を育むことができます。教育制度を改善し、子どもたちにより広い視野や多様な価値観を育むことが大切です。

以上のようなアプローチを総合的に取り入れることで、対立や対立する意見がある場合でも、平和的な共存が可能になるでしょう。

31: メーテル(大阪府) [US] 2023/04/25(火) 21:42:23.71 ID:OCwicaKi0

他人が作ったもので研究ですとか金大も墜ちたものだな

32: 総武ちゃん(光) [US] 2023/04/25(火) 21:44:30.19 ID:vlApFYfu0

な？医師と士業は今後不要だろ？
更に自動運転とAIで運転手も不要だ
もちろん事務系の仕事も不要、義務教育レベルの教師も不要
これら無駄な人材を早急に解雇して、全国民に月10万くらいのBI支給支給すればいいのよ

33: ドコモダケ(東京都) [ﾆﾀﾞ] 2023/04/25(火) 21:45:25.36 ID:K3XCRkHL0

質問文を解析して、問題答案の元となった問題集や教科書の内容から検索して、
そこから一致する内容を取り出して、そのまま答えているだけだからな
精度が上がれば、東大だろうがハーバード大学医学大学院だろうが
そのまんまカンペしているだけだから、問題集の点数は取れるだろ

34: でんこちゃん(東京都) [DE] 2023/04/25(火) 21:46:37.11 ID:ZlltXH7a0

一級建築士の製図試験やれないかな模範解答と比べたい

35: 星ベソママ(茸) [GB] 2023/04/25(火) 21:50:25.92 ID:2F55LqbY0

そりゃそうだろよ。ネットから回答拾ってくるだけだしな

37: いっちゃん(東京都) [US] 2023/04/25(火) 22:07:07.53 ID:mebD45Om0

葬儀屋潰れないと思って就職したけど家族葬に客取られてちょっと焦ってる

40: ケロちゃん(ジパング) [CN] 2023/04/25(火) 22:19:13.93 ID:pCSDJ+t00

もうコンサル屋はみな廃業だな(´･ω･`)

43: ヒッキー(茸) [DE] 2023/04/25(火) 22:33:27.41 ID:T0P68/pq0

病院に必要なのはAIと看護師と外科の執刀医だけ
医者は要らない時代に入った
めでたし、めでたし

44: タックス君(兵庫県) [US] 2023/04/25(火) 22:38:01.98 ID:ySwZjRn00

医師に求められてるのは正しい知識ではないってこの三年でよく分かっただろ
AIで医者いらず！とか的外れなんだよ

46: ミルバード(光) [ﾆﾀﾞ] 2023/04/25(火) 22:45:30.07 ID:h4T+aF180

そりゃ最初からカンニングしてるようなもんだしな

47: ↑この人痴漢です(SB-iPhone) [BR] 2023/04/25(火) 22:46:42.67 ID:Di2lGpGr0

>>46
カンニングじゃないだろ
試験勉強したらカンニングって言ってるようなもんだぞ

50: ↑この人痴漢です(SB-iPhone) [BR] 2023/04/25(火) 22:51:52.24 ID:Di2lGpGr0

試験前にネット見たり試験勉強したりできるのは人間と同じ
試験中にネット検索してるわけじゃないんだからカンニングではない

61: イプー(SB-Android) [CN] 2023/04/26(水) 06:18:56.50 ID:m4ISZAIp0

>>50
人間の脳より遥かに多い消えないデータベースに蓄積してんだから条件が違うだろ

52: ドコモダケ(東京都) [ﾆﾀﾞ] 2023/04/25(火) 23:03:06.86 ID:K3XCRkHL0

2022年以降のウクライナ情勢とかは全く答えられないから
データをアップデートしてくれないと答えられない分野だと禅問答になるよ

55: はまりん(大阪府) [US] 2023/04/25(火) 23:18:09.77 ID:r59aaGDy0

もうAIのが胸部X線の写真判定とかも精度高いっていうよな
型通りに一定水準のものを延々こなすような事務系業務はまじで人要らなくなりそ

56: ペコちゃん(茸) [US] 2023/04/25(火) 23:19:44.59 ID:0Q1Wbly60

カンニングとか言ってる奴等多いけど、お前らネット検索可なら受かる自信あんの？

57: りそな一家(大阪府) [DE] 2023/04/25(火) 23:29:29.67 ID:oSuH3THw0

AIの可能性はまだまだ発展性あるけど人間の可能性はもうドン詰まり

58: なるこちゃん(神奈川県) [AR] 2023/04/26(水) 00:15:45.34 ID:ZK1rS62B0

そのうち医者もいらなくなるのかよ

59: いきいき黄門様(沖縄県) [FR] 2023/04/26(水) 00:34:45.74 ID:nE+3pfll0

早く義体化して永遠に生きれるようにしろよ

60: ペコちゃん(光) [CN] 2023/04/26(水) 05:42:32.95 ID:7PsFSprE0

前のバージョンで東大の入試問題で9割取ったりgoogleの3次試験パスしたりしてたからな

85: つくもたん(東京都) [VN] 2023/04/26(水) 09:53:32.78 ID:cuz9U0CM0

>>60
そりゃ、カンニングしていいなら人間でもパスできるわｗｗｗｗ

62: 暴君ハバネロ(京都府) [CN] 2023/04/26(水) 06:20:37.86 ID:6nYytIX30

未だに採血すらできないんだろ

54: ルーニー・テューンズ(愛知県) [SE] 2023/04/25(火) 23:15:22.44 ID:AYc3Khkj0

人生半分くらいルーチンだしな

この記事へのコメント

1. Posted by 名無しクオリティ投稿日：2023年04月28日 10:44

>「医学の文脈において時代遅れ、決定的に間違っている回答もあった」
試験ではいいけどリアルでこれをされると危険だな

2. Posted by 名無しクオリティ投稿日：2023年04月28日 11:05

GPTが出て半年でこれだからな
１０年後にはもはやホワイトカラーで残ってる職業ってほとんどないやろ
みんな肉体労働することになるからちゃんと体力つけておけよ

3. Posted by 名無しクオリティ投稿日：2023年04月28日 11:15

人間に問題と答えを把握させた後にもう一度同じ試験を受けさせたらどれだけ点数が上がるかも一緒にやらないと
何をシレッと二回受けさせて点数が上がっただなんて言ってるのか

4. Posted by 名無しさん＠まとめた古語でつかまりやすい世に投稿日：2023年04月28日 11:19

一概に古いのが古いとは限らない運命論は、
あります。

毒唾
虻や蠅を落とせたら熊に効く
また男女の恋愛の点と線の呪術という
中華拳の毒手以上という説もある

駿府城動物王国

5. Posted by 名無し投稿日：2023年04月28日 11:20

コメ26は自身がAIに諭されたのを気付いてないのか・・・

6. Posted by 名無しクオリティ投稿日：2023年04月28日 11:20

過去問なら、マツがえないからな

7. Posted by 名無しクオリティ投稿日：2023年04月28日 11:25

こういうのって正しい答えが欲しいなら正しい質問をしないといけないんじゃないのかな？
でも正しい答えを知ってるなら質問する意味ない。結局AIは提案をしてくれるだけで気に入らなきゃければリテイク。人間相手の違って何回リテイクしても怒らないってだけ。

8. Posted by 名無しクオリティ投稿日：2023年04月28日 11:38

つか未だにネットから情報拾ってきて整形して出力してるだけだと思ってるアホが多いんだな。

9. Posted by 名無しクオリティ投稿日：2023年04月28日 11:41

ネットでカンニングしながら試験受けてるようなもんだろ

10. Posted by 名無し投稿日：2023年04月28日 11:46

医者いらんなとか言うてる奴、ほんならAIが決めた治療で満足できるか？不安はないんか？
俺はまだAIより人間の医者の方が信用できるけどな

11. Posted by 名無しクオリティ投稿日：2023年04月28日 11:47

一次診察はAIでという世界も近いな。

12. Posted by 名無しクオリティ投稿日：2023年04月28日 11:48

>>8
アホ見っけｗ

13. Posted by 名無しクオリティ投稿日：2023年04月28日 11:50

医療分野については、GPT3/4は不適切で、普通の医療AIを使うべき。
画像解析を使った診断システムなど、かなり進展してきている。

14. Posted by 名無し投稿日：2023年04月28日 11:59

>>1
今はね、今年中にGPT5まで出るんだよ
3年後には別世界です

15. Posted by 名無し投稿日：2023年04月28日 12:01

外科手術もどんどんAIのサポート入ってきてるで。
ただ一番大事なのはそれを使う人間がアホだと全てが終わるから、医者いらずとか言ってるのは当たり前のことと現場のことが分かってないんだなあ。
まあ普通のことが普通にできる医師がいればええんだけど、この普通のことが普通にできるってのが案外難しいことで、全てのことが普通に出来る奴はそれだけで実はスーパーマンだからね。

16. Posted by 名無しクオリティ投稿日：2023年04月28日 12:04

>>12
自分の理解できないものを馬鹿にしてるとガチで置いてかれるよ。LLMの仕組みとそれが実現可能にする物事を考えると社会の仕組みが急速に変化するのは確かなんだからさ。

17. Posted by 名無しクオリティ投稿日：2023年04月28日 12:04

これ文章予測でしょ
だから、英語に直したりして予測しやすいように変えたりしてる
医学知識が足りないって言い方は適切ではないと思う

18. Posted by 名無し投稿日：2023年04月28日 12:05

>>10
まぁまだ医者のが信頼おけるけど、AIの進歩の速度考えると10年後は分からんな

19. Posted by 名無しクオリティ投稿日：2023年04月28日 12:16

>>17
そもそもchatGPTはベースは英語のドキュメントしか学習に利用してなくファインチューニングで日本語覚えさせただけだからな。日本語のワードを網羅できてないんでまともに使いたいなら英語でプロンプト打たないとダメなんよ。

20. Posted by 名無し投稿日：2023年04月28日 12:25

>>10
しばらくはAIがスクリーニングして大事な所をお医者さんが決めるハイブリッドがええよ。
どっちがええじゃなくていいとこ取りしたらええんよ。

21. Posted by 名無しクオリティ投稿日：2023年04月28日 12:55

そのうち、「今日は⚪︎⚪︎先生おやすみなので、替わりにAIの先生に診てもらうことになるんですけどいいですかねー？」とか看護師に言われる日が来るんだろうな。

しかも割と近いうちに。

22. Posted by 名無しクオリティ投稿日：2023年04月28日 13:14

最初から分かっていたことだが改めてAIの方が優秀だという事が判明してしまったか
ホワイトカラー全滅なのは勿論の事、肉体労働すらも今の進化速度だと即代用されそう

23. Posted by 名無し投稿日：2023年04月28日 15:22

コレ系の話題で嬉々として医者はオワコンって言ってる奴よくいるけど医者が淘汰される頃には大抵の仕事は淘汰されてるやろ

24. Posted by 名無し投稿日：2023年04月28日 16:19

>>7
で、本当に正しいこと言ってるのか？って答えを知ってることを敢えて質問するとわけ分からん答えをするっていうね。

25. Posted by 名無し投稿日：2023年04月28日 16:22

>>20
これだよな。
10年後にもAI医者に置き換わるようなことにはならないだろうけど、AIを使わない医者にはかかりたくない、ってなるだろうね。
実際、GPTみたいは分かりやすい人工知能じゃない、もっと初歩的なものであれば既に使ってる機械は多い。
最新の機器を取り入れてます、なんて病院はAIを使ってる、と同義とも言える。

26. Posted by 名無し投稿日：2023年04月28日 16:25

>>15
問題は若手の育成なんだよ。
AIサポートありきで育つとAIが正しいのかどうかの判断が出来ない。
普通のことが普通に、がAIの補助ありきになっちゃうんだよ。
だからって、じゃあ実際の現場で敢えてAIサポート無しの不十分な環境で患者対応するのか？ってのも違う。
座学ならいくらでも出来るだろうけど、実際にやるのとは違うし。

27. Posted by 名無し投稿日：2023年04月28日 16:28

単に理路整然と説明して薬を続けるよう伝えるのは簡単だし、それこそメリットを重要度に比重付して～とかAIの十八番だけど、それだけで薬を続けてくれるなら苦労しない。

28. Posted by 名無し投稿日：2023年04月28日 16:32

>>27
冗談だったり厳しく叱ったり、家庭環境やら世間話やらを交えて親身になっているんだ、ということを伝えてようやく言うことを聞いてみようかな、という気を起こしてくれる。
身体治したいから病院に来てるはずなのに、医者の言うことを聞かない、なんていくらでもあることで、それをいかに対処するか。
服装や歩き方、話し方からこの人はこういう方向がいいかな、と試していく。
そういう医学知識以外の、対人関係スキル的なものも必要で、それはなかなかAIには難しいことだと思う。