【IT】プログラミングに関するChatGPTの回答、半数以上に何らかの間違いが含まれるとの研究結果

あわせて読みたい

2:名刺は切らしておりまして 転載ダメ2024/05/28(火) 20:05:20.76ID:+3wiHMH1

知ってる

3:名刺は切らしておりまして2024/05/28(火) 20:07:43.06ID:QT1vCOXg

ChatGPTは
平気で嘘をついているのか
間違っているのか
分かっているけど一旦適当に応えているのか
指摘すると謝って別の回答を提示するけど
反省はしていないように感じる

112:名刺は切らしておりまして2024/05/30(木) 10:30:14.07ID:apUXTeqa

>>3
やる気のない時は適当に答えてる
苦情が入ってきたら本気を出す

5:名刺は切らしておりまして2024/05/28(火) 20:18:35.70ID:wBuPXoWK

そんなことはわかって上で使ってる。それでも自分で書くより圧倒的に早く書ける

6:名刺は切らしておりまして2024/05/28(火) 20:22:06.79ID:uOG87MXQ

間違いを見つけたら直せばいいのよ
勘定系や学術系、法務系に使わなければ問題ない

7:名刺は切らしておりまして2024/05/28(火) 20:28:29.65ID:Pl0RXLh5

まあスキルの低い奴にとってはありがたいんだろうな

8:名刺は切らしておりまして2024/05/28(火) 20:30:48.48ID:aK4k10lq

BASICで数当てゲーム作らせたらバグだらけだった

10:名刺は切らしておりまして2024/05/28(火) 20:57:59.29ID:nKJdvIr0

解のない、または状況で正解が変わる
ふわっとした回答のほうが得意なんだよね
人間がAIに求めるのは真逆なんだけど

11:名刺は切らしておりまして2024/05/28(火) 21:00:37.23ID:z4GLzqPw

最近複数回答するのようになってめんどくさくなった

13:名刺は切らしておりまして2024/05/28(火) 21:12:01.43ID:ArS9yj3E

ここ最近やってないけど
間違ってる箇所を指摘し続ければ直すぞ

16:名刺は切らしておりまして2024/05/28(火) 21:46:28.72ID:Wbx9Q4He

AIは正解が必要なものよりも、正解がない文系のお仕事向き。
弁護士とか法案制定とかだね。

91:2024/05/29(水) 17:42:53.37ID:rMo8pfqv

>>16
3.5では根拠条文を捏造してたから安心はできない
4oはあんまり嘘つかないけどね

けど、安心して使うには、校閲、ブレインストーム、要約あたりが無難

17:名刺は切らしておりまして2024/05/28(火) 21:51:41.47ID:lb/Ww8f+

プログラミングは見る人が見ればわかるからプログラマが使う分には困らないんだよ
こういう記事を真に受けて生産性を上げる機会を失うのもったいなさすごる

26:名刺は切らしておりまして2024/05/28(火) 22:47:07.66ID:nG+vVQlx

>>17
これ。
雛形作るには十二分なんだよな。

21:名刺は切らしておりまして2024/05/28(火) 22:14:20.35ID:5O8KFKkg

>「Stack Overflow」における517の質問に対するChatGPTの回答を分析したところ
そもそも学習してるStackOverflowの回答が間違ってるからな。

23:名刺は切らしておりまして2024/05/28(火) 22:35:14.85ID:A0tSI2Zx

AIが出力した間違った情報がインターネットに広がって、それをまたAIが学習してえらいことになり始めているとか

33:名刺は切らしておりまして2024/05/28(火) 23:42:42.75ID:/s8eCpj0

いい加減な知識しか持たない奴ばっかになって何かあっても対応できなくなる未来しかない

39:名刺は切らしておりまして2024/05/29(水) 00:11:25.86ID:ZR/OlGwm

文章を書くってのが当たり障りの無い単語でマス目を埋める作業だと思ってる人間多いからな。
そういう人間にとっては当たり障りの無い単語を吐き出しげくれるのはありがたいだろうな。

43:名刺は切らしておりまして2024/05/29(水) 01:05:53.77ID:wm0skGyE

間違ってるけど、打鍵数が減ったし楽だわ
人間使っても同じようなもん

45:名刺は切らしておりまして2024/05/29(水) 02:20:22.57ID:LsMyaVtV

ざっくりしたものしか作れんよな今のとこ
こまかな定義が求められる現場じゃまるで使えん

46:名刺は切らしておりまして2024/05/29(水) 02:33:45.50ID:fOtPjf0q

AIが書いたコードでもテストして動けば問題なし
行数増えてきたらもうAIに書かせて後はテストの繰り返し
それでも圧倒的なスピードになる

48:名刺は切らしておりまして2024/05/29(水) 06:29:34.70ID:JX8wAiqL

バージョン4oは目玉が飛び出るぐらい高性能。
3.5での研究結果じゃないか?

49:名刺は切らしておりまして2024/05/29(水) 06:45:21.44ID:rkQlpIm

プログラミングに使ってるけど出てきたエラーコードコピペして修正させるのを繰り返せばすぐに使えるのが完成するよね。

50:名刺は切らしておりまして2024/05/29(水) 06:49:04.92ID:RNHBrArK

プロンプトに問題があるのだろ

59:名刺は切らしておりまして2024/05/29(水) 11:33:14.13ID:TtgpUfFW

いまだに誤回答ガーとか言ってる道具の使い方の分からないアホは放っておけばいい

65:名刺は切らしておりまして2024/05/29(水) 12:45:23.01ID:KZP6B8EB

人間が一発で書いたコードに間違いが含まれる割合は何%あんのよ

67:名刺は切らしておりまして2024/05/29(水) 13:01:55.52ID:V05537+r

何でもできるといまだに勘違いしている人が多いのだな
使い方を知っていれば便利な道具ではあるが

68:名刺は切らしておりまして2024/05/29(水) 13:07:44.25ID:JU25x+wp

知ってた
複数のAIに同じ質問投げて、一番優秀なのを採用してるわ

70:名刺は切らしておりまして2024/05/29(水) 13:26:33.00ID:uNIolN71

結局はネット検索して出てきた内容をまとめてるだけだからな。
出てきた情報が間違っているかどうかを検証もしないで適当に組み立てるんだからそりゃ間違いだらけにもなるわ。

71:名刺は切らしておりまして2024/05/29(水) 13:38:05.43ID:Y1dMEBXC

即答したプログラムの48%にバグが含まれないとか、
これ、そこらのプログラマーより遥かに能力高くねーか?

73:名刺は切らしておりまして2024/05/29(水) 13:49:28.75ID:G9xejpRu

間違ってる前提で進めればいいだけのこと
それでも通常作業以上の効率性がある

76:名刺は切らしておりまして2024/05/29(水) 14:11:09.97ID:rCxOuEt5

書くより読み解く方が難しいからなプログラミングは

81:名刺は切らしておりまして2024/05/29(水) 14:42:27.47ID:4MHHKC93

とは言え自分でググって宣伝まみれのしょうもないページ見るよりは効率的

83:名刺は切らしておりまして2024/05/29(水) 14:49:11.90ID:ND8C474

生成AIが論理的でないと言ってますが
論理とは人間の都合の納得の話も多いのです
言い変えると納得できる話のつながりを論理といい
それは納得がそれぞれの文化や個人の意図によって違うのですから人によって受け止め方は違うものなのです

プーチンの論理とゼレンスキーの論理は全く違います

いろいろ文句言ってる方々の主張自体がそういう印象ですね

論理ではなく言葉の使われ方の関連度合いを維持してそれで言葉を綴っているわけです
それは論理的な作文なのです

文をコピーしてるわけではなく
言葉の使われ方の法則をベクトル化してそれに基づき作文してるのですから論理的です

論理的でないという方々の論理的でないこそ論理的ではありません

87:2024/05/29(水) 15:42:30.32ID:qcHcsoB8

AIはまだまだ発展途上

Windowsがいつまで経っても修正updateしなければ使い物にならないのと同じ

93:名刺は切らしておりまして2024/05/29(水) 18:30:41.62ID:BHZhJFBC

直し作業しているうちに、最初から自分でやった方が早かったとなった。

94:名刺は切らしておりまして2024/05/29(水) 19:22:03.26ID:C9Jo3QKv

成長しない新人にやらせて、全部確認した上で手直しするぐらいなら
最初から自分でやった方が楽

99:名刺は切らしておりまして2024/05/30(木) 01:36:53.97ID:SjUtF/KL

chatGPTに回答に間違いあるって言うけど、人間に問い合わせたって大した答え返ってこないから全然問題ないよ。回答確認しないでそのまま使うなんてあり得んし。

101:名刺は切らしておりまして2024/05/30(木) 02:12:45.79ID:L3d50Siy

これアホの3.5使っての結果だからな

106:名刺は切らしておりまして2024/05/30(木) 07:34:09.61ID:lRdUqRX0

嘘を嘘として見抜ける人じゃないとAI使うのは難しい

108:名刺は切らしておりまして2024/05/30(木) 08:09:56.64ID:3VkpMgkx

javascriptに関してはほとんど間違いないような
アホな俺でもgpt先生の言いなりでTampermonkeyのスクリプトたくさん作ってるよ

113:名刺は切らしておりまして2024/05/30(木) 10:54:39.87ID:YBAYO2HM

それっぽいのを適当にかき集めてくるだけで自分で判断できないからな
3歳児みたいなもんだ

115:名刺は切らしておりまして2024/05/30(木) 11:50:13.71ID:zHyPtKNM

有能な人はGPTを有効利用するための努力する、無能は有効には使えなかった例を一つ見つけて自分が使う努力する必要ないと何もしない自分を正当化してそれで終わり
一生そういう思考、行動様式を繰り返して自らの力で状況変えることがない

122:名刺は切らしておりまして2024/05/31(金) 17:08:31.89ID:fAYoJAZL

間違いというか、こちらの与える条件や仕様が適切ではない、が本当のところじゃないかなぁ
人間だとそういう場合「ここどうしましょう?」と聞いてくるけど、AIは自分の労力に頓着しないので
まずはガーッと作ってしまう。間違うことも普通にあるけど、本当にこちらが正しく指示をしていて
間違う確率は半分なんかよりも大分低い

125:名刺は切らしておりまして2024/05/31(金) 18:03:13.81ID:BooOfKlx

それはあまりあてにするなよというメッセージだ

130:名刺は切らしておりまして2024/05/31(金) 19:51:06.36ID:Njr2rZvZ

そんなこと最初からわかっているよ。今頃、何を言ってるの?
それで研究費を無駄遣いして、自分の給料をがめているのか?

132:名刺は切らしておりまして2024/06/01(土) 10:25:16.29ID:Eij8fIgW

多分しばらくすると文字うつことも時代遅れになると思う
なんかそういう感じがしてきた
打って感情伝えるって窮屈だなって

136:名刺は切らしておりまして2024/06/01(土) 13:00:44.47ID:oC/0I0Aj

ハノイの塔が解けないのは解決したんか?

146:名刺は切らしておりまして2024/06/01(土) 19:38:49.50ID:XI+VEp3S

エクセルのマグロとか修正してくれて便利

148:名刺は切らしておりまして2024/06/01(土) 21:26:59.31ID:Ctp1TSWW

Excelの色んな処理でVBAをよく作らせるけど、めっちゃ使える。かなり業務効率化できてる

153:名刺は切らしておりまして2024/06/02(日) 04:51:12.36ID:j0R+dbF

それでもgeminiの遥か上を言っているという

157:名刺は切らしておりまして2024/06/02(日) 16:37:13.35ID:l6/cjdlx

ネットに嘘がなければAIも嘘をつかない

160:名刺は切らしておりまして2024/06/04(火) 21:58:26.55ID:U5Il/pq9

上手く誘導しないとまともな答えが返って来ない

164:名刺は切らしておりまして2024/06/08(土) 02:08:03.06ID:E1kF90nE

学習してない事でも知らないと言えずデタラメ回答
こんなサービスは日本の企業じゃ絶対リリースできない

こんな記事も読まれてます