- これは、今月行われたカンファレンス「CHI 2024」で、米パデュー大学の研究者チームが発表したもの。それによると、「Stack Overflow」における517の質問に対するChatGPTの回答を分析したところ、そのうち52％に誤った情報が含まれていたという。
- https://internet.watch.impress.co.jp/docs/yajiuma/1594823.html
- 🤖ごときが人間様の仕事奪えると思ったか？
- どのモデルなんやろ？
3か4か4oかで変わってくると思うけど - 今の時点で半数正解できてりゃ充分だろ
- また、これと並行して行われたChatGPTの回答に対する言語分析では、12人のプログラマーを対象にアンケート調査を行ったところ、35％がChatGPTの口調を好ましいと回答、39％は内容の間違いに気付かなかったという。
ここ草生えたわ
- >>6
やっぱAIでいいじゃん - 人間の回答も結構間違ってるからセーフ
- そら人間かて一発でコード書いたらいくらでも間違い出てくるやろ
むしろ半数近くが間違い無かったってすごくね？ - 簡単なLinuxコマンドですら嘘吐かれて4ねと思ったことはある
- その50%は学習したネット知識で解決する簡単な問題やっただけやろ
- その間違いから学習すればいいだけやん
- 勉強にChatGPT活用してる人たまにいるけど絶対知識ガバガバになるやろ
それっぽい文章考えるツールとしか役立ってない - >>12
だって文章生成ＡＩやもん当たり前なこと言うな - >>16
いや鵜呑みにするバカ実際にいるんやて - Google検索は98%いらない情報のなのでセーフ
- この大学チームはＡＩ学習の意味もわかってないのか？
ミス繰り返してどんどん精度高めていくんやで
いま50％でもどんどん精度高くなって99％になるからな - ちょっとしたもんわええけど
エラー解決につかえんわ - 半分あたってるならグーグルで検索するより使えるわ
- 単に質問の仕方が不味いんじゃないの
ちゃんとした質問文作るとかなりの制度で作るし、この行の意味は？とかにも下手なサイトより丁寧に解説してくれるが - こんな産まれたばかりの赤ちゃん相手に勝った負けた言うとるってことは勝負にすらならなくなる日も近いな
- ググッて出てくる事には答えるけど
ググッても出てこないこと聞くと意味不明な事返してくる
意味の無い存在 - >>23
肉体持たせて日常に溶け込ませて各機が人間との関わりの中で学習して毎日0時に全機学習データマージこれで知識の広さと深さを爆発的に広げることができるな
- 一度の質問で半分も正解出せるとかクソ有能やん人間には絶対無理
- プログラミング専用のaiがどうせ出るからそれまで我慢やな
- ホンマに有能だと言うなら、Teamsのメッセージ拡張機能を使ってM365 CopilotにBing検索するプラグインを実装する知識を授けてみせろと言いたい
- まぁこんなもんやろと思いながら使ってるわ
ないより全然マシ - 完璧になられたらプログラマーが失業する
- ワイは30％やぞ
- AIは現段階では知識源としては使えないと何度言えば
- 仕事で技術調査ようやるけどマジで今のAIは使い物にならんぞ
コツコツ地道に論文読んだりドキュメント漁ったりするしかない - 言語にもよるよな
- なんかチャットGPTのことをなんでもできる万能ロボットやと勘違いしとるやつ多いよな
明確に得意不得意があって使い方次第でしかないのに重箱の隅をつつくかのように「まだ⚪︎⚪︎ができてない！」みたいなこと言うの意味ないと思うんやわ
【人間勝利】プログラミングに関するChatGPTの回答、半数以上が間違い
エッヂ
コメント