ChatGPTでの業務効率化を“断念”──正答率94％でも「ごみ出し案内」をAIに託せなかったワケ 三豊市と松尾研の半年間
コメント
注目のコメント
まずSLAで99%が適切かというのが疑念。50のコストで90%だけど、99%にするには500のコストがかかるとかよくある話。
その上で、トラブルはその対応コストだけでなく社会的信頼にも関わるので、99%に拘りたい意図も理解出来る。
その時、ハルシネーションが起きている確率が一定水準以上なら未回答にし、有人サポートにつなぐようなオペレーションを組むというやり方は無かったのだろうか。
擬似的にSLAを上げるとも言えるし、仮に70%でもそれを検知し、トラブルを未然に防げるなら人材コストは大きく抑えられるはず。
ハルシネーション検知は、こうした「あと一押し」にも使えるはず。うーん。
99%の壁は生成AIとして高いかぁ〜。
今後、AIとはどのように共存していくかが非常に重要であることは間違いないです。
AIが94%の正答率ならば、個人的には合格だと思っていて、あとは改善していくことで率は向上していくはず。職員のダブルチェックの作業の話もありましたが、まだ導入の入口なわけで、費用の面もあるかもしれませんが、もう少し中長期的な視点で考えても良いのでは？？
#AI
#共存
#中長期的視点
