山本一郎（やまもといちろう）最近あまりにも忙しすぎるので、一般向け解説のウェブ記事を書く時間もYoutube撮影もできずにおります。困った。空き時間にまあまあパワーのUbuntuマシン作ってそこにLLM入れて、返信叩き台作る用の人工知能山本君を個人的に作って試験運用しています。
結論から言いますと、60点ぐらいです。
よくクソウェブサービスがコールセンター人件費ケチるために窓口にチャットボットを置くのと同じような感じで、先方から問い合わされた内容をそれっぽく項目立てて返答できるのは情報をあらかじめ仕込んだところまでで、教師データが充分あったにもかかわらずゴミのような回答を吐き出してくるのでかなりチューニングしてました。
ただし、日本共産党とかの地方議員の皆さんとかからたまにやってくる、いちゃもんみたいな言いがかり連絡については「役所の公式サイトをご参照ください」みたいな木で鼻を括る対応をエレガントに返してくるのでそこはとても気に入っています。
最近では、あいかわらず週10件ぐらい来る「山本太郎への抗議メール」や「反ワクチン陰謀論者からの罵倒メール」はGmailに繋ぎ込んでそれと判断した場合にはボタン一発で馬鹿にする発言を折り返せるようになりました。便利！
しかし、本当にやりたかったことはそれじゃないんですよね。毎回せっせと作ったペーパー喰わせて関連法規全部一覧に出させて何か打診や連絡事項があったら便覧につけられるよう工夫してますが、地味にハルシネーションというか間違いを発見し、しかもLLMは意図せず嘘を混ぜてくるのでとても自然です。うっかり議員の先生に折り返すときに送る直前で先生の選出選挙区が間違っていたり、参照する条文の中身が架空だったりすることが判明するため、とてもじゃありませんが全自動では無理じゃないかと思います。
あるいは、自治体とのやり取りの中で特定の法律に基づいた定型業務返答文的なのは劇的に改善するのですが、間違った連絡を自治体職員さんからもらうと山本一郎LLMであるがゆえに「お前なに言ってんだよ」とか「馬鹿じゃねえの」など返信してしまうのでかなり改良が必要です。やはり、コアになる人格や資料が良品質で高潔でも技術が未熟なのでナチュラルに相手を罵倒したり中傷したりしてしまうのは難がありますね。
https://jbpress.ismedia.jp/search/author/%E5%B1%B1%E6%9C%AC+%E4%B8%80%E9%83%8E
