伝えられるところによると、GoogleはGeminiの回答の評価に取り組む請負業者に対し、専門分野外のプロンプトを評価するよう求めているという。報告書によると、マウンテンビューに本拠を置くこの巨大テクノロジー企業は、請負業者が回答を評価する対象について十分な知識がないと判断した場合に使用されていた、プロンプトをスキップするオプションを削除した。チャットボットにとって人工知能(AI)の幻覚が大きな懸念事項となっているため、今回の開発報告により、高度な技術的な話題に関してジェミニの応答の質が低下する可能性がある。
Googleは請負業者にGeminiプロンプトをスキップさせないと報じられている
TechCrunchのレポートによると、GoogleはGeminiに取り組んでいる請負業者に新しい内部ガイドラインを送ったという。この出版物は、テクノロジー大手から送られたメモを見たと主張し、これらの請負業者は現在、回答を正しく評価する知識を持っていない場合でも質問に答えるよう求められていると主張している。
伝えられるところによると、グーグルはジェミニの対応の評価を日立傘下の企業グローバルロジックに委託しているという。 Gemini に取り組む請負業者は、技術的なプロンプトを読み取り、真実性や正確性などの複数の要素に基づいて AI の応答を評価する任務を負っていると言われています。チャットボットを評価するこれらの個人は、コーディング、数学、医学などの特定の分野の専門知識を持っています。
これまでのところ、請負業者は、自社のドメイン外にある場合、特定のプロンプトをスキップできる可能性があると報告されています。これにより、Gemini によって生成された技術的応答を理解し、評価する資格のある人だけがそうすることが保証されました。これは基礎モデルの標準的なトレーニング後の実践であり、AI 企業が対応を安定させ、幻覚の発生を減らすことができます。
しかし、GlobalLogic が先週、応答が「情報が完全に欠落している」場合、または評価に特別な同意書が必要な有害なコンテンツが含まれている場合を除き、請負業者はプロンプトをスキップすることはもう許可されないという新しいガイドラインを先週発表したと報じられたことで状況は変わりました。
報告書によると、新しいガイドラインでは、請負業者は「専門分野の知識を必要とするプロンプトをスキップ」すべきではなく、プロンプトの理解している部分を評価する必要があると述べられています。伝えられるところによると、彼らはドメインの知識がないことを記したメモを添付するよう求められたとのことです。
ある請負業者は内部コミュニケーションで「スキップする目的は、より優れた人に任せて精度を高めることだと思った」と述べたと同誌は主張した。