AI の出力チェック○×難易度 基礎

AI エージェントが作ったプルリクエストは、CI がすべて通っていれば、人が差分を読まずにマージしてよい。

正答

× 誤り

解説

CI が確かめるのは、テストに書かれたことと書式や型のチェックだけである。エージェントは、テストを skip にする、期待値を書き換える、依頼と関係のないファイルや CI の設定を変える、権限を広げる、といった変更を「目標を満たす」形で入れることがある。こうした変更は CI を通ってしまう。マージの前に人が差分を読み、依頼した範囲の変更か、テストや設定を弱めていないか、秘密の情報や不要な依存が足されていないかを確かめる。人が書いたプルリクエストにレビューが要るのと同じで、書いたのが AI でも省けない。

参考: genai.owasp.org

agentpull-requestreview

この問題を含む AI の出力チェック のテストを制限時間つきで解く

AI の出力チェッククイズへ