github

定義

Git リポジトリのホスティングと、issue やプルリクエストによる共同開発を提供するサービス。この分野では公開リポジトリがコード生成モデルの学習データ源であり、同時に実在のバグ報告と修正履歴から評価課題を組み立てる材料にもなっている。実務に近い評価が作れる背景。

論文題名での読み方

実課題の出どころ

この語が出てくる解説

• 論文解説: Repo-To-Skill — GitHubリポジトリを「AIのためのスキル」に蒸留するRepo-To-Skill: Distilling GitHub Repositories Into AI4AI Skills
• エージェント評価ベンチ地図 — SWE-bench・GAIA・OSWorldは何を測るかSWE-bench: Can Language Models Resolve Real-World GitHub Issues?
• エージェント評価 — ベンチとハーネスの作法SWE-bench: Can Language Models Resolve Real-World GitHub Issues?