ai-driven-dev-wiki
Search
Search
Dark mode
Light mode
Explorer
ベンチマーク
50 items with this tag.
Oct 16, 2026
Open-Prompt-Injection
プロンプトインジェクション
セキュリティ
ベンチマーク
llm
Oct 16, 2026
Mini-SWE-Agent
コーディングエージェント
エージェントアーキテクチャ
オープンソース
ベンチマーク
Oct 16, 2026
UniToolCall:LLM エージェントのためのツール利用の表現・データ・評価の統一
エージェント
ツール利用
評価
ベンチマーク
ファインチューニング
Oct 16, 2026
ツール呼び出しの苦い教訓
ツール利用
エージェント
ベンチマーク
実証研究
Oct 16, 2026
SWE-Review: エージェント型コードレビューによるイシュー解決のループの閉鎖
コードレビュー
エージェント
ベンチマーク
Oct 16, 2026
大規模言語モデルに基づくコード生成タスクの三次レビュー:動向、課題、今後の方向性
コード生成
三次レビュー
評価
ベンチマーク
ソフトウェアエンジニアリング
Oct 16, 2026
SWE-Compass: 大規模言語モデルのエージェント型コーディング能力の統一的評価に向けて
評価
エージェント
ベンチマーク
Oct 16, 2026
SWE-bench-java:Java 向けの GitHub イシュー解決ベンチマーク
ベンチマーク
評価
コーディングエージェント
ソフトウェアエンジニアリング
Oct 16, 2026
SWE-bench Multimodal:AI システムは視覚的なソフトウェア領域に汎化するか?
ベンチマーク
評価
コーディングエージェント
マルチモーダル
Oct 16, 2026
SWE-Bench+:LLM 向けの強化版コーディングベンチマーク
ベンチマーク
評価
コーディングエージェント
Oct 16, 2026
質問応答からタスク完遂へ:エージェントシステムとハーネス設計に関するサーベイ
エージェントアーキテクチャ
評価
ベンチマーク
コンテキストエンジニアリング
サーベイ
Oct 16, 2026
LLM を活用したエージェント型システムのソフトウェアエンジニアリングにおけるベンチマークとソリューションの包括的サーベイ
エージェント
ソフトウェアエンジニアリング
ベンチマーク
サーベイ
Oct 16, 2026
SkillsBench:多様なタスクにおける Agent Skills の有効性のベンチマーク
エージェントスキル
ベンチマーク
評価
Oct 16, 2026
NL2Repo-Bench:コーディングエージェントの長期的なリポジトリ生成の評価に向けて
コーディングエージェント
ベンチマーク
長期タスク
Oct 16, 2026
MCPTox: 実世界の MCP サーバーに対するツールポイズニング攻撃のベンチマーク
mcp
セキュリティ
エージェント
ベンチマーク
Oct 16, 2026
MCPToolBench++: 大規模な AI エージェント向け Model Context Protocol(MCP)ツール利用ベンチマーク
ベンチマーク
評価
ツール利用
mcp
Oct 16, 2026
LoopsBench:コーディングエージェント評価におけるハーネスエンジニアリングからループエンジニアリングへ
ベンチマーク
評価
コーディングエージェント
ループエンジニアリング
Oct 16, 2026
LiveCodeBench:コード向け大規模言語モデルの包括的で汚染のない評価
ベンチマーク
コード生成
評価
データ汚染
Oct 16, 2026
エージェントのツールを作る LLM エージェント
エージェント
ツール利用
ベンチマーク
評価
Oct 16, 2026
Alibaba LingmaAgent:包括的なリポジトリ探索による自動イシュー解決の改善
ソフトウェアイシュー解決
ai-コーディングエージェント
リポジトリ理解
ベンチマーク
Oct 16, 2026
InterCode:実行フィードバックを用いた対話的コーディングの標準化とベンチマーク
ベンチマーク
コード生成
実行フィードバック
Oct 16, 2026
FeatureBench:複雑な機能開発におけるエージェント型コーディングのベンチマーク
ベンチマーク
評価
コーディングエージェント
Oct 16, 2026
ポジション:コーディングベンチマークはエージェント型ソフトウェアエンジニアリングと噛み合っていない
ベンチマーク
評価
エージェントハーネス
測定妥当性
Oct 16, 2026
LLM ベースのエージェントの評価に関するサーベイ
エージェント
評価
ベンチマーク
Oct 16, 2026
オープンソースコミュニティの AI コントリビューションルールに対するコーディングエージェントの遵守状況の初見
オープンソース
ai-ガバナンス
コーディングエージェント
ベンチマーク
実証研究
Oct 16, 2026
解答リーク
ベンチマーク
評価
Oct 16, 2026
インフラストラクチャノイズ
評価
ベンチマーク
エージェント型コーディング
Oct 16, 2026
データ汚染
ベンチマーク
評価
Oct 16, 2026
TM-Bench
ベンチマーク
評価
ツール利用
Oct 16, 2026
SWE-Review-Bench
コードレビュー
ベンチマーク
エージェント
Oct 16, 2026
τ-bench
エージェント評価
ベンチマーク
ツール利用
Oct 16, 2026
SWE-Compass
評価
エージェント
コーディングエージェント
ベンチマーク
Oct 16, 2026
SWE-bench-java-verified
ベンチマーク
評価
コーディングエージェント
ソフトウェアエンジニアリング
Oct 16, 2026
SWE-bench Multimodal
ベンチマーク
評価
コーディングエージェント
マルチモーダル
Oct 16, 2026
SWE-Bench+
ベンチマーク
評価
コーディングエージェント
Oct 16, 2026
RepoComplianceBench
ベンチマーク
オープンソース
ai-ガバナンス
コーディングエージェント
Oct 16, 2026
SkillsBench
エージェントスキル
ベンチマーク
評価
Oct 16, 2026
SpecGenBench
形式仕様
プログラム検証
ベンチマーク
Oct 16, 2026
NL2Repo-Bench
コーディングエージェント
ベンチマーク
長期タスク
Oct 16, 2026
ProjectDev
ベンチマーク
評価
コード生成
マルチエージェント
Oct 16, 2026
MCPTox
mcp
セキュリティ
ベンチマーク
Oct 16, 2026
LiveCodeBench
ベンチマーク
コード生成
評価
データ汚染
Oct 16, 2026
LoopsBench
ベンチマーク
評価
コーディングエージェント
ループエンジニアリング
Oct 16, 2026
MCPToolBench++
ベンチマーク
評価
ツール利用
mcp
Oct 16, 2026
FeatureBench
ベンチマーク
評価
コーディングエージェント
Oct 16, 2026
CodeContests
コード生成
競技プログラミング
ベンチマーク
Oct 16, 2026
Defects4J
プログラム修復
ベンチマーク
java
Oct 16, 2026
EvoClaw
エージェント
ベンチマーク
Oct 16, 2026
AACR-Bench
コードレビュー
ベンチマーク
評価
Oct 16, 2026
エージェント型コーディング評価におけるインフラストラクチャノイズの定量化
評価
ベンチマーク
エージェント型コーディング