Search-Time Contamination in Deep Research Agents: Measuring Performance Inflation in Public Benchmark Evaluation

Yongjie Wang, Xinyue Zhang, Kunhong Yao, Zhiwei Zeng, Kaisong Song, Jun Lin, Zhiqi Shen

Jun 5, 2026 at 04:00

2 Visninger

0 Kommentarer

arXiv:2606.05241v1 Announce Type: cross Abstract: Public benchmarks enable fair and reproducible evaluation of LLM reasoning, but they become fragile for deep research agents that actively search the web during inference. Such agents may retrieve public benchmark metadata, question context, or even ground-truth answers via web search. This gives...

Læs hele artiklen hos kilden.

Læs original artikel

Var dette nyttigt?

Del:

Kommentarer (0)

Vennligst logg inn for å skrive en kommentar

Ingen kommentarer ennå. Bli den første til å kommentere!

Relaterede nyheder

Lenke kopiert til utklippstavlen

Search-Time Contamination in Deep Research Agents: Measuring Performance Inflation in Public Benchmark Evaluation

Kommentarer (0)

Relaterede nyheder

Five big questions about the UK's under-16s social media ban

”Ericssons nya vd har jobbat där sedan 2g – nästa skifte blir existentiellt”

[Ekstra] KI gir foreløpig begrenset gevinst i norske virksomheter

[Ekstra] USAs Anthropic-stopp vekker debatt: : – Vårt ansvar, ikke Trumps

ShowCase: Mammotion Luba 3 tar sikte på stökiga tomter

Gennemse efter kategori