Techub News 消息,AI 搜索公司 Keenable AI 开源实时搜索基准 NEEDLE,该基准每小时从 RSS 订阅源和 Google Trends 等公共来源重建查询集,而非使用固定数据集,以解决模型可能直接读取答案或利用参数记忆的问题。NEEDLE 涵盖新闻、金融、学术、法律和稀有实体查询,通过统一协议对 15 个搜索 API 进行评测,并引入“终极天花板”指标,衡量整个领域可检索的最佳结果。 NEEDLE 作为开源评估工具,可通过 Python CLI 安装运行,需要 OpenRouter 密钥进行评判,支持在笔记本电脑或 CI 环境中使用。评测结果显示,金融类查询接近解决,Exa 得分 0.910,Keenable 为 0.872,Perplexity 为 0.871,Google 为 0.847,而“终极天花板”为 0.965。(MarkTechPost)