Keenable AI 开源实时搜索基准 NEEDLE，每小时更新查询集

Techub News 消息，AI 搜索公司 Keenable AI 开源实时搜索基准 NEEDLE，该基准每小时从 RSS 订阅源和 Google Trends 等公共来源重建查询集，而非使用固定数据集，以解决模型可能直接读取答案或利用参数记忆的问题。NEEDLE 涵盖新闻、金融、学术、法律和稀有实体查询，通过统一协议对 15 个搜索 API 进行评测，并引入“终极天花板”指标，衡量整个领域可检索的最佳结果。 NEEDLE 作为开源评估工具，可通过 Python CLI 安装运行，需要 OpenRouter 密钥进行评判，支持在笔记本电脑或 CI 环境中使用。评测结果显示，金融类查询接近解决，Exa 得分 0.910，Keenable 为 0.872，Perplexity 为 0.871，Google 为 0.847，而“终极天花板”为 0.965。（MarkTechPost）