news 2026/9/3 0:13:18

2025_NIPS_Follow-the-Perturbed-Leader Nearly Achieves Best-of-Both-Worlds for the m-Set Semi-Bandit

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
2025_NIPS_Follow-the-Perturbed-Leader Nearly Achieves Best-of-Both-Worlds for the m-Set Semi-Bandit

文章核心总结与翻译

一、主要内容

本文聚焦m-集半臂赌博机问题(从d个臂中精确选择m个臂的组合半臂赌博机场景),研究了Follow-the-Perturbed-Leader(FTPL)算法在对抗性和随机性环境下的性能。在对抗性环境中,已知Follow-the-Regularized-Leader(FTRL)算法能达到O(√(nmd))的最优遗憾界,但需通过优化问题计算臂选择概率;而FTPL算法通过随机扰动选择损失最小的m个臂,无需复杂计算。作者证明了带Fréchet扰动的FTPL算法在对抗性环境下达到近最优遗憾界O(√(nm)(√(d log d)) + m^(5/6)),在随机性环境下实现对数级遗憾界O(∑(log n)/Δ_i)(Δ_i为非最优臂的次优间隙),接近“两全其美”(Best-of-Both-Worlds, BOBW)性能。同时通过下界证明,算法中的额外因子(log d和m(5/6)/d(1/2))无法通过现有方法移除,进一步改进需全新分析框架。

二、创新点

  1. 首次将FTPL算法扩展到m-集半臂赌博机场景,实现了对抗性和随机性环境下的近BOBW性能(m ≤ d/2时)。
  2. 扩展了FTRL分析框架,适配m-集动作空间凸包无内点的特性,简化了原有证明逻辑。
  3. 解决了m-集半臂赌博机中臂选择概率结构复杂的分析难题,通过Fréchet扰动的特性保证算法效率。
  4. 建立了算法的下界,明确现有方法的性能极限,为后续研究指明方向。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/8/31 9:31:56

新手友好:全面解析克隆Demo代码仓库的操作步骤!

即使你从未使用过Git,也能通过本教程轻松掌握克隆Demo代码仓库的方法。整个过程简单直观,只需几个命令即可完成。接下来,我们将分阶段讲解操作流程,确保每位新手都能一次成功。 一、下载模组的示例代码 下载示例代码到一个合适的项…

作者头像 李华
网站建设 2026/9/2 11:48:34

模组日志技术体系介绍 !

模组日志技术体系融合了日志规范、输出通道、异步写入与过滤策略,形成一套标准化的信息记录方案。该体系支持多环境适配,确保在开发、测试与生产环境中均能提供一致的日志服务质量。一、本文讨论的边界本文是对 4G 模组, 以及 4GGNSS 模组的日…

作者头像 李华
网站建设 2026/9/1 23:14:06

揭秘:LuatOS-Air脚本移植LuatOS中的注意事项

LuatOS-Air为轻量化设计,部分系统机制被简化或异步处理,而标准LuatOS更强调完整性和稳定性。当脚本迁移后,看似正常的代码可能因事件循环差异、GC策略不同或外设释放不及时而悄然失效。这些“看不见”的问题极具迷惑性,本文为您揭…

作者头像 李华
网站建设 2026/8/30 1:16:31

AI智能体记忆系统完全指南:从形式、功能到动态的三维解析

本文提出了首个针对AI智能体记忆机制的统一分类体系,从形式(令牌级、参数化、潜在记忆)、功能(事实记忆、体验记忆、工作记忆)和动态(形成、演化、检索)三个维度解构了记忆系统,厘清了Agent Memory与RAG、Context Engineering的边界。该框架解决了当前研…

作者头像 李华
网站建设 2026/9/2 23:58:30

P4053 [JSOI2007] 建筑抢修 [堆 + 后悔贪心]

P4053 [JSOI2007] 建筑抢修 时间限制: 1.00s 内存限制: 128.00MB 复制 Markdown 中文 退出 IDE 模式 题目描述 小刚在玩 JSOI 提供的一个称之为“建筑抢修”的电脑游戏:经过了一场激烈的战斗,T 部落消灭了所有 Z 部落的入侵者。但是 T 部落的基地里…

作者头像 李华
网站建设 2026/8/29 14:33:02

解决RAG三大痛点!TAdaRAG动态图谱构建方法详解,收藏起来慢慢学

TAdaRAG创新解决传统RAG知识碎片化问题,通过动态构建任务专属知识图谱替代静态图谱。其两阶段训练框架先利用监督学习进行知识抽取冷启动,再通过强化学习优化知识表示,有效减少噪音干扰并提升多跳推理能力。实验证明该方法在医疗、法律等领域…

作者头像 李华