AI 算法 · 2026年11月11日(周三)

机器学习、人工智能、自然语言处理、计算机视觉、多智能体。

RSS 订阅
arXiv cs.LG · cs.AI

Quantifying the Sampling Frequency Invariance of Time-Series Foundation Models for Sensor Data Applications

说明量化时间序列基础模型在传感器数据上对采样频率的不变性

简介论文评估了四种时间序列基础模型(MOMENT、Chronos-2、Moirai-MoE、TimesFM)在采样频率变化时的稳定性,即采样频率不变性。作者用三个新指标FSI、FDI和CDI,分别从嵌入偏移、预测性能下降和下游任务性能下降三方面进行测量。研究认为,这种不变性取决于信号原生采样频率与任务所需带宽之间的余量,性能下降在很大程度上反映的是信息损失。

Sourish Gunesh Dhekane, Abinaya Kumar, Torsten Woertwein 等

arXiv cs.LG

DnNP: Denoising Input Uncertainty in Neural Processes

说明DnNP:在神经过程中对输入不确定性进行去噪

简介神经过程(NP)是一类可进行不确定性量化的灵活元学习模型,但标准框架假设输入无噪声。本文提出去噪神经过程(DnNP),通过变分推断显式建模输入不确定性,同时学习对受损输入去噪并完成元学习。在合成数据和真实空气质量传感器的PM2.5空间插值任务中,相比标准NP,DnNP在预测与不确定性量化上均有提升,RMSE最多降低30%,NLL最多降低73%。

Fatemeh Tohidian, Chengzhi Shi, Soomi Lee 等

arXiv cs.SD · cs.CL · eess.AS

Earlybird: Predictive Streaming Speech Recognition in 29M Parameters

说明Earlybird:29M 参数的预测式流式语音识别模型

简介这篇论文提出 Earlybird,一个 2900 万参数的流式语音识别模型,4 比特量化后约 16.8 MB。它在随机截断的音频上训练,要求在词尾结束前就预测出已到时间的词,并猜测后面两个词。在 LibriSpeech test-clean 上,中位词在说话人说完前 90 毫秒就被正确预测,而已发布的流式模型则在词结束后 90 到 400 毫秒才给出结果。

Sahil Mahendrakar

arXiv cs.CV

OnlyAct: Extracting Action Representations from Foundation Models for World Models

说明OnlyAct:从基础模型中提取用于世界模型的动作表示

简介视频世界模型需要动作标签,而标签稀缺且难以扩展。本文不从零学习动作,而是以预训练基础模型V-JEPA 2的帧对嵌入为起点,通过无标签的对比适应框架,拉近同一运动不同场景的帧对、推开同一场景不同运动的帧对,从而提取动作并丢弃场景信息。论文在机器人操作、相机导航、游戏和驾驶等基准上评估动作表达力、场景不变性和动作条件视频生成质量,结果显示其表示比无标注的潜在动作方法更具表达力,且场景不变性相当。

Runjia Li, Minghao Chen, Junyu Xie 等

arXiv cs.AI

Evaluating LLM-Generated World Models for Neuro-Symbolic Reasoning

说明评估大语言模型生成的世界模型用于神经符号推理

简介论文研究五个大语言模型能否把开放式自然语言情境转化为部分可观测随机博弈形式的世界模型,并以44个涵盖博弈、情境和文化场景的基准进行评估。结果显示,410次生成中绝大多数通过了机械有效性检查,但与作者参考模型结构完全一致的只有少数,说明可执行性只是必要条件而非充分条件。

Souhaila Djaffal, Amna Jamal, Gagana Madhugiri Devaraja 等

arXiv cs.AI

Precision on Demand: Escalating Weight Bits at Uncertain Decoding Steps in a Small Local Model

说明按需精度:在小型本地模型中于不确定的解码步骤提升权重位数

简介本文研究小型本地语言模型的一种解码方式:保存8位权重,平时只用高4位解码,仅当低精度输出分布不确定(熵超过阈值或前两名概率差较小)时,才以8位重算该步。实验使用Qwen3-0.6B模型及GSM8K基准,成本以每个token读取的权重字节数计。文中给出离线重放与实际运行的若干对比结果,并指出实际运行数据不足以区分该门控与两个端点方案。

Mohammed Nayeem Khan, Logesh L, Aliyas Ahmad Misri

arXiv cs.SD · cs.LG

Exploring Post-Hoc Disentanglement of Audio Foundation Models for Music Similarity

说明对音频基础模型进行事后解耦以用于音乐相似度检索的探索

简介该论文研究在CLAP、MuQ、MERT等预训练音频基础模型的冻结嵌入上做事后解耦。作者将条件相似度网络(CSN)改用于门控这些冻结嵌入,把嵌入空间划分为对应不同属性的子空间。实验在两个数据集上进行,结果显示少量可训练参数即可提升属性解耦效果和整体检索性能,而池化、掩码和网络深度的选择带来的额外收益有限。

Lucas de Souza Brand\~ao, Gabriel da Costa Merlin, Diego Furtado Silva

arXiv cs.AI · cs.CL

Bits or permutations? Spending a fixed inference budget on weight precision or on option-order averaging in small local language models

说明比特还是排列?在小型本地语言模型中如何分配固定推理预算:权重精度还是选项顺序平均

简介本文研究在固定推理预算下,本地小模型应把资源用于降低权重比特数,还是用于对几种选项顺序取平均以减少对答题顺序的敏感性。作者在Qwen3-0.6B和1.7B上用模拟的四舍五入量化测试(8、6、4、3比特)及ARC、MMLU、HellaSwag等数据集。结果显示6比特相对fp16几乎不损失准确率,而在成本相同的比较中,只有权重为6比特或以上时,增加选项顺序的平均才优于增加比特数。

Mohammed Nayeem Khan, Logesh L, Aliyas Ahmad Misri

arXiv cs.LG · cs.AI

Causal Concept Explanations for Deep Neural Models

说明深度神经模型的因果概念解释:提出 CCW-Net,用中介分析训练并量化概念解释的因果效应

简介该论文指出,现有的神经网络概念解释多为相关性解释,可能看似合理却并非输出的必要或充分原因。作者提出因果概念包装网络(CCW-Net),将经济学、医学和流行病学中的干预式中介分析用作训练目标,使概念表示满足必要性、充分性和独立性。论文还将中介分析用作评估工具,量化各概念对模型输出的因果贡献,并在飞行器控制、驾驶和图像分类任务上进行了评估。

Josh Rountree, Pulkit Verma, Oswin So 等

arXiv cs.LG · physics.ao-ph

Discovering Equations for the Thermodynamics of South Asian Monsoon Precipitation

说明发现南亚季风降水热力学方程

简介本文利用符号蒸馏方法,结合神经网络与符号回归,从21年6至8月再分析数据中提取可解释的降水方程。研究发现,最佳方程解释的降水方差约为常用浮力诊断方法的1.5倍,并保留约85%神经网络的预测能力,所用参数却少约一千倍。

Savannah L. Ferretti, Jane W. Baldwin, Michael S. Pritchard 等

arXiv cs.LG · cs.CL 公开资源

REAL Loss: Optimizing Real Expected Acceptance Length for Speculative Decoding

说明REAL 损失函数:优化投机解码中的真实期望接受长度

简介论文针对大模型投机解码的加速效果,指出常用训练目标与真实的期望接受长度(EAL)并不一致,存在协方差偏差,可能使梯度方向相反。作者提出 REAL 损失函数,用路径权重进行无偏估计,并用 Rao-Blackwell 化降低方差。在受控实验中,REAL 在多个任务子集和随机种子上的概率服务接受长度表现优于若干基线,且无需改动草稿模型结构或推理流程。

Yu Tian

arXiv cs.LG · cs.AI

KernelMosaic: An Open Dataset and Agentic Framework for CUDA Kernel Generation

说明KernelMosaic:用于CUDA内核生成的开放数据集与智能体框架

简介本文提出KernelMosaic,一个将多样化CUDA任务与经验证的解决方案及迭代优化轨迹配对的开放数据集,并配套一个引导大语言模型完成实现、正确性修复和性能优化的智能体框架。在该数据集上对一个小型开源模型进行监督微调后,其在KernelBench L1、L2、L3上的正确率分别从4%、0%、0%提升至88%、82%、16%,且在各级别中比PyTorch eager更快的任务比例都有所增加。论文还表明,基于整理后轨迹的监督优于直接回答的监督。

Ningyuan Xi, Yuhang Lai, Ning Miao

arXiv cs.LG

A Margin Perspective on LoRA: Robustness to Catastrophic Forgetting and Adapter Merging (MaLoRA)

说明LoRA的间隔视角:抗灾难性遗忘与适配器合并(MaLoRA)

简介本文从间隔(margin)的角度,为LoRA低秩适配方法为何能抵抗灾难性遗忘、以及为何能合并独立训练的适配器提供理论解释。作者在带ℓ2正则化的多类线性分类近正交任务设定下分析最优LoRA适配器,发现在中间正则化区间,它与微调数据上的最大间隔解一致。基于此,作者提出无需训练的间隔合并方法MaLoRA,实验显示其在多项视觉与语言分类任务上与若干适配器合并基线相当或更优。

Ziqing Xu, Hancheng Min, Lachlan Ewen MacDonald 等

arXiv cs.CL · cs.AI

Blurring the Block Boundaries: Overlapping Block Denoising for Efficient Diffusion Language Models

说明模糊块边界:用于高效扩散语言模型的重叠块去噪方法

简介该论文提出一种名为B3(Blurring the Block Boundaries)的方法,用于加速基于块扩散的扩散语言模型推理。它在一次前向计算中并行精修两个相邻的块,并根据模型状态动态决定何时开始生成下一个块。该方法无需训练,也不需要额外超参数,可直接用于任何具备自编辑能力的块扩散模型。论文在10个不同数据集上评估,报告生成质量与基础模型相当,速度提升11.5%至14.5%。

Amir Mann, Jonathan Fhima, Shaked Brody 等

arXiv cs.AI · cs.LG

An Energy-Based Perspective on Machine Learning

说明从能量视角看机器学习:一篇统一框架的教程

简介本文是一篇关于基于能量模型(EBM)的教程,EBM 通过标量能量定义概率分布。作者用能量模型作为统一视角,指出任何 EBM 由能量函数、推断方法和学习方法三个选择确定,并把判别模型、生成模型、表示学习、强化学习和规划等方法都归入这一框架。文章还提出可通过替换其中一个组件来设计新算法,并以能量组合作为推断时结合已学模型的方法。

Bo Dai, Yilun Du

arXiv cs.AI

Cognitive Mapping of Learning by Thinking Mechanisms in Large Language Models

说明用认知框架解析大语言模型的「内部思考式学习」

简介本文提出一个认知框架,将大语言模型中类似人类「内部思考式学习」的过程对应到四种机制:反思推理、合成记忆形成、内部模拟和概念自组织。文章分析了思维链提示、自洽性、自我反思、思维树搜索、Self-Instruct等方法如何近似这些机制,并指出它们常见的失败模式及产生原因。

Dong Han, Jin Zhang, Kunyue Yang

arXiv cs.CV

What Factors Matter for Collection-Level Counting with Human-AI Collaboration?

说明人机协作的图像集合计数:哪些因素重要?

简介本文研究在大规模图像集合中估计目标物体总数的人机协作方法,覆盖12项任务,包括生物显微图像、地面和空中野生动物调查以及城市建筑俯视图。研究比较了模型、估计器和适应策略的选择。文中提到,免训练的多模态模型是许多任务的良好起点,而微调检测器在标注预算更大时更有优势,并且用模型预测来决定人工标注的对象,效率更高。在空中叉角羚调查的实地部署中,任务专用的方法在审阅中位数仅3.2%的图像后达到了±5%的误差容限。

Seoyun Jeong, Logan Lawrence, Owen L. Martin 等

arXiv cs.LG · cs.SY · eess.SY

Uncertainty-Aware Hybrid Offline Reinforcement Learning with Online Action Selection Enabled by Sparse Gaussian-Process Critics

说明基于稀疏高斯过程评论家的不确定性感知混合离线强化学习与在线动作选择

简介本文研究聚合反应器启动和牌号切换的控制问题,这类操作目前主要依赖人工。作者以混合离线学习与在线优化方法(HOFLON)为基础,用稀疏变分高斯过程评论家替代原有的树集成评论家与对抗自编码器惩罚,动作选择目标为均值减去κ倍标准差。在HOFLON聚合反应器基准上,移除对抗自编码器惩罚后,五个评论家共15次运行中有4次启动失败;采用Matérn-5/2稀疏高斯过程评论家时,κ=0导致15次中13次失败,而κ=3时15次均未失败。

Marco Chan, Christos Evripidou, Liqiu Dong 等

arXiv cs.CV · cs.RO 公开资源

From Video Frames to Robot Meta-Frames: A Unified Latent Interface for World Action Models

说明从视频帧到机器人元帧:世界动作模型的统一潜在接口

简介该论文面向世界动作模型(WAM),即同时预测机器人动作与未来观测的模型,基于预训练视频扩散模型构建。作者提出MetaWAM,将本体感知、动作、价值等机器人信号打包进单一的统一元帧,每个信号占用互不重叠的频域通道带,并通过逆离散余弦变换映射到空间潜变量。在RoboCasa基准上成功率为68.9%,推理延迟降低39%;在三项真实Franka任务上成功率为85.0%。

Guoqiang Liang, Yiqi Lin, Yanzhe Chen 等

arXiv cs.CL

ARE-bench: Benchmarking Agents' Research Ability in Real-World Researcher Sessions and Workspaces

说明ARE-bench:在真实研究者会话与工作区中评测智能体的科研能力

简介该论文提出 ARE-bench,用于评测科研智能体能否在真实研究项目的会话与未完成的工作区中推进工作,并尊重先前决策与已有文件状态。基准包含 75 个任务,覆盖七个研究阶段,共 1,173 个二元检查项。测试七个前沿模型后发现,表现最好的模型仅在 66.2% 的任务上通过全部检查项。

Jiahang Lin, Wanying Ren, Wanghan Xu 等

arXiv stat.ML · cs.LG · math.PR

An Eyring-Kramers Formula for Singular Wells

说明奇异势阱的 Eyring-Kramers 公式

简介本文研究低温朗之万扩散在两个奇异势阱之间的跃迁时间,给出了 Eyring-Kramers 公式。两个势阱是实解析势函数的紧致连通零点集,且可以是奇异的、非孤立的。最小化的通道是一个非退化的一阶鞍点,并证明其唯一性。主要常数由下水平集体积系数、Gamma 函数因子和鞍点 Hessian 矩阵表示。

Yingli Wang, Lingjiong Zhu

arXiv cs.LG

The Unused Input: The Initial State as a Conditioning Interface for Recurrent TSFMs

说明《未被使用的输入:初始状态作为循环时间序列基础模型的条件接口》

简介时间序列基础模型可以在无需针对特定任务训练的情况下对未见过的序列进行预测。本文以基于xLSTM的零样本预测模型TiRex为例,冻结主干网络,只训练一个小型头部,把上下文向量写入初始循环状态,从而让精度变化可归因于注入的状态。实验显示,该方法可略微降低GiftEval上的平均MASE,并在文本条件设定下带来额外改进;作者表示结果尚属初步、提升较小,但认为初始状态值得进一步研究。

Bernhard Voggenberger, Christian Ganh\"or, Levente Z\'olyomi 等

arXiv cs.OS · cs.AI · cs.CL

EngineAgent: Agentizing On-Device LLM Inference Engines with Inference Stack Hierarchy Awareness and Hardware Abilities

说明EngineAgent:面向端侧大模型推理引擎的智能体化自动适配系统

简介论文提出EngineAgent,一个用于自动为端侧推理引擎适配新大语言模型的智能体系统。它先构建感知推理栈层级的引擎索引并预先验证各后端的构建与调试流程,再由构建器协调跨层修改、由审核器通过设备端验证迭代调试。在覆盖3个移动端大模型、4组引擎与后端组合的12项任务中,EngineAgent端到端成功率为75%,高于最强编码智能体基线的33.3%,同时降低了单任务平均耗时与模型API成本。

Zhengxiang Huang, Yujie Sun, Shengheng Chen 等

★★★★☆ 值得关注
arXiv cs.AI

CLADE: Category-Level Answering from Deficient Evidence in Retrieval-Augmented Language Models

说明CLADE:基于不完整证据的类别级回答(检索增强语言模型)

此语言的简介未通过日期、金额等核对,暂缓展示,请以原文为准。

看点提出可解决不足证据(resolvable insufficiency)与Clade现象,并用反事实测试和本体实验验证,新意明确。

S M Rayeed, Charles V. Stewart, Yao Ma

★★★★☆ 值得关注
arXiv cs.HC · cs.AI · cs.CL

AI Isn't Getting Dumber, We're Getting Pickier: Rising Standards in Human Evaluation of Large Language Models

说明AI并没有变笨,是人们的评判标准变严了:大语言模型人工评测中的标准上升现象

简介该论文分析了Chatbot Arena平台上126万余份匿名盲测投票,考察同一版本固定的模型对之间"两者都不好"的投票比例。结果显示,该比例在2023年5月至2024年8月间持续上升,而模型之间的相对排名基本稳定。作者认为,这种现象反映的是评判标准随领域进步而提高,而非模型本身退步。

看点提出评估者标准随时间抬高的解释,区分模型本身变化与人为判断变化;基于约126万张盲测投票,在版本固定的模型对上分析,结果对排行榜和人类反馈训练有影响。

Zihan Chen, Lei Nico Zheng, Di Zhu

★★★★☆ 值得关注
arXiv cs.LG · cs.AI · stat.ML 公开资源

Forward-Value Discretization: Faster Stochastic Diffusion Sampling Without High-Order Approximation

说明前向值离散化:无需高阶近似的更快随机扩散采样

简介随机扩散采样器通常需要比确定性采样器多得多的神经网络函数评估次数才能达到相近的样本质量。论文证明,即使使用精确的分数函数,带高阶近似的随机采样器仍是一阶收敛,因此提高近似阶数一般不能提升收敛阶。作者据此提出免训练的前向值离散化框架,在由先前预测构造的前瞻点上评估模型,并给出随机版本 F-DDPM。在 CIFAR-10、ImageNet、FFHQ 和 LSUN 上,F-DDPM 在相同 NFE 预算下 FID 低于所评估的随机基线。

看点提出前瞻值离散化,证明随机采样高阶近似仍为一阶收敛并给出紧界,在多个数据集上报告FID改进。

Yuchen Jiao, Na Li, Changxiao Cai 等

arXiv cs.AI · cs.LG

When Should Agents Remember? Falsification-Gated Self-Evolution for LLM Agents

说明智能体何时应该记忆?面向大模型智能体的证伪门控自我演化方法

简介论文针对大模型智能体从经验中总结的经验教训是否应写入持久记忆这一问题,提出证伪门控自我演化框架(FGSE)。该框架把每条候选经验写成带前提条件、行为变化、预期效果和验证器的结构化假设,先在临时状态中应用并用目标迁移、证伪和归档回归三类探针测试,再依据测得的收益与风险决定提交、修正或拒绝。论文称,在网页、应用、工具使用和长期记忆基准上,该方法取得了较强的任务表现,并降低了证伪失败、回归损害和有害提交更新的比例。

Runxuan Tang, Haoyu Gao, Yuyan Ding 等

arXiv cs.AI · cs.MA 公开资源

Don't Just Trust Your Memory: Evidence-Linked Memory Reduces Memory-Induced Degradation in LLM Agents

说明《不要只信你的记忆》:带证据链接的记忆减少LLM智能体的记忆诱导性退化

简介论文提出WikiTrace系统,让大模型智能体把每条经验教训链接回其原始任务轨迹及成败原因摘要,以便核对教训是否正确。在新任务中,智能体可沿链接查阅原始轨迹以补充细节或修正错误教训。作者在五个智能体基准上验证了该方法,结果优于现有记忆方法,并减少了记忆带来的性能退化。

Yukyeong Lee, Yumin Choi, Jinheon Baek 等

arXiv cs.LG · cs.NI

PSL-RGHA: Parallel Split Learning with Reference Gradient Half-Space Alignment for Mitigating Gradient Divergence

说明PSL-RGHA:用参考梯度半空间对齐缓解梯度发散的并行切分学习方法

简介本文提出PSL-RGHA框架,面向资源受限设备上的并行切分学习。由于缺少客户端聚合,该方法在异构数据下容易出现训练发散。框架包含参考梯度渐进构建(RGPC)与梯度半空间对齐(GHA)两个组件,用于约束客户端梯度并缓解梯度冲突。作者称该框架在多种设置下优于现有基线方法。

Han Li, Zheng Lin, Miao Yang 等

arXiv cs.AI · cs.CV · cs.LG 公开资源

Multimodal Abstention That Preserves Acquired Correct Answers

说明在保留已习得正确答案的前提下为多模态模型加入弃答机制

简介该论文针对为任务适配后的多模态模型加入弃答功能时可能丢失正确答案的问题,提出ReFrain方法,结合首词logits线性探针、保留图像簇上的阈值校准以及确定性否决机制,将被拒绝的输出替换为“以上皆非”选项。在Qwen2.5-VL-3B上的实验显示,零预算设定下该方法保留了全部57个新增正确答案且无损失,并将正确弃答率提高7.30个百分点;在0.5%预算下正确弃答率达74.05%。

Jinyuan Zhang

arXiv cs.LG · cs.CL

MMDM: Measuring Massive Multitask Decision Making

说明MMDM:大规模多任务决策能力评测基准

简介论文提出 MMDM 基准,包含 5448 道题目,覆盖 16 类任务,用于评测「System-1」决策模型在单次前向传播中直接给出结构化概率决策的能力。题目涵盖智能体状态追踪、工具与技能选择、偏好判断和评分标准打分等场景,选项数从 2 到 1024 不等。对 28 个决策模型的评测显示,模型在常识任务上表现较好,但在相互依赖的选项、受约束决策和多选任务上表现欠佳。

Junhao Shen, Qing Zong, Yue Guo 等

arXiv cs.CV 公开资源

TaoMate-R1: Temporal Role Specialization for Streaming Multi-Reference Video Generation

说明TaoMate-R1:面向流式多参考视频生成的时序角色专门化方法

简介该论文提出 TaoMate-R1,一种流式多参考视频生成器,依据人物和物体参考先建立场景,再按变化的指令持续生成。方法在冻结的主干网络上,为场景建立与场景延续分别配置低秩适配器,并通过 Self Gradient Forcing 联合训练两种角色。在十段约两分钟、指令变化的视频流中,平均边界亮度跳变由 1.96 降至 0.613,同时 CLIP 与 DINO 时序相似度也有所提高。

Qijun Gan, Chenwei Zhang, Xinyang Li 等

arXiv cs.RO · cs.CV

ForeseeDrive: Future-Token Conditioning for Anticipatory Generative Driving

说明ForeseeDrive:面向前瞻性生成式驾驶的未来令牌条件化方法

简介这篇论文提出ForeseeDrive,把未来场景演变转化为影响候选轨迹生成的接口。方法从记录的交通参与者运动、占据变化、路线交互和TTC安全余量中提取未来令牌,并在部署时由当前场景预测这些令牌,用于在候选轨迹生成前约束轨迹几何。论文报告其在NAVSIM navtest上达到89.2 PDMS,在nuScenes验证集上平均L2为0.41米、碰撞率为0.05%,在Bench2Drive上驾驶得分为76.50。

Shaokai Wu, Xunchu Zhou, Pinzhi Wang 等

arXiv cs.AI

LM-SimBench: A Unified Framework, Dataset, and Benchmark for Large Language Model Training Simulation

说明LM-SimBench:大语言模型训练仿真的统一框架、数据集与基准

简介该论文提出 LM-SimBench,用于评估大语言模型训练仿真器的统一框架、性能剖析数据集和基准测试。研究在昇腾 NPU 集群上剖析了 10 个稠密与混合专家大语言模型系列中的 23 种模型设置,形成包含 348 个可行配置的数据集,涵盖五个并行维度和激活重计算等变量。论文以此比较仿真器的预测精度、配置选择能力与预测误差诊断,并通过 GPU-NPU 对照实验验证其跨平台适用性。

Yu Dong, Hong Li, Qiang Sun 等

arXiv cs.HC · cs.AI

Ninety-Six Ways to Measure a Scribe: Fragmented Evaluation of Ambient Scribes in Healthcare

说明衡量医疗环境语音记录工具的九十六种方式:碎片化的评估现状

简介本文回顾了54项近期对医疗环境人工智能语音记录工具(ambient AI scribes)的评估研究,发现其中使用了10个评估维度、40项指标,并以96种不同方式操作化,其中35种仅被单一研究采用。文章指出,评估主要集中在文书效率和时间上,安全性和临床结果最不一致,且指标严重依赖自我报告,难以跨研究比较和综合。作者主张建立标准化、多维度的指标体系,以支持更严谨、可累积的评估。

Amama Mahmood, Shiye Cao, Laura Fleig 等

arXiv cs.CV

UniFlow-RS: Unified Generative Prediction for Heterogeneous Remote-Sensing Tasks

说明UniFlow-RS:面向异构遥感任务的统一生成式预测模型

简介该论文提出UniFlow-RS,用一个共享的潜空间流匹配(flow matching)预测器统一处理多种遥感任务,取代各任务各自的解码器和损失函数。模型通过把不同任务的输出转换为共同的结构化视觉目标,并引入按任务与模态动态分配训练时间步的TMAS方法。单一模型可处理六项任务和十三个数据集,在多项基准上超过近期的任务专用方法,并在未见数据上展示零样本迁移能力。

Jianlong He, Liang Liao, Jing Xiao 等

arXiv cs.CV

AutoThreshold: Joint Confusion-Profile Learning for Adaptive Mask Binarization

说明AutoThreshold:用于自适应掩膜二值化的联合混淆分布学习

简介该论文提出AutoThreshold,一种事后阈值选择方法,通过预测分数分箱中正负像素的联合质量来直接建模随阈值变化的混淆计数,而非依赖单一验证集调优的阈值。方法借助softmax归一化和累积解码得到单调一致的混淆曲线,并用插件式解码器为任意F-beta指标选择阈值,无需重新训练主干网络。实验在Kvasir训练流程迁移至四个息肉数据集及KITTI Road上进行,相较连续Otsu方法在宏观Dice等指标上取得一致提升。

Shaokai Wu, Xunchu Zhou, Pinzhi Wang 等

arXiv stat.ML · cs.LG

Compositional random forest

说明组合随机森林:面向成分数据的随机森林方法

简介本文提出一种针对成分(compositional)响应变量的随机森林框架,可在单纯形、对数比坐标和单位球面三种表示空间下工作。分裂准则采用对数似然增益,并分别使用切向正态分布(与Kent分布共享参数)和多元logistic正态分布。模拟实验显示,表现最好的森林取决于成分的协方差结构,其中切向正态森林在三种设计中的两种上最为准确。

Khaled Masoumifard, Stephan van der Westhuizen, Sugnet Gardner-Lubbe

arXiv cs.LG

Federated Learning for Cross-Regional Epidemic Forecasting with Asynchronous Outbreaks

说明跨地区异步疫情的联邦学习预测:在保护数据主权的前提下,用联邦学习协同预测广东、澳门和葡萄牙的新冠确诊病例

简介该研究提出一个联邦学习框架,用于在各地疫情不同步的情况下,协同预测广东、澳门和葡萄牙的新冠确诊病例,同时各地数据不出本地。模型采用长短期记忆网络(LSTM),以均方根误差等指标与本地训练和集中训练进行比较。结果显示,联邦学习模型的归一化均方根误差为0.028,较本地模型(0.240)提升88.3%,接近集中训练的效果,研究认为这是一条可行的隐私保护协同预测路径,但仍需前瞻性验证。

Ruibin Liu, Francisco Fernandes, Xuanfeng Li 等

arXiv eess.SP · cs.AI

Achieving Robust Channel Estimation Neural Networks on Doppler effects by Designed Training Data

说明通过设计训练数据提升神经网络在多普勒效应下的信道估计鲁棒性

简介本文研究在无线通信中用神经网络进行信道估计时的泛化能力,尤其是高速场景下的强多普勒频移。作者提出了生成合成训练数据的设计准则,使离线训练的网络无需先验信息或在线训练,即可在未见过的信道上稳健工作。仿真结果显示,不同复杂度的网络在多种未见过的功率时延分布和多普勒频移下都能达到一定性能。

Dianxin Luan, John Thompson

arXiv cs.LG · eess.SP

Physics-Constrained Autoencoder for Interpretable Health Representation Learning in Turbofan Engines

说明用于涡扇发动机可解释健康表征学习的物理约束自编码器

简介本文提出一种物理约束自编码器,将系统物理知识嵌入解码器结构和损失函数中,使潜变量对应预定义的物理量。在 N-CMAPSS 数据集上,该方法重构精度与全数据驱动模型相当,聚合得到的健康指标与真实值的 Spearman 相关系数为 0.9791。模型还能区分压缩侧与膨胀侧的退化特征,并将退化趋势可视化在部件特性图上。

Leonardo Baldo, Jokin Alcibar Ibarzabal, Daniel Cisneros Acevedo 等

arXiv cs.LG · eess.SP

Chain of Physics: Supporting Fault Diagnosis with Engineering-Inspired Large Language Model Reasoning

说明物理链条:借助工程启发的大语言模型推理支持故障诊断

简介该论文提出“物理链条”(CoP)框架,用大语言模型进行故障诊断。框架基于从资产专属参考文档自动生成的约束知识图谱,图谱存储故障模式、物理量变化与监测传感器之间的诊断链。推理时检索语义相近的图路径作为信息和示例,并分别分析候选故障模式,最后比较各条链与选项。在FailureSensorIQ基准上,该方法在四类工业资产和三种大语言模型中均优于直接提示和传统检索增强生成,准确率分别提高7.8至19.6和11.7至18.2个百分点。

Wenqi Zhou, Leonardo Baldo, Kai Goebel 等

arXiv cs.AI · cs.LG · cs.NE

Recurrent Modular Structure in Spiking Neural Network Reinforcement Learning

说明脉冲神经网络强化学习中的循环模块化结构

简介本文提出社区循环脉冲神经网络(CoRe SNN),将循环网络划分为固定角色的社区,包括接收刺激的控制器社区、每个动作各自的社区以及承载内部状态的潜在社区。学习采用局部三因子规则,并提出了Map-STDP规则以在学习中促进模块化。在CartPole、LunarLander和Acrobot上的实验显示,这类循环模块化网络可以与前馈方法相当,甚至更优。

Vikram Ramavarapu, Himanshu Udupi, Ashish Gautam

arXiv cs.HC · cs.AI

Lilo: A Multi-Agent Conversational Sandbox for Children's Digital Communication

说明Lilo:面向儿童数字交流的多智能体对话沙盒

简介这篇论文介绍了Lilo,一个多智能体对话系统,让儿童在模拟的群聊冲突中练习表达与应对。孩子加入两个AI同伴正在进行的争吵,并由同名导师角色通过“停下-思考-行动”红绿灯式提示进行指导。研究者对28名9至11岁儿童进行了探索性研究,记录了干预前后的问卷与离场访谈。结果显示,参与者在应对令人不快的消息方面的自我效能感在互动后显著提高。

Ofri Elbaum, Amit Malik, Tomer Malkevich 等

arXiv cs.RO · cs.CV

Elastic-WAM: Adaptive Spatiotemporal Imagination for Efficient Robot Control

说明Elastic-WAM:面向高效机器人控制的自适应时空想象

简介该论文提出 Elastic-WAM,用于改进基于世界动作模型的机器人控制。它根据任务和状态动态分配未来视觉预测的计算量,在时间去噪步骤和空间区域上进行自适应选择。实验显示,在多种仿真基准和真实长时程操作任务中,该方法在降低推理延迟的同时取得了领先的控制表现。

Haitian Li, Tianfu Li, Xuxi Zhao 等

arXiv cs.AI

A Cross-Scenario Survey and Analysis of Self-Evolving Multimodal Agents

说明跨场景综述:自我进化的多模态智能体

简介本文综述了多模态智能体在无需反复人工标注的情况下自我改进的研究,覆盖多模态推理、多模态生成、GUI与网页导航以及具身操作四类场景。作者将自我进化智能体形式化,并用经验生成、反馈获取、更新巩固三阶段循环作为分析框架。文章比较了各场景内自我进化与固定循环的差异,并分析各机制在跨场景迁移时表现不对称的原因。

Jingjing Jiang

arXiv cs.CL

Semantic Chains: From Reachable Facts to Justified Answers

说明语义链:从可达事实到有依据的答案

简介本文研究如何从问题出发找到能支撑答案的事实,并把它们组织成一串相互连接的陈述。作者把语境建模为逻辑事实图,并假定每个事实由哪些表达式表示已知。文中给出在所述模型条件下,从问题涉及的对象出发的搜索能到达根事实并覆盖所选扩展中的全部事实,并讨论多环节链的候选顺序及其成立条件。

Misha Andreev

arXiv cs.AI · cs.HC · cs.LG

Personalized Affective Perception via Continual Learning in Human-Agent Negotiation

说明通过持续学习实现人机谈判中的个性化情感感知

简介论文提出一种情感自适应谈判策略,利用带想象力的持续学习面部表情识别模型(CLIFER)实时个性化地感知效价与唤醒度。智能体根据情感变化方向与强度的差分反馈调整目标效用,并在实时交互中于后台异步更新模型。在66名参与者与人形机器人的谈判实验中,启用持续学习的智能体获得了显著更高的个人效用,并引出了更高的参与者让步率。

Mehmet Onur Keskin, Berk Buzcu, Nikhil Churamani 等

arXiv cs.LG

SinkState: On-the-Fly SVD of Recurrent States for Efficient Hybrid LLM Serving

说明SinkState:面向高效混合大模型服务的循环状态即时SVD压缩方法

简介该论文针对结合softmax注意力与线性注意力的混合大模型,发现线性层的查询、键和值集中于一个稳定的低维子空间,称为线性注意力汇聚现象。作者提出SinkState,在推理全过程中以自适应低秩形式存储循环状态,并通过缓冲更新与限定在主子空间上的局部SVD来降低开销,同时在CPU上异步整合其余成分。在四个含Mamba-2和GDN层、参数从4B到120B的混合模型上,相比Mamba-SSM与FLA,循环状态峰值内存最多降低2.6倍,解码速度最多提升1.58倍,且保持精度。

Haolin Jiang, Weihang Li, Zhongzhu Zhou 等

arXiv cs.CL · cs.AI

An AI Assistant for Automating Anti-Corruption Expertise of Draft Legislation Based on the TRACE Framework

说明基于TRACE框架的草案立法反腐败鉴定自动化AI助手

简介本文提出一款基于TRACE架构的AI助手,用于自动筛查法律草案中的腐败风险,即找出专家会批评的条款并指出每处的监管缺陷。系统结合确定性解析、模型引导的单条款判定、基于规则的因素归类以及外部人工监督。作者以乌克兰国家反腐败预防局(NAZK)公开结论构建了包含132部草案和474项发现的基准,并在其中100部草案上评估。

Serhii Zabolotnii (Cherkasy State Business College, State Scientific Research Institute of Armament, Military Equipment Testing 等

arXiv cs.MA

PARLEY: Evaluating LLM Collaboration Through Cooperative Asymmetric Puzzles

说明PARLEY:通过合作式不对称谜题评估大模型协作能力

简介该论文提出PARLEY平台,用四类基于认知心理学的不对称谜题任务,研究大语言模型智能体之间的协作。GPT-4o智能体对话的成功率为60.5%,不同任务之间差异较大。研究据此归纳出包含六类失败的PAC分类体系,并提出一种由分类体系指导的干预方法,使平均任务成功率提升至70.5%。

Javier Hernandez, Andrew D. Wilson

arXiv cs.CL · cs.AI

Dyship: Leveraging Acoustic Features For Speaker Relationship Classification From Dyadic Conversations

说明Dyship:利用声学特征从二人对话中分类说话者关系

简介本文提出 DyShip 框架,用于从 Seamless Interaction 语料库的二人对话中判断说话者是否相识以及是否为亲属关系。作者比较了五种语音表示:频谱图、MFCC、自监督的 WavLM 表示、x-vector 和估计的发音运动。频谱特征在相识判断中表现最好,准确率为 87.81%;WavLM 在亲属关系判断中准确率最高,为 85.17%。多数分类器超过了同一数据集上此前报告的人类和音频语言模型成绩。

Kieran Sturges, Thomas Thebaud, Yaohan Guan 等

arXiv math.OC · cs.DC · cs.LG

On Federated Averaging with Partial Participation under a General Variance Condition

说明关于一般方差条件下部分参与的联邦平均算法

简介本文研究在一般方差条件下,带部分客户端参与的联邦平均算法(FedAvg)的收敛性。每轮服务器从 n 个客户端中不放回地均匀抽取 S 个。作者针对光滑非凸目标函数给出了有限时间内的平稳性界,该界依赖于异质性度量和客户端抽样因子,并随抽样客户端数 S 呈线性加速,在 S=n 时退化为全参与的结果。在递减步长下,梯度范数同时在期望意义和几乎必然意义上收敛到零。

Ziming Wang, Kun Huang, Karl Henrik Johansson 等

arXiv cs.CL · cs.IR

StaRSE: Compact Russian Sentence Embeddings with a Sign-Coded Static Encoder

说明StaRSE:一种基于符号编码静态编码器的紧凑俄语句子嵌入模型

简介该论文提出StaRSE,一种面向俄语的紧凑型静态句子编码器,部署时不再进行Transformer推理:词向量方向以符号位存储,词向量范数单独保存,句子由范数缩放后的符号方向做平均池化得到。模型以ruBERT-base为初始化,在俄语相邻句对和任务形式句对上微调,并通过直接优化符号投影词表的对比学习阶段进行后训练。在RuMTEB上其任务平均分为51.16,模型大小11.3 MiB,单句CPU平均延迟0.08毫秒。

Boris Malashenko, Ivan Jarsky, Egor Soldatov 等

arXiv cs.CL · cond-mat.dis-nn

Stagewise and interpretable emergence of inside-outside computation in Transformer-based language models

说明Transformer语言模型中内外算法计算的分阶段、可解释涌现

简介该论文借助可控的合成上下文无关文法,研究Transformer在训练过程中如何学会处理句法结构与解析歧义。作者发现,各个损失阶段可以解析计算,并对应隐变量树的表示。随着训练推进,模型先利用局部的二元组和三元组信息,之后逐步形成编码器-解码器结构:中间层编码最抽象的隐信息,后半部分逐步细化最终的词元预测。

Jack T. Parley

arXiv cs.CV

ViGA-FLAME: Aligning Latent Visual and Geometric Representations for Robust 3D Head Expression Estimation

说明ViGA-FLAME:将视觉特征与几何潜在空间对齐,实现稳健的三维头部表情估计

简介该论文提出ViGA-FLAME两阶段框架,用于从单张图像估计三维头部表情。第一阶段的参数-几何变分自编码器(PG-VAE)学习头部表面与FLAME参数的统一潜在表示;第二阶段的视觉-几何适配器(ViGA)通过非对称注意力,把预训练视觉编码器的语义特征对齐到该潜在空间,且不改变原有视觉分支。论文称该方法在严重面部形变和大视角下更稳健,优于同类前馈方法。

Wen Hao He, Jiacheng Wu, Jie Chen

arXiv cs.LG · cs.AI · cs.NI

Verifiable Agentic Traffic Class: A Policed Quality-of-Service Mechanism for Agentic AI Traffic, Evaluated from Simulation to Real-Kernel Adversarial Testing

说明可验证的智能体流量类别:面向 AI 智能体流量的受监管服务质量机制(从仿真到真实内核的对抗测试)

简介该论文针对大语言模型驱动的软件智能体产生的流量,提出可验证智能体流量类别(VATC):用保留的 DSCP 标记声明智能体流量,路由器端分类器将与声明不符的流量降级到尽力而为之后服务,并配合限速优先队列。在仿真和真实 Linux 内核中,VATC 与静态 DiffServ、fq_codel 进行了比较。文中结果显示,VATC 在突发负载下显著降低了智能体排队延迟,但真实内核中的欺骗洪泛测试与部分伪装流量暴露了分类器的漏判,测试流量为合成或沙箱规模。

Naveen Babu Narayanan Nair, Sajay Kurup

arXiv cs.LG

Tree-Ising: Repairing Language Models with Bit-Level Ising Edits

说明Tree-Ising:用比特级伊辛编辑修复语言模型

简介该论文提出 Tree-Ising 方法,把语言模型的权重修复建模为对 BF16 权重进行稀疏离散优化的问题,并将其分解为可用模拟退火或量子启发式模拟分岔求解的 QUBO(伊辛)子问题。在 MATH-500 上,修复后的模型得分为 54.6%,高于智能体编辑的 51.7%,基础模型为 7.9%;该方法修改的权重更少,且无需 LLM 词元。

Hadi Salloum, Ammar Ali

arXiv cs.AI · cs.CL

Breakdown of Autoregressive Multi-Step Reasoning Under Concentrated vs. Diffuse Attention Head Dropout

说明自回归大模型在注意力头集中失效与分散失效下的多步推理退化对比

简介本文借鉴哺乳动物大脑皮层局部短暂静默的现象,研究在时间和空间上集中的注意力头屏蔽对大语言模型推理的影响。作者在GSM8K基准上对Qwen3-8B和LLaMA-3.1-8B-Instruct两个模型进行实验,比较集中式突发屏蔽与预算相同的分散式随机丢弃。结果显示,集中式突发屏蔽导致的推理准确率下降明显更大。

Karol Struniawski

arXiv cs.CV

DailyWildfireCAN: A Dataset and Benchmark for Next-Day Wildfire Spread Prediction in Canada

说明DailyWildfireCAN:加拿大次日野火蔓延预测的数据集与基准

简介本文提出DailyWildfireCAN,一个面向加拿大次日野火蔓延预测的多模态、多时序数据集与基准。数据涵盖2017至2024年八个火季的2440起野火事件,空间分辨率为90米,时间分辨率为24小时,整合地形、气象、土地覆盖、植被、人类影响指数和卫星影像等33项特征。作者还建立了比较单时序与多时序预测模型的基准,并设计了多维评估框架。

Mahacine Ettahri, Hager Radi Abdelwahed, Toluwaleke Olutayo 等

arXiv cs.AI

Joint Quantization and Dynamic Partitioning for Context-Aware Edge Vision Transformers

说明面向情境感知边缘视觉Transformer的联合量化与动态划分

简介本文提出一种边缘编排框架,用于在联网自动驾驶车辆上部署视觉Transformer模型,可同时选择模型划分点、各层量化位宽和执行位置。该问题被建模为混合整数线性规划(MILP),目标是在端到端时延与任务质量约束下降低计算和通信能耗。在Jetson Orin系列节点上使用OPV2V多流负载评估,相比统一INT8划分,车间通信能耗降低33.3%至36.0%。

Zhu Jiaqi, Jain Prakriti, Katare Dewant 等

arXiv cs.AI

An Augmented Lagrangian Approach to Lifted Bellman Linear Programming

说明基于增广拉格朗日方法的提升贝尔曼线性规划

简介该论文针对离线强化学习,将数据集内的最优值求解表述为线性规划,并用乘子法(增广拉格朗日方法)求解,乘子通过对偶上升学习,取代了原有的固定系数惩罚。论文报告了在50个基于状态的OGBench任务上的平均成功率为60.1%,并在长时程任务上给出了具体成绩。

Jongchan Park, Hyukjun Yang, Narim Jeong 等

arXiv cs.CV · cs.LG

SpecValley: Aggregation as Spectral Valley in Dense Heterophilic Graphs

说明SpecValley:稠密异配图中作为谱谷的聚合方法

简介这篇论文研究异配图上的节点分类问题,指出邻域聚合会削弱携带标签信息的信号。作者认为度归一化会在特征值密集处形成一个固定的谱谷,并提出SpecValley,为每个图学习该谷的位置、锐度和两侧增益。实验表明其在异配基准上效果较好,消融实验将提升归因于聚合步骤而非后续滤波器。

Christoph Jahn, Delvin Bacho, Urs Waldmann 等

arXiv cs.AI

Cross-Border Fulfillment Center Selection via Doubly Robust Estimation and Linear Programming

说明基于双重稳健估计与线性规划的跨境仓库选址模型

简介本文提出一种跨境履约中心(FC)选择模型,结合预测、双重稳健估计和线性规划,为每条跨境运输路线选出合适的发货仓库子集。作者在一家大型电商公司三条跨境运输路线的12个月出货数据上进行评估。结果显示,相较于人工专家制定的选择策略,该模型可使配送时间缩短8.5%至51.1%,物流成本降低4.4%至48.3%。

Kriti Mahajan, Patrick Bloebaum

arXiv cs.AI

BARS: Budget-Aware Sequential Sampling with Refusal for Majority Identification under Unknown Distributions

说明BARS:面向未知分布多数票识别的预算感知序贯采样与拒答方法

简介该论文针对大语言模型重复采样后取多数票的做法,提出 BARS 方法,在给定预算和目标错误率下判断最高票与次高票的差距是否足够,据此提前停止、输出预算内的多数票,或在无法保证可行时拒答。论文区分了可证明界限的认证模式与用经验校准替代的实用模式。在 GSM8K 上,实用模式比固定 8 次采样少用 22.3% 的样本,代价是拒答 18.8% 的问题;在 MATH 上输出答案的准确率提升至 82.5%,同时对约一半模型自身无法解决的难题选择拒答。

Shenxi Liu, Yiwei Li, Mingyang Zhao 等