跳到正文
← 返回论文列表与筛选
阅读说明

本页整理公开书目信息,不生成学术质量评分。AI 解读根据题名及所注明的摘要或原文片段生成,未完成全文核验,可能有误;具体假设、证明与结论请核对原文。摘要保留来源文本,未经模型改写。

DOI 首次登记不等于接收或发表日期。部分更正、评论等条目没有独立摘要;缺少可靠材料时保留待补状态。

本页为预印本版本;arXiv 收录、作者填写的期刊信息以及作者既有发表经历,都不单独证明本篇已接收。作者发表记录按 OpenAlex 身份与完整姓名、本站覆盖期刊 ISSN 及正式卷期核对,只展示已核实例,档案仍可能误合并。

引用量采用 OpenAlex 单条关联记录,不合计多个记录;关联记录可能包含正式发表版本,不等于此版本单独引用。缺失不视为零,引用指标不代表论文质量。

关注作者按书目中的完整姓名匹配,同名和姓名变体需人工辨别。相关论文先按共享细分方向和具体方法排列,再参考通用方法与发表日期。

分类依据与纠错

AI 根据所提供的论文材料归类:摘要直接研究实际因果关系的定义与原因识别,支持因果推断分类,但未涉及处理效应或面板设计。

反馈分类问题

正在核对关联版本…

代码、数据与补充材料

正在核对对应版本的资源…

关注这篇论文的作者
Caleb Chuck
Stephen Giguere
Amy Zhang
David Jensen
Scott Niekum

复杂环境中功能性实际原因的自动发现

研究问题
在复杂、连续取值的强化学习环境中,如何识别特定事件的实际原因,减少现有定义纳入大量低影响事件的问题?
方法与思路
作者提出功能性实际原因框架 FAC,利用情境特定的独立性缩小原因集合,并以 JACI 联合优化算法从观测数据学习原因。
材料陈述的贡献
摘要称,FAC 与实际因果关系文献中的已知示例结果一致,JACI 在所考察连续环境中的原因识别准确率高于现有启发式方法。
阅读关注点
应核对实际原因的形式定义、情境独立性的判定方式、观测数据所需信息,以及实验中原因真值和比较指标的构造。
阅读边界
这是 arXiv 预印本,同行评审或期刊接收未获核实;摘要未说明观测数据识别原因的具体条件,也未报告准确率数值。

原文摘要

Reinforcement learning (RL) algorithms often struggle to learn policies that generalize to novel situations due to issues such as causal confusion, overfitting to irrelevant factors, and failure to isolate control of state factors. These issues stem from a common source: a failure to accurately identify and exploit state-specific causal relationships in the environment. While some prior works in RL aim to identify these relationships explicitly, they rely on informal domain-specific heuristics such as spatial and temporal proximity. Actual causality offers a principled and general framework for determining the causes of particular events. However, existing definitions of actual cause often attribute causality to a large number of events, even if many of them rarely influence the outcome. Prior work on actual causality proposes normality as a solution to this problem, but its existing implementations are challenging to scale to complex and continuous-valued RL environments. This paper introduces functional actual cause (FAC), a framework that uses context-specific independencies in the environment to restrict the set of actual causes. We additionally introduce Joint Optimization for Actual Cause Inference (JACI), an algorithm that learns from observational data to infer functional actual causes. We demonstrate empirically that FAC agrees with known results on a suite of examples from the actual causality literature, and JACI identifies actual causes with significantly higher accuracy than existing heuristic methods in a set of complex, continuous-valued environments.

笔记与分组
相关领域论文