近似Bayes计算前沿研究进展及应用

论文摘要

在大数据和人工智能时代,建立能够有效处理复杂数据的模型和算法,以从数据中获取有用的信息和知识是应用数学、统计学和计算机科学面临的共同难题.为复杂数据建立生成模型并依据这些模型进行分析和推断是解决上述难题的一种有效手段.从一种宏观的视角来看,无论是应用数学中常用的微分方程和动力系统,或是统计学中表现为概率分布的统计模型,还是机器学习领域兴起的生成对抗网络和变分自编码器,都可以看作是一种广义的生成模型.随着所处理的数据规模越来越大,结构越来越复杂,在实际问题中所需要的生成模型也变得也越来越复杂,对这些生成模型的数学结构进行精确地解析刻画变得越来越困难.如何对没有精确解析形式(或其解析形式的精确计算非常困难)的生成模型进行有效的分析和推断,逐渐成为一个十分重要的问题.起源于Bayes统计推断,近似Bayes计算是一种可以免于计算似然函数的统计推断技术,近年来在复杂统计模型和生成模型的分析和推断中发挥了重要作用.该文从经典的近似Bayes计算方法出发,对近似Bayes计算方法的前沿研究进展进行了系统的综述,并对近似Bayes计算方法在复杂数据处理中的应用前景及其和前沿人工智能方法的深刻联系进行了分析和讨论.

论文目录

• 引 言
• 1 经典ABC方法简介
•   1.1 Bayes推断的基本范式
•   1.2 经典 ABC 方法的基本框架和理论性质
•   1.3 经典ABC方法的实际运用
•   1.4 算法配置
• 2 ABC方法前沿进展
•   2.1 以数据驱动的方式筛选统计量
•   2.2 采用更有效的距离度量
•   2.3 计算框架的进一步扩展
•     2.3.1 Soft ABC
•     2.3.2 ABC-SMC
•     2.3.3 ABC-MCMC
•     2.3.4 Hamiltonian ABC
•     2.3.5 合成似然函数
• 3 ABC方法在复杂数据处理中的应用
•   3.1 ABC方法与连续时间自回归
•   3.2 ABC方法与人工智能
• 4 结 论

文章来源

类型: 期刊论文

作者: 朱万闯,季春霖,邓柯

关键词: 近似计算,生成模型,深度学习,不确定性推断

来源: 应用数学和力学 2019年11期

年度: 2019

分类: 基础科学,信息科技

专业: 数学,计算机软件及计算机应用,自动化技术

单位: 清华大学工业工程系统计学研究中心,光启高等理工研究院

基金: 国家自然科学基金(11771242)~~

分类号: O212.8;TP181;TP311.13

页码: 1179-1203

总页数: 25

文件大小: 1660K

下载量: 178