#paper arXiv:2010.06002 Thinking Fast and Slow in AI 这篇论文主要是为AI下一步发展提出了一个研究方向，灵感和思路来自认知科学领域著名的《思考，快与慢》，后者提出人的认知决策有两个系统，系统1是快速反应，下意识的感知层，系统2是需要经过理性计算、推理，综合更多信息后作出反应的慢系统。作者提出，AI应该是综合“快慢”两者才能更接近的通用智能，系统1对应感知算法，通过深度学习等方法，已经取得突破，而用于推理、计算、决策的慢系统，则需要借助符号系统等方法，有一定的时序性，两者结合，才能更接近真正能够“思考”的智能。基于上述设想，作者提出了10个可能的研究问题，简单列举几个如下： 1. 我们能够清晰地区分AI中的系统1和系统2的能力吗？他们各自的特征是什么？就只有这两类能力吗？还是会有更多能力？ 2. 系统2的顺序性（表现为无法并行）是一个bug还是一个feature？我们 应该诉诸机器给系统2发展多线程推理能力吗？如果是这样，结合了机器强大的计算能力，是否能够补偿AI某些方面的缺陷？ 3. 综合了系统1和系统2（机器学习和符号逻辑）的AI，用什么评价指标来度量其表现？这些指标应该因任务不同和组合方法不同而不同吗？

#paper ArXiv:2202.02435v1 [cs.LG] On Neural Differential Equations. 牛津大学数学研究所帕特里克·基格尔(Patrick Kidger)的博士学位论文The webpage at https://arxiv.org/pdf/2202.02435v1.pdf，参考链接https://www.maths.ox.ac.uk/people/patrick.kidger，https://www.reddit.com/r/MachineLearning/comments/snmtzn/r_phd_thesis_on_neural_differential_equations/。 一、这篇231页的博士论文专门探讨神经微分方程(neural ODE)，主要内容包括如下：①神经常微分方程（neural ordinary diffeqs）：用于学习物理系统，作为离散架构的连续时间限制，包括对可表达性的理论结果；②神经受控微分方程（neural controlled diffeqs）：用于建模时间序列函数、处理不规则数据；③神经随机微分方程（neural stochastic diffeqs）：用于从复杂的高维随机动态中采样；④数值法（numerical methods）：一类新的可逆微分方程求解器或布朗重建（Brownian reconstruction）问题。 二、论文中归纳神经微分方程(neural differential equation, NDEs)的 4 个主要应用为：①物理建模；②时间序列；③生成式建模；④一种开发深度学习模型的策略：取适当的微分方程并将其离散化。 三、用于神经微分方程的数值求解和训练的软件包目前已经进行了标准化，文中提供了几种选择供读者使用：1.在JAX生态系统 [Bra+18] 的Diffrax, https://github.com/patrick-kidger/diffrax；2.在PyTorch生态系统 [Pas+19] 中的torchdiffeq、torchcde 和 torchsde 系列库, https://github.com/rtqichen/torchdiffeq，https://github.com/patrick-kidger/torchcde ，https://github.com/google-research/torchsde ，https://github.com/DiffEqML/torchdyn ；3.在Julia [Bez+17] 生态系统中的 DifferentialEquations.jl, https://github.com/SciML/DifferentialEquations.jl 。