Motivation
智能体为在复杂环境中生存和工作,不得不高效和有效地(efficiently and effectively) 学习反映历史经验和当前所感知的环境模型;模型是收集信息、做出决策和采取行动的关键。
“Studies in neuroscience suggest that the brain’s world model
is highly structured anatomically (e.g., modular brain
areas and columnar organization) and functionally (e.g.,
sparse coding (Olshausen and Field, 1996) and subspace
coding (Chang and Tsao, 2017; Bao et al., 2020)).”
What to learn and how to learn.
Convolutional Sparse Coding
x = A ( z ) = Σ c = 1 C ( α 1 c z c , . . . , α M c z c ) x=A(z)=\Sigma_{c=1}^{C}(\alpha_{1c}z_c,...,\alpha_{Mc}z_c) x=A(z)=Σc=1C(α1czc,...,αMczc)
核A为待优化参数。
思考
我想历史经验应该包括基因遗传。植物、动物的生化机理,和动物的先天遗传或本能,这都是生物进化、学习的结果,并被记录到DNA作遗传;另一方面,历史经验也包括幼崽从周围,尤其是向母亲模仿学习得来的模型。
自己对遗传基因如何实现为智能的认知十分有限。
我想动物的智能包含潜意识、情绪、感情、本能等,人类则在动物智能的基础上,进化出来理智、想象力、良知与道德感、信念与意志等等,我认为这些都可以称为模型。
动物与环境的互动大部分靠潜意识和本能,与自然界的周期匹配,久经考验,堪称大自然的杰作;人类由于生物体的遗传约束,尤其是神经系统的低耗能、高能效比的特点,情绪与本能往往超越理智与良知,而群体(社会)的动态演变,复杂性远超越自然,致使个体与群体在某些场景、阶段表现不尽人意,同时个体也在不断学习历史经验与教训,群体演变中有一个迟滞的反馈。