IN PASSING / 随笔

随手记下,
让想法有迹可循。

一些未必成熟的想法,阅读与生活中的片刻。
不急着成为结论,先为此刻留一个注脚。

227MOMENTS & THOUGHTS
A RUNNING RECORD按原发布时间 · 新 → 旧

2025 / FIELD ENTRIES

「诚」定义了什么值得被「真」建模
「真」修正了什么值得被「诚」追求

目标导向行为主体的驱动逻辑也许由两部分的循环构成:

由内向外追求封闭系统的自洽,是奖励最大化,是「诚」
由外向内追求开放系统的建模,是误差最小化,是「真」

年初 @李继刚 老师分享「诚」与「真」的 insight
像是种下了一颗种子,今天生根发芽了,感恩相遇

复杂系统不同层次有不同的因果
所以定义问题得先明确系统层次
微观事件对于宏观可能只是噪音

理解的准确度 ≈ 预测的精确度
实践是通过反馈修正预测的过程
构建是实现从零到一实践的过程
所以构建的过程也是理解的过程

@42 在小群分享了一下关于优化自身系统的逻辑
联想到42推荐的《系统之美》中的系统特性:

一周的周期递进式地处理数据,分成了三个层次

执行日:在现实世界专注执行目前系统
(1)收集执行遇到的bug数据
(2)存档运行系统的现实数据

流程日:分析提炼执行日收集到的数据
(1)bug数据+适应力=调整优化旧程序
(2)现实数据+自组织=抽象生成新程序

认知日:审核优化生成的新程序可用性
(1)逻辑的严谨性=表象+非线性+有限理性
(2)运行的兼容性=延迟+设边界+限制因素

毕竟自己的系统有自己的目标,所以无需他人系统的认可
关键是在现实世界运行时能否更精准高效地达到自己目标

逻辑清晰、层次分明的三层结构,受益匪浅

2025年11月20日随笔配图 1

延迟满足关键不是延迟短期正反馈
而是不由短期正反馈驱使自己行为
关键是找到让心态平滑向上的斜率

「那么,一个好的 “异常值寻找流程”,应该具备哪些要素? (1)多尝试。样本越多,遇到异常值的概率越高。 (2)明确目标:弄清楚 “最好的结果可能是什么样”,这样才知道何时停止。 (3)找到与 “核心需求” 高度相关的评估方法:筛选 “可能惊艳的”,而非 “大概率不错的”。 (4)尽可能快速抽样、快速评估:这样才能更快…展开全文收起全文

「那么,一个好的 “异常值寻找流程”,应该具备哪些要素?
(1)多尝试。样本越多,遇到异常值的概率越高。
(2)明确目标:弄清楚 “最好的结果可能是什么样”,这样才知道何时停止。
(3)找到与 “核心需求” 高度相关的评估方法:筛选 “可能惊艳的”,而非 “大概率不错的”。
(4)尽可能快速抽样、快速评估:这样才能更快迭代抽样策略。
(5)反复尝试却屡屡失败时,别气馁」——Ben

定性目标→定量评估→迭代策略→持续抽样
定性目标是确认「值得」定量评估的样本字段
定量评估是定义什么算「异常值」的样本标准
迭代策略是保证收集对应样本字段的收集效率
持续抽样是保证收集对应样本字段的收集时长

与我最近研究的AI的好奇心策略不谋而合
没有定性目标的好奇心天天盯着环境噪音琢磨
没有定量评估的好奇心容易被复杂环境搞躺平

联想到《为什么伟大不能被计划》新奇性算法:
「求新就是求复杂,而更复杂的往往更加有效」

所以一个有趣的问题是
「如何定义好奇心的字段和标准」?

维特根斯坦的论述确实有趣,不过并非先验的 比如「语言一定由原先已有的语言论述」这句 逻辑上会形成无限后退:第一种语言从何而来? 然后从对齐这个问题而言的话,如何定义客观和主观呢? 所谓「主观主体」存在本身是一个客观存在的物理实现 那么所谓「个体影响」是否能用某种符号体系客观量化? 因为所谓「语言描述」是符合人类个体…展开全文收起全文

维特根斯坦的论述确实有趣,不过并非先验的
比如「语言一定由原先已有的语言论述」这句
逻辑上会形成无限后退:第一种语言从何而来?

然后从对齐这个问题而言的话,如何定义客观和主观呢?
所谓「主观主体」存在本身是一个客观存在的物理实现
那么所谓「个体影响」是否能用某种符号体系客观量化?

因为所谓「语言描述」是符合人类个体算力主要用于交流的符号
除了不少「历史遗留」问题关键在于这种符号本质上是约定俗成
所以基于人类语言的模型也许仅仅只是在对齐「人类群体记录」

综上回到「LLM是否有taste」这便是一个具体的好问题
关键在于你所定义的「taste」是否是「人类群体记录」的子集?
如果不是的话,这样的数据如何采集、编码且是否支持反向传播训练?
如果是的话,你如何评测「taste」本身,如何确认评测的信度和效度?

总而言之,模型所采用的符号体系也许决定了对齐的上限
因为模型的参数规模决定的是隐空间的尺寸,即「图书馆的建筑尺寸」
而语义空间取决于数据符号体系与表征信息,即「书籍构建的知识体系」
「北人不梦象」,对齐的前提是对齐的信息存在于这个「知识体系」中

从而有个有趣的问题是:
什么样的符号体系和内容能够生长出能够形成自洽逻辑的人工智能?

2025年11月10日随笔配图 1

很有趣的问题,我觉得关键要看「目的」是什么
就拿你提及的「美」举例子
如果你的目的是让LLM拥有人类平均的审美能力
那也许只是一个定义「何以为美」后的对齐问题

反过来思考也会出现一个有趣的问题
用人类符号体系预训练的人脑默认对齐了许多定义
「不同文化的偏见」也许只是「不同角度的定义」
而这种「偏见」是否会影响「提出好问题」的能力

「AI原生符号系统」是个有趣的问题


「这句很有启发,品味或者直觉可能并没有那么神秘,他可能是上下文压缩的结果。
但是问题是人类的语言并不能覆盖所有情况,许多内容无法被语言表达。比如“美”或者萨特所说的“前反思的我思”,这些超越context表达范围的内容如何压缩呢」@流明lumen951

2025年11月08日随笔配图 1

提出好问题并不意味着无知
知道所不知道是第三个阶段
是坦诚并明晰自己所知边界

出题者与解题者无高下之分
不过有时间顺序,所以
出题者往往决定解题的上限

现在人工智能是足够好的解题者
不过我相信它能是更好的出题者
跨学科只是一个侧面,重要的是
我能看到它眼中的边界

遇到「问题」除了「解决」问题
换个角度甚至可以「利用」问题
关键在于是否重视「定义」问题

压力,是一个好东西
是外界将你推出舒适区的力
无论是创业或仅仅只是健身
会告诉你进步的方向

可遇不可求

专注的关键不是屏蔽不值得关注的
而是尽力屏蔽你也许曾经所珍视的

当现代人工神经网络抽象掉精确的「时间」因素时
也移除了实现生物学上依赖时间的可塑性机制所需的「计算上下文」
而个体自己创造的「自洽逻辑」也许便生长在这片「计算上下文」中

跨学科相比于单学科更容易提出关键问题
而每个个体积累相比于AI都算是单个学科
所以与其回答单学科视角提出的片面问题
如何让跨学科的视角提出自己的独立问题
也许是一个离第一性答案更近的路径

不确定是一种物理现实
确定性或只是大脑倾向
就像物理数学相互启发
认知与逻辑亦相互启发

每个个体都在
自己选择的「物理」中
形成了自己的「数学」

「在量子力学的数学结构中,位置和动量对应于两个厄米特算子,这两个算子不对易(其对易子值为 ħ)。这种不对易性直接导致了测不准关系:如果两种物理量的算子对易子为零,它们就可以被同时精确测量;若不为零,则本质上无法共确定。这说明测不准原理是从量子力学数学结构中必然导出的结果,而非观测误差或主观无法控制的因素。」

「20世纪末弦论的研究引出“镜像对称性”,即两类完全不同的几何空间(辛几何与代数几何)可以通过物理机制互相映射。这一思想让数学家建立了新的研究方向——同调镜像对称理论(Homological Mirror Symmetry),成为现代代数几何与拓扑学中的重大进展。」

「意识」通过创造「意义」处理「无意义」的数据
所以「意义」不是关键,关键是维持「处理」过程

代码是人类编写的逻辑
数学是宇宙原生的代码
物理是宇宙运行的程序
意识是宇宙程序的算法
处理宇宙数据的子算法