上下文的分形之力:为什么一个对话环境,决定整个智能系统的表现
一、初始:基于分形思想,对 LLM 的理解微观:模型内部的注意力机制(决定哪句话更重要)就像“耳朵”在听中观:通过Prompt提示词引导它回答问题,就像教孩子怎么表达宏观:同一个模型被用于写代码、翻译、做客服等,就像一个人能做多件事分形特征:每一层的结构都在模仿更高一层的逻辑。比如,“注意力”是微小的机制,但正是它让整个对话变得流畅自然列个表更清晰:层次模型中的机制类比微观注意力机制“耳朵”选择性地听中观Prompt控制输出教孩子如何表达宏观多任务能力一个人做多件事类比的核心在于:微观机制决定宏观表现每一层都嵌套在下一层中形成自相似结构1.1 LLM 三层关系网络可视化我们可以构建一个三...