读懂 LLM : AI 是如何“思考”的,又该如何高效使用

掌握大语言模型(LLM)的核心在于理解其底层机制与交互技巧。首先,Token 是模型处理文本的最小单位,直接影响输入输出长度及费用。默认的非确定性模式赋予模型创意,但也导致结果不可预测。其次,温度、最大 Token 数和 Top-p 三个参数共同调控模型的随机性、回复长度及词汇选择范围,用户可根据精准或创意需求灵活调整。此外,受限于上下文窗口,模型仅能记忆当前对话片段,超出部分会被丢弃。最后,提示词质量决定输出效果,高质量的提示词应包含清晰指令、背景信息及期望格式,通过缩小猜测空间来提升回答的准确度。

发布于2026年5月13日 22:35
编辑小创
评论0
阅读105

你真的会用大模型吗?从 Token 到提示词,一次说清楚

用 ChatGPT 敲几个字就能得到像人一样的回复,这件事确实有点魔幻。但凡认真用过一段时间的人都会发现,输出质量高不高,很大程度上取决于你怎么跟模型“说话”。想真正用好大语言模型( Large Language Model , LLM ),得先搞清楚它内部是怎么运作的。

Token :模型认识世界的最小单位

LLM 处理文字的方式跟人类完全不同。它看到的不是一个个完整的单词,而是被切割成小块的 Token 。一个 Token 可能是一个完整的词,也可能只是某个词的一部分,甚至是一个标点符号。“Hello”通常对应一个 Token ,而“Cybersecurity”这样的长词则可能被拆成好几个。这件事不只是个技术细节。模型的输入上限、输出长度、费用计算,全都以 Token 为单位。

模型还有一个让很多人困惑的特性:同一个问题问两次,答案可能不一样。这不是故障,而是刻意为之的设计。所谓“确定性输出( Deterministic output )”,指的是相同输入必然产生相同输出。而绝大多数 LLM 默认运行在“非确定性( Non-deterministic )”模式下,这让它们更灵活、更有创意,代价是偶尔难以预测。

三个参数,决定模型说话的“风格”

温度( Temperature )是控制随机性的核心旋钮。把它调低到 0.1 到 0.3 的区间,模型会变得保守、精准,适合需要准确答案的场景。调高到 0.7 以上,输出就会更发散、更有想象力,适合创意写作或头脑风暴。一个粗略的类比是:低温度像工程师,高温度像诗人。

最大 Token 数( Max Tokens )决定回复的长度上限。设置过低,答案会被硬生生截断。设置合理,才能拿到完整的解释。

Top-p (核采样, Nucleus Sampling )和温度协同工作,控制模型在生成每一个 Token 时会“考虑”多大范围的候选词汇。数值越低,选择越保守。数值越高,措辞越多样。两个参数同时调整时,效果会叠加,需要一点点实验感。

上下文窗口:模型唯一的“记忆”

LLM 没有真正意义上的记忆。它能“看到”的全部内容,只有当前对话里那一段有限的文本,也就是上下文窗口( Context Window )。这个窗口里装着你的提示词、历史对话和模型自己的上一条回复。一旦对话内容超出窗口大小,最早的信息就会被悄悄丢掉。这就是为什么聊到后面,模型有时候会“忘记”你在开头说过的事。

提示词写法,才是真正拉开差距的地方

绝大多数人低估了提示词( Prompt )的作用。模糊的问题只会换来模糊的答案。“解释一下 API”和“用简单的语言解释 REST API ,并附上真实的使用例子”,得到的结果天差地别。

一个高质量的提示词通常包含几层信息:清晰的指令(让模型知道它该干什么)、背景信息(比如“我正在准备网络安全面试”)、期望的输出格式(“用不超过 150 个字回答”)。这些不是繁文缛节,而是在帮模型缩小它需要猜测的空间。

相关文章

Jev 实操指南,用概率闸门重构智能体决策流
AI 新闻资讯
2026年9月18日
0 条评论
小创

Jev 实操指南,用概率闸门重构智能体决策流

TypeSafe AI 推出系统一模型 Jev,作为智能体概率决策闸门,仅返回带校准概率的结构化结果而不生成文本。该模型具备低成本、低延迟及零输出错误率特性,支持 Choice、Score、Noul 三种提问原语。文章详解了其 API 调用、SDK 集成及推测式并行、置信度路由等五种落地模式,并指出其本质是强类型函数调用而非廉价 LLM。建议在生产环境中锁定版本、规避算术任务,并通过影子模式实测校准效果。

#智能体#AI 编程#提示词工程
阅读全文
Anthropic 开源知识工作插件库,111 个无代码技能包重塑智能体工作流
AI 教程知识
2026年9月18日
0 条评论
小创

Anthropic 开源知识工作插件库,111 个无代码技能包重塑智能体工作流

Anthropic 开源 knowledge-work-plugins 项目,提供 111 个无代码智能体技能包。该体系基于 Markdown 和 JSON 构建标准化模块,支持渐进式披露与 MCP 工具集成,标志提示词工程向软件工程化转型。内置 marketing 与 productivity 等插件展示了结构化输入及分层记忆范式,支持语义路由与轻量化定制。尽管存在多插件上下文竞争及云端连接器限制内网访问等问题,仍为智能体工作流提供了可复用的模块化规范。

#智能体#AI工具#提示词工程
阅读全文
把 LLM 当文字编辑而非代写枪手:两条铁律与改稿提示词
智能体工程
2026年9月18日
0 条评论
小创

把 LLM 当文字编辑而非代写枪手:两条铁律与改稿提示词

使用 LLM 辅助写作应将其定位为文字编辑而非代写枪手。核心原则包括绝不采纳模型生成的具体词汇及禁止其提供夸奖,以避免内容同质化。推荐采用“诊断-重写-比对”三阶段改稿流程,利用模型查找语法与逻辑硬伤,但由作者亲自重写。实践中可借助专用提示词库或本地工具提升效率。此外,需警惕长上下文压缩摘要可能引发的指令注入风险。AI 仅是批判性审视的效率放大器,人类创作者必须始终掌握写作主导权。

#AI写作#提示词工程#AI工具
阅读全文
互动讨论

评论区

围绕《读懂 LLM : AI 是如何“思考”的,又该如何高效使用》展开交流,未登录用户可浏览评论,登录后可参与讨论。

评论数
0
登录后参与评论
支持发表观点与回复一级评论,互动后将同步到消息中心。
登录后评论
暂无评论,欢迎成为第一个参与讨论的人。