Skip to content

面向应用工程的 AI 知识与训练系统

把 AI 需求
变成可验证的工程结果

不从模型名开始,从问题、数据、风险和验收开始。这里帮助产品、方案、研发与非算法人员建立共同语言,把 Prompt、RAG、Agent、Skill 和 Harness 落到可操作、可评估、可接管的工作流。

先定义问题,再选择技术,最后设计验收与人工兜底。

理性智能体连接业务输入、知识、工具、评估与人工复核的应用工程场景
应用工程闭环把感知、知识、决策、行动、评估和人工接管连成一个系统。
Prompt EngineeringRAGAgentSkillHarnessEvaluationSafetyDelivery

一条主线

AI 产品判断不是从“用哪个模型”开始,而是从“这个需求要输出什么、错了怎么办、怎么验收”开始。本站按下面这条路径组织内容:

1. 判断需求类型分类、检索、生成、预测、推荐、规划,还是自动化决策。
2. 判断数据条件是否有标签、文档、图片、行为日志、规则、实时系统或历史样本。
3. 选择技术路线规则、ML、CV、RAG、微调、知识图谱、Agent、MCP/Skill。
4. 设计验收边界评估集、指标、失败样本、低置信处理、人工复核和上线灰度。
AIMA 理性智能体映射到现代 AI 应用工程的系统闭环图
从环境与目标出发,把感知、状态与知识、规划与决策、工具行动、评估治理连成闭环。

需求判别

如果你现在手里有一个 AI 需求,先用这张表判断它是什么问题。判断错问题类型,后面的模型、成本和验收都会跑偏。

需求类型用户常见说法输出是什么优先技术不靠谱信号
分类判断是否合规、是否缺陷、属于哪类类别、概率、原因监督学习、CV、文本分类只看准确率,不看误报/漏报
检索从制度、论文、产品文档里找答案证据、引用、候选答案搜索、Embedding、RAG让模型凭记忆回答私有知识
生成写报告、总结会议、生成文案文本、代码、草稿LLM、Prompt、模板把生成结果当最终事实
预测预测风险、销量、故障概率数值、概率、趋势回归、分类、时序模型数据太少却追求复杂模型
推荐推荐商品、内容、专家、资料排序列表、推荐理由推荐系统、排序模型只优化点击,不看满意度
规划安排路线、步骤、任务流路径、计划、行动序列搜索、规划、Agent 工作流把多步任务当单轮问答
自动化决策自动审批、自动流转、自动执行通过/拒绝/转人工/执行动作规则 + ML + Agent + 人工兜底不可逆动作没有确认和审计

下一步:进入 需求判断与技术路线,把具体需求拆成输入、输出、技术和验证方式。

技术路线

技术页不是孤立百科,而是服务于需求判断。你可以按问题进入,也可以按技术进入。

AI 技术选型速查位图信息图
把输出形态映射到技术路线和验收重点,避免一上来就追模型名。

上线验收

AI 项目最容易失败的地方不是“模型跑不起来”,而是 demo 看起来不错,到了真实场景无法证明有用。上线前至少要回答五个问题:

验收问题PM 要确认什么
评估集是什么是否覆盖高频场景、长尾场景、边界样本和高风险样本
指标怎么解释准确率、召回率、精确率、F1、人工通过率如何对应业务价值
失败样本怎么处理是否记录失败原因、补充样本、复测版本、形成闭环
低置信怎么办拒答、提示不确定、转人工、二次确认还是限制动作
上线后怎么看延迟、成本、用户反馈、人工接管率、风险事件和灰度观察

下一步:评估与风险,再回到 方案模式 设计具体场景方案。

专题入口

资源库

公开资料和开源仓库用于延伸学习,不替代本站的判断主线。

资源适合补什么入口
Berkeley CS188 / Stanford CS221经典 AI、搜索、规划、概率、决策开源知识仓库
Google ML Crash Course机器学习、数据、泛化、评估机器学习基础
AIMA / aima-python理性智能体、搜索、CSP、逻辑、MDPAIMA 框架
Hugging Face / LLM 开源仓库Transformer、微调、RAG、推理LLM 训练机制
Dify / LangGraph / AutoGen / CrewAIAgent 编排与工作流Agent 编排平台
OpenCV / OpenPIV / DIC 相关仓库视觉工程、DIC、PIV、定量测量视觉与工程测量

从一个真实问题开始,不从一张模型清单开始

先完成需求判断,再进入培训或工程实践;当证据、权限或错误代价不清楚时,系统应停下来交给人。

AI 技术边界、方案判断与知识导航