-
第四章 检查输入 - 审核
第四章 检查输入 - 审核 一、审核 1.1 我要杀死一个人 1.2 一百万美元赎金 二、 Prompt 注入 2.1 使用恰当的分隔符 2.1.1 系统消息 2.1.2 用户尝试进行 Prompt 注入 2.1.3 用户再次尝试进行 Prompt 注入 2.1.4 使用分隔符规避 Prompt 注入 2.2 进行监督分类 2.2.1 系统消... -
在 Mesos 上运行 Spark
在 Mesos 上运行 Spark 运行原理 安装 Mesos 从源码安装 第三方软件包 验证 连接 Spark 到 Mesos 上传 Spark 包 使用 Mesos Master URL Client Mode（客户端模式） Cluster mode（集群模式） Mesos 运行模式 Coarse-Grained（粗粒度） Fin... -
第八章 聊天机器人
第八章 聊天机器人 一、给定身份 1.1 讲笑话 1.2 友好的聊天机器人 二、构建上下文 三、订餐机器人 3.1 构建机器人 3.2 创建JSON摘要 三、英文版 第八章 聊天机器人 大型语言模型带给我们的激动人心的一种可能性是，我们可以通过它构建定制的聊天机器人（Chatbot），而且只需很少的工作量。在这一章节的探索中，我们将带... -
第十章 评估（下）——当不存在一个简单的正确答案时
第十章 评估（下）——当不存在一个简单的正确答案时 一、运行问答系统获得一个复杂回答 二、使用 GPT 评估回答是否正确 三、评估生成回答与标准回答的差距 四、英文版 第十章 评估（下）——当不存在一个简单的正确答案时 在上一章中，我们探索了如何评估 LLM 模型在 有明确正确答案 的情况下的性能，并且我们学会了编写一个函数来验证 LLM ... -
API 文档
API 文档 API 文档 Spark Scala API (Scaladoc) Spark Java API (Javadoc) Spark Python API (Sphinx) Spark R API (Roxygen2) -
第三章 文档分割
第三章 文档分割 一、为什么要进行文档分割 二、文档分割方式 三、基于字符分割 3.1 短句分割 3.2 长文本分割 四、基于 Token 分割 五、分割Markdown文档 5.1 分割一个自定义 Markdown 文档 5.2 分割数据库中的 Markdown 文档 六、英文版 第三章 文档分割 在上一章中，我们刚刚讨论了如何... -
第五章 基于文档的问答
第五章 基于文档的问答 一、直接使用向量储存查询 1.1 导入数据 1.2 基本文档加载器创建向量存储 1.3 查询创建的向量存储 二、 结合表征模型和向量存储 2.1 导入数据 2.2 文本向量表征模型 2.3 基于向量表征创建并查询向量存储 2.4 使用查询结果构造提示来回答问题 2.5 使用检索问答链来回答问题 英文版提示 ... -
第五章 检索(Retrieval)
第五章 检索(Retrieval) 一、向量数据库检索 1.1 相似性检索（Similarity Search） 1.2 解决多样性：最大边际相关性(MMR) 1.3 解决特殊性：使用元数据 1.4 解决特殊性：在元数据中使用自查询检索器（LLM辅助检索） 1.5 其他技巧：压缩 二、结合各种技术 三、其他类型的检索 四、总结 五、英文版 ... -
第三章 评估输入——分类
第三章 评估输入——分类 英文版 第三章 评估输入——分类 在本章中，我们将重点探讨评估输入任务的重要性，这关乎到整个系统的质量和安全性。 在处理不同情况下的多个独立指令集的任务时，首先对查询类型进行分类，并以此为基础确定要使用哪些指令，具有诸多优势。这可以通过定义固定类别和硬编码与处理特定类别任务相关的指令来实现。例如，在构建客户服务助手时，对...