-
快速入门
快速入门 安全 使用 Spark Shell 进行交互式分析 基础 Dataset 上的更多操作 缓存 独立的应用 快速跳转 快速入门 本教程提供了如何使用 Spark 的快速入门介绍。首先通过运行 Spark 交互式的 shell（在 Python 或 Scala 中）来介绍 API，然后展示如何使用 Java，Scala 和 Pyt... -
第四章 向量数据库与词向量(Vectorstores and Embeddings)
第四章 向量数据库与词向量(Vectorstores and Embeddings) 一、读取文档 二、Embeddings 三、Vectorstores 3.1 初始化Chroma 3.2 相似性搜索(Similarity Search) 四、失败的情况(Failure modes) 4.1 重复块 4.2 检索错误答案 五、英文版 ... -
场景 8：化繁为简——信息提取
场景 8：化繁为简——信息提取 场景介绍 技巧 6：通过格式词阐述需要输出的格式 场景 8：化繁为简——信息提取 场景介绍 介绍完信息总结，再聊聊信息提取，我认为这个场景是继场景 3 推理以外，第二个值得深挖的场景。这个场景有非常多的有意思的场景，比如： 将一大段文字，甚至网页里的内容，按要求转为一个表格。按照这个思路你可以尝试做一个更... -
第五章 推断
第五章 推断 一、情感推断 1.1 情感倾向分析 3.1 推断讨论主题 英文版 第五章 推断 在这一章中，我们将通过一个故事，引领你了解如何从产品评价和新闻文章中推导出情感和主题。 让我们先想象一下，你是一名初创公司的数据分析师，你的任务是从各种产品评论和新闻文章中提取出关键的情感和主题。这些任务包括了标签提取、实体提取、以及理解文本的情感... -
Monitoring and Instrumentation
Monitoring and Instrumentation Web 界面 事后查看 环境变量 Spark配置选项 REST API API 版本控制策略 Metrics 高级工具 Monitoring and Instrumentation 有几种方法来监视 Spark 应用程序：Web UI，metrics 和外部工具。 W... -
第八章 聊天机器人
第八章 聊天机器人 一、给定身份 1.1 讲笑话 1.2 友好的聊天机器人 二、构建上下文 三、订餐机器人 3.1 构建机器人 3.2 创建JSON摘要 三、英文版 第八章 聊天机器人 大型语言模型带给我们的激动人心的一种可能性是，我们可以通过它构建定制的聊天机器人（Chatbot），而且只需很少的工作量。在这一章节的探索中，我们将带... -
第四章 检查输入 - 审核
第四章 检查输入 - 审核 一、审核 1.1 我要杀死一个人 1.2 一百万美元赎金 二、 Prompt 注入 2.1 使用恰当的分隔符 2.1.1 系统消息 2.1.2 用户尝试进行 Prompt 注入 2.1.3 用户再次尝试进行 Prompt 注入 2.1.4 使用分隔符规避 Prompt 注入 2.2 进行监督分类 2.2.1 系统消... -
第六章 问答
第六章 问答 一、加载向量数据库 二、构造检索式问答链 三、深入探究检索式问答链 3.1 基于模板的检索式问答链 3.2 基于 MapReduce 的检索式问答链 3.3 基于 Refine 的检索式问答链 四、实验：状态记录 五、英文版 第六章 问答 Langchain 在实现与外部数据对话的功能时需要经历下面的5个阶段，它们分别是... -
第五章 检索(Retrieval)
第五章 检索(Retrieval) 一、向量数据库检索 1.1 相似性检索（Similarity Search） 1.2 解决多样性：最大边际相关性(MMR) 1.3 解决特殊性：使用元数据 1.4 解决特殊性：在元数据中使用自查询检索器（LLM辅助检索） 1.5 其他技巧：压缩 二、结合各种技术 三、其他类型的检索 四、总结 五、英文版 ...