木子七

摘要： 数据准备阶段 常见问题 数据质量差： 企业大部分数据（尤其是非结构化数据）缺乏良好的数据治理，未经标记/评估的非结构化数据可能包含敏感、过时、矛盾或不正确的信息。 多模态信息： 提取、定义和理解文档中的不同内容元素，如标题、配色方案、图像和标签等存在挑战。 复杂的PDF提取： PDF是为人类阅读而设 阅读全文

摘要： LangChain 是一个开源的大语言模型（LLM）应用开发框架，核心是把大模型与外部数据、工具、工作流连接起来，解决大模型 “知识过时、无法联网、不会用工具” 的问题，让你快速搭建出上下文感知、能推理、可调用工具的 AI 应用,LangChain = LLM + 外部数据 + 工具 + 工作流编排 阅读全文

摘要： RAG概念和原理 RAG（Retrieval-Augmented Generation） 检索增强生成，是一种结合信息检索（Retrieval）和文本生成（Generation）的技术 RAG技术通过实时检索相关文档或信息，并将其作为上下文输入到生成模型中，从而提高生成结果的时效性和准确性。 RAG 阅读全文

摘要： 向量 = 把信息统一编码成可计算的数字，让机器能用数学理解语义、关系和相似度，越相近则越匹配 向量 = 信息的数字表示 相似度 = 数字之间的距离 AI 智能 = 大规模向量匹配 向量表征 在人工智能领域，向量表征（Vector Representation）是核心概念之一。通过将文本、图像、声音、 阅读全文

摘要： RAG、Agent、模型微调 = 现在大模型落地的「三大主流技术方向」 RAG（检索增强生成） 解决：知识不准、知识过时、幻觉 作用：给模型外挂知识库，让它 “查资料再回答”。 Agent（智能体） 解决：复杂任务、多步骤、要调用工具 作用：让模型会思考、会规划、会用工具。 模型微调（Fine-tu 阅读全文

摘要： 基本使用 终端查看系统支持的shell解析器 cat /etc/shells 终端查看当前默认使用解析器，echo用于打印文本或者变量值 echo $SHELL 脚本名字使用.sh后缀(也可以使用其他自定义后缀，一般都是.sh) 脚本开头指定解析器-#! 后面指向解析器路径(如果不指定，则使用默认解 阅读全文

摘要： 客户端和服务端之间的调用，可以加入证书，实现调用的安全性 TLS是建立在TCP协议之上的协议，服务于应用层，前身是SSL，实现了将应用层的报文进行加密后再交由TCP进行传输的功能，生产环境可以购买证书或者使用一些平台发放的免费证书 自签证书 安装openssl 生成私钥文件 openssl genr 阅读全文

摘要： 协议介绍 RPC协议 RPC(远程过程调用协议)，通过网络从远程计算机上请求服务，而不需要了解底层网络技术的协议。RPC假定某些协议的存在，例如TCP/UDP等，为通信程序之间携带信息数据。在OSI网络七层模型中，RPC跨越了传输层和应用层，RPC使得开发包括网络分布式多程序在内的应用程序更加容易, 阅读全文

摘要： protobuf gRPC是一款语言中立、平台中立、开源的远程过程调用系统，gRPC客户端和服务端可以在多种环境中运行和交互，例如用java写一个服务端，可以用go语言写客户端调用 数据在进行网络传输的时候，需要进行序列化，序列化协议有很多种，比如xml, json，protobuf等 gRPC默认 阅读全文

摘要： 单体服务 一种软件开发模型，它将所有的服务组件集成在一个独立的系统单位中进行开发、部署和维护。在这种架构中，前端用户界面、后端服务器逻辑、数据库操作等组件通常紧密耦合在一起，形成一个统一的程序。这种架构模式易于开发和部署，特别是在项目规模较小、复杂度较低的情况下。然而，随着项目规模的扩大、复杂度的增 阅读全文