当前位置: 首页 > article >正文

玩转AI!用FastAPI+RAG轻松构建智能文档问答系统,代码、文档全公开!

在企业数字化转型的浪潮中我们常遇到这样一个痛点海量的业务文档、研究报告、技术手册堆积如山当需要从中寻找某个特定答案时员工往往要花费数小时甚至数天进行翻阅。这不仅是效率的浪费更是知识资产沉睡的体现**点击文末“阅读原文”获取完整智能体、代码、数据、文档。**本文内容改编自过往客户咨询项目的技术沉淀并且已通过实际业务校验该项目完整代码已分享至交流社群。阅读原文进群获取更多最新AI见解和行业洞察可与900行业人士交流成长还提供人工答疑拆解核心原理、代码逻辑与业务适配思路帮大家既懂 怎么做也懂 为什么这么做遇代码运行问题更能享24小时调试支持。本文将引导您一步步构建一个基于FastAPI的RAG检索增强生成 系统。我们会先梳理RAG的核心概念与FastAPI的优势随后深入代码实现打造一个能够接收PDF或TXT文档、对其内容进行索引、并回答用户问题的API服务。最后我们还会探讨HTTP状态码的工程意义并展望系统的优化方向。理解REST APIREST API 是一种接口用于在客户端和服务器之间建立通信。REST API 是 Representational State Transfer API 的缩写。客户端可以向特定的 API 端点发送 HTTP 请求服务器负责处理这些请求。存在不少HTTP方法。其中几项我们会用FastAPI在项目中实现。HTTP 方法检索增强生成与FastAPI为何是黄金组合在我们动手之前先来理解两个核心概念RAG和FastAPI并探讨为什么它们是天作之合。什么是RAGRAG即检索增强生成是一种让大语言模型 能够利用外部知识库的技术。它就像一个开卷考试的学生面对问题查询他首先快速翻阅参考资料检索相关文档片段然后结合资料和自己的理解组织出一个精准的回答生成。RAG的核心由两部分构成检索器负责根据用户问题从文档库中快速找到最相关的信息片段。生成器大语言模型将检索到的信息片段作为上下文结合问题生成最终答案。这种架构有效解决了大语言模型知识截止、幻觉等问题是连接通用大模型与私有数据的最佳桥梁。– 为本项目创建一个虚拟环境以隔离项目的依赖关系。为什么选择FastAPIFastAPI是一个现代、高性能的Python Web框架专为构建API而生。它在本次项目中的优势显而易见自动生成交互式文档只需编写代码FastAPI就能自动生成Swagger UI我们可以在浏览器中直接测试API无需额外开发前端。基于Python类型提示利用Pydantic模型它能自动进行请求体验证和序列化减少大量模板代码。异步支持天然支持异步请求处理非常适合I/O密集型任务如文件读取和网络调用。高性能得益于Starlette和Pydantic其性能可与Node.js、Go相媲美。结合RAG与FastAPI我们可以快速将一个智能文档问答 系统封装成易于集成的API服务。项目实战打造文档智能问答API接下来我们进入核心环节——代码实现。我们的目标是创建两个API端点/ingest接收用户上传的PDF或TXT文档将其分块、向量化并存入FAISS索引。/query接收用户问题检索相关文档块并调用大语言模型生成答案。环境准备与依赖安装首先确保您已完成以下准备工作获取OpenAI API密钥并在项目根目录创建.env文件添加plaintextOPENAI_API_KEY您的密钥创建并激活Python虚拟环境安装依赖库。requirements.txt内容如下版本号已做调整确保兼容性fastapi uvicorn[standard] python-multipart langchain langchain-community langchain-openai faiss-cpu openai pypdf python-dotenv 一键获取完整项目代码使用命令pip install -r requirements.txt一键安装。核心模块rag_pipeline.py这个脚本封装了RAG的所有核心逻辑包括文档加载、文本分块、向量存储、检索与生成。我们将代码模块化便于维护和调用。# 全局向量存储对象用于跨请求共享 vector_store: FAISS | None None embeddings OpenAIEmbeddings(modelEMBEDDING_MODEL_NAME) def _load_vector_store() - FAISS | None: 从本地磁盘加载已存在的FAISS索引。 global vector_store if vector_store is None and os.path.exists(VECTOR_STORE_PATH): vector_store FAISS.load_local( VECTOR_STORE_PATH, embeddings, allow_dangerous_deserializationTrue ) return vector_store def process_document(file_path: str, display_filename: str ) - int: 处理上传的文档加载、分块、向量化并存入FAISS。 返回被索引的文本块数量。 global vector_store # 1. 根据文件扩展名选择加载器 iffile_path.endswith(.pdf): loader PyPDFLoader(file_path) else: loader TextLoader(file_path) documents loader.load() # 为所有文档块添加来源文件名 source_name display_filename or os.path.basename(file_path) for doc in documents: doc.metadata[source] source_name # 2. 文本分块 splitter RecursiveCharacterTextSplitter( chunk_sizeCHUNK_SIZE, chunk_overlapCHUNK_OVERLAP, separators[\n\n, \n, ., , ] ) chunks splitter.split_documents(documents) # 代码中省略了部分错误处理和细节优化完整代码请进群获取。 ...... 一键获取完整项目代码API服务main.py现在我们使用FastAPI将上述功能暴露为RESTful API。这里定义了请求/响应模型和三个端点。import os import tempfile from fastapi import FastAPI, UploadFile, File, HTTPException from pydantic import BaseModel from rag_pipeline import process_document, query_rag app FastAPI( title文档智能问答API, description上传文档并进行检索增强生成式问答, version1.0.0 ) # 允许的文件类型 ALLOWED_FILE_TYPES { application/pdf: .pdf, text/plain: .txt, } classQueryRequest(BaseModel): question: str top_k: int 4 classQueryResponse(BaseModel): answer: str sources: list[str] app.get(/health, tags[系统状态]) asyncdefhealth_check(): 健康检查端点用于确认服务是否运行。 return {status: running} app.post(/ingest, tags[文档处理]) asyncdefingest_document(file: UploadFile File(...)): 上传文档.txt 或 .pdf系统将自动进行分块、向量化并存储。 if file.content_type notin ALLOWED_FILE_TYPES: # 代码中省略了更复杂的验证逻辑和自定义异常处理完整代码请进群获取。 ...... 一键获取完整项目代码启动服务只需在终端执行uvicornmain:app--reload访问http://127.0.0.1:8000/docs您将看到自动生成的Swagger UI界面所有API都可以在这里进行测试。相关文章DeepSeek、LangGraph和Python融合LSTM、RF、XGBoost、LR多模型预测NFLX股票涨跌|附完整代码数据原文链接https://tecdat.cn/?p44060测试与验证文档上传与索引/ingest在Swagger UI中点击/ingest端点尝试上传一个PDF文件例如我们为您准备的一篇关于机器学习应用的文章。点击“Execute”后如果成功您将看到如下响应表明文档已被成功分块并索引。此时项目目录下会生成faiss_index文件夹里面保存了向量索引文件即使服务重启数据也不会丢失。智能问答/query接下来测试/query端点。输入一个问题例如“机器学习有哪些应用”并设置top_k4。点击Execute后系统会返回答案以及答案所依据的文档来源。您可以看到答案准确地基于上传文档的内容生成并且指明了来源增强了可信度。深入理解HTTP状态码API的通用语言在开发API时合理使用HTTP状态码至关重要它们用简洁的代码向客户端传达了请求的处理结果。我们的系统也遵循了这一规范。2xx 成功如200 OK表示请求成功。我们的/health、/ingest和/query在正常处理时都会返回200。4xx 客户端错误表示问题出在客户端发送的请求上。例如400 Bad Request当上传了不支持的文件类型或问题为空时我们的API会返回此状态码。422 Unprocessable Entity当请求体不符合Pydantic模型定义时FastAPI会自动返回此状态码。5xx 服务器错误表示服务器端在处理请求时发生意外。例如若FAISS或OpenAI调用失败我们的API会捕获异常并返回500 Internal Server Error。正确使用状态码能让API更加健壮和易用。总结与展望通过本文我们成功地构建并部署了一个基于FastAPI的RAG系统。该系统能够接收并索引PDF或TXT文档。根据用户提问从文档中检索相关信息。利用大语言模型生成精准的答案。这个项目不仅展示了RAG技术的落地过程也体现了FastAPI在构建AI服务时的高效与便捷。您可以将此系统应用于企业知识库问答、智能客服、研究报告分析等场景。展望未来我们可以从以下几个方面进行优化检索策略优化除了简单的相似度搜索可以尝试MMR最大边际相关性检索平衡结果的相关性与多样性。分块策略优化根据文档类型和语言调整分块大小和重叠部分或采用语义分块。多路召回结合关键字检索如BM25与向量检索提高召回率。前端界面为API开发一个简单的聊天界面提升用户体验。AI行业迎来前所未有的爆发式增长从DeepSeek百万年薪招聘AI研究员到百度、阿里、腾讯等大厂疯狂布局AI Agent再到国家政策大力扶持数字经济和AI人才培养所有信号都在告诉我们AI的黄金十年真的来了在行业火爆之下AI人才争夺战也日趋白热化其就业前景一片蓝海我给大家准备了一份全套的《AI大模型零基础入门进阶学习资源包》包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。有需要的小伙伴可以V扫描下方二维码免费领取人才缺口巨大人力资源社会保障部有关报告显示据测算当前****我国人工智能人才缺口超过500万****供求比例达1∶10。脉脉最新数据也显示AI新发岗位量较去年初暴增29倍超1000家AI企业释放7.2万岗位……单拿今年的秋招来说各互联网大厂释放出来的招聘信息中我们就能感受到AI浪潮比如百度90%的技术岗都与AI相关就业薪资超高在旺盛的市场需求下AI岗位不仅招聘量大薪资待遇更是“一骑绝尘”。企业为抢AI核心人才薪资给的非常慷慨过去一年懂AI的人才普遍涨薪40%脉脉高聘发布的《2025年度人才迁徙报告》显示在2025年1月-10月的高薪岗位Top20排行中AI相关岗位占了绝大多数并且平均薪资月薪都超过6w在去年的秋招中小红书给算法相关岗位的薪资为50k起字节开出228万元的超高年薪据《2025年秋季校园招聘白皮书》AI算法类平均年薪达36.9万遥遥领先其他行业总结来说当前人工智能岗位需求多薪资高前景好。在职场里选对赛道就能赢在起跑线。抓住AI风口轻松实现高薪就业但现实却是仍有很多同学不知道如何抓住AI机遇会遇到很多就业难题比如❌ 技术过时只会CRUD的开发者在AI浪潮中沦为“职场裸奔者”❌ 薪资停滞初级岗位内卷到白菜价传统开发3年经验薪资涨幅不足15%❌ 转型无门想学AI却找不到系统路径83%自学党中途放弃。他们的就业难题解决问题的关键在于不仅要选对赛道更要跟对老师我给大家准备了一份全套的《AI大模型零基础入门进阶学习资源包》包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。有需要的小伙伴可以V扫描下方二维码免费领取​

相关文章:

玩转AI!用FastAPI+RAG轻松构建智能文档问答系统,代码、文档全公开!

在企业数字化转型的浪潮中,我们常遇到这样一个痛点:海量的业务文档、研究报告、技术手册堆积如山,当需要从中寻找某个特定答案时,员工往往要花费数小时甚至数天进行翻阅。这不仅是效率的浪费,更是知识资产沉睡的体现**…...

I2CLCD驱动库:HD44780字符屏的I²C轻量级嵌入式适配方案

1. I2CLCD库概述:面向嵌入式系统的字符型LCD IC适配驱动I2CLCD是一个轻量级、可移植的C语言驱动库,专为将标准HD44780兼容的字符型LCD(如1602、2004)通过IC总线接入MCU而设计。其核心价值在于消除并行接口对GPIO资源的高占用&…...

嵌入式OLED UI组件库:轻量级C++组件化设计

1. 项目概述 OLED UI Components 是一个面向嵌入式平台的轻量级、组件化 OLED 用户界面开发库,专为基于 SSD1306 驱动芯片的单色 OLED 显示屏(典型分辨率为 12864)设计。该库不直接操作硬件寄存器,而是构建在 Adafruit_SSD1306 库…...

Nimbus:一个统一的具身合成数据生成框架

Zeyu He, Yuchang Zhang, Yuanzhen Zhou, Miao Tao, Hengjie Li,∗, Hui Wang, Yang Tian, Jia Zeng, Tai Wang, Wenzhe Cai, Yilun Chen, Ning Gao, Jiangmiao Pang摘要扩大数据规模和多样性对于泛化具身智能至关重要。虽然合成数据生成为昂贵的物理数据采集提供了可扩展的替代…...

02.Linux常用文件操作命令

1.mkdir 目录名:创建目录 mkdir 目录名 mkdir -p a/b/c 创建多级目录 2.touch 创建空文件 touch 文件名 touch 文件名 文件名 创建多个文件 3.文件写入内容 echo写入 覆盖写入 echo 文件内容 >文件名 追加写入(日志必用) echo 文件内容 >…...

STM32开发中的C语言高效编程技巧

STM32开发中的C语言高效编程技巧1. 位操作在寄存器控制中的应用1.1 位操作基础在STM32嵌入式开发中&#xff0c;C语言提供了六种基本位操作运算符&#xff1a;&按位与|按位或^按位异或~按位取反<<左移>>右移1.2 寄存器位操作技巧1.2.1 特定位置位/清零// 设置G…...

蒙纳什大学发现多模态推理模型的“不确定性陷阱“

这项由蒙纳什大学、佐治亚理工学院、康奈尔大学等多所知名学府联合完成的研究发表于2026年3月的《计算机视觉与模式识别》会议&#xff0c;论文编号为arXiv:2603.13366v1。有兴趣深入了解的读者可以通过该编号查询完整论文。当你问一个AI"这张图片里有什么"时&#x…...

SEO_避开这些常见误区让你的SEO效果事半功倍

<h2>SEO误区一&#xff1a;忽视关键词优化</h2> <p>在进行SEO优化时&#xff0c;关键词的选择和使用是至关重要的。很多人忽视了关键词优化&#xff0c;导致他们的网站在搜索引擎中的排名一直停滞不前。关键词不仅仅是为了让搜索引擎理解你的网站内容&#x…...

基于Matlab的正态云模型花卉特征提取:从理论到代码实现

257.基于matlab的正态云模型花卉特征提取&#xff0c;用正向正态云发生器和逆向正态云发生器来模拟花卉的部分特征提取 程序已调通&#xff0c;可直接运行在花卉研究领域&#xff0c;准确提取花卉特征对于花卉分类、品种识别等工作至关重要。今天咱们来聊聊基于Matlab的正态云模…...

LFM2.5-1.2B-Thinking-GGUF前端面试题解析实战:模拟面试与答案生成

LFM2.5-1.2B-Thinking-GGUF前端面试题解析实战&#xff1a;模拟面试与答案生成 1. 开篇&#xff1a;AI如何改变前端面试准备方式 前端开发岗位的竞争日益激烈&#xff0c;技术面试的难度也水涨船高。传统的面试准备方式往往效率低下——求职者要么死记硬背网上的标准答案&…...

Multisim仿真-FSK调制系统设计与性能优化

1. FSK调制系统基础与Multisim入门 FSK&#xff08;频移键控&#xff09;是数字通信中最基础的调制方式之一&#xff0c;它通过不同频率的载波来表示二进制数据。在实际工程中&#xff0c;Multisim作为电子电路仿真利器&#xff0c;能帮我们快速验证设计思路。我刚开始接触通信…...

C++ Template 特化机制详解

C模板特化机制是泛型编程中的核心特性之一&#xff0c;它允许开发者针对特定类型或条件提供定制化的实现&#xff0c;从而在保持代码通用性的同时优化性能或处理特殊场景。本文将深入解析模板特化的核心机制&#xff0c;帮助读者掌握这一高阶技巧&#xff0c;并理解其在实际项目…...

C++ 内联函数的性能影响

C内联函数的性能影响探析 在追求高效代码的C开发中&#xff0c;内联函数因其消除函数调用开销的特性而备受关注。通过将函数体直接嵌入调用点&#xff0c;内联函数能显著提升程序性能&#xff0c;尤其在频繁调用的场景下。过度或不恰当的内联也可能导致代码膨胀或缓存命中率下…...

apt-offline终极指南:离线环境下的APT包管理解决方案

apt-offline终极指南&#xff1a;离线环境下的APT包管理解决方案 【免费下载链接】apt-offline Offline APT Package Manager 项目地址: https://gitcode.com/gh_mirrors/ap/apt-offline 你是否曾面临这样的困境&#xff1f;服务器在安全隔离的网络中&#xff0c;无法直…...

如何用浏览器矢量图形编辑工具提升你的设计效率?

如何用浏览器矢量图形编辑工具提升你的设计效率&#xff1f; 【免费下载链接】svgedit Powerful SVG-Editor for your browser 项目地址: https://gitcode.com/gh_mirrors/sv/svgedit 在数字设计领域&#xff0c;寻找一款既专业又便捷的矢量图形编辑工具始终是设计师和开…...

Go Mutex 与 RWMutex 性能对比

在Go语言并发编程中&#xff0c;Mutex&#xff08;互斥锁&#xff09;和RWMutex&#xff08;读写锁&#xff09;是两种常用的同步机制。它们的性能差异直接影响高并发场景下的程序效率。本文将从多个角度对比两者的性能表现&#xff0c;帮助开发者根据实际需求选择合适的锁机制…...

ROS2 Jazzy尝鲜指南:在Ubuntu 24.04上从安装到跑通第一个Demo(附常见错误修复)

ROS2 Jazzy尝鲜指南&#xff1a;在Ubuntu 24.04上从安装到跑通第一个Demo Ubuntu 24.04 LTS的发布带来了全新的ROS2 Jazzy版本&#xff0c;这对机器人开发者来说无疑是一次令人兴奋的技术升级。作为长期支持版本&#xff0c;Jazzy将在未来五年内获得官方维护&#xff0c;这意味…...

AceMenu:嵌入式轻量级菜单框架设计与实践

1. AceMenu 库概述&#xff1a;面向嵌入式人机交互的轻量级菜单框架AceMenu 是一个专为资源受限嵌入式系统设计的轻量级、可移植菜单管理库。其核心设计哲学是“以最少的硬件资源开销&#xff0c;实现最直观的用户导航体验”。不同于通用 GUI 框架&#xff08;如 LVGL 或 Touch…...

基于Matlab的11种图像清晰度评价指标:直接可运行,联系我

基于matlab图像清晰度评价指标。 一共11种。 程序已调通&#xff0c;可直接运行。 需要直接联系。 基于matlab图像清晰度评价指标。 一共11种。 程序已调通&#xff0c;可直接运行。 需要直接联系。 图像剃度的清晰度评价(EOG, Roberts, Tenengrad, Brenner,Variance, Laplace,…...

OpenClaw负载均衡:多Qwen3-VL:30B实例轮询策略

OpenClaw负载均衡&#xff1a;多Qwen3-VL:30B实例轮询策略 1. 为什么需要多模型实例负载均衡 上周我遇到一个棘手问题&#xff1a;用OpenClaw处理批量图片分析任务时&#xff0c;单个Qwen3-VL:30B实例频繁触发速率限制&#xff0c;导致任务队列堆积。更糟的是&#xff0c;有次…...

运维提效实战:用 Ansible+Cron 搞定日志自动清理,再也不用半夜爬起来删日志了

前言 作为常年和服务器打交道的运维人&#xff0c;估计没人没经历过半夜被磁盘爆满告警吵醒的崩溃 —— 远程登服务器、挨个找日志文件、手动删旧日志&#xff0c;一套操作下来人彻底清醒&#xff0c;回头还得担心误删关键文件。 其实这类重复又机械的运维活儿&#xff0c;完全…...

Qt 5.12.8在Linux下编译qtvirtualkeyboard模块,我踩过的那些坑(附完整解决方案)

Qt 5.12.8在Linux下编译qtvirtualkeyboard模块的深度实践指南 当你在嵌入式或跨平台开发中突然发现系统自带的Qt缺少虚拟键盘模块时&#xff0c;那种感觉就像在沙漠里找到一瓶水却发现没带开瓶器。本文将带你深入探索在aarch64架构的Linux系统中&#xff0c;如何为预装的Qt 5.1…...

在单细胞测序数据分析中,barcodes、features和matrix是三个最核心的基础文件,它们共同构成了所有分析的基石。

在GEO&#xff08;Gene Expression Omnibus&#xff09;数据库中下载单细胞数据时&#xff0c;最常见的数据存储和提供形式主要有以下四种类型&#xff1a;10x Genomics 标准格式&#xff08;最主流&#xff09;在GEO的数据集中&#xff0c;我们通常会找到一个包含以下三个核心…...

百川2-13B-4bits量化版对比测试:OpenClaw日常任务执行效率报告

百川2-13B-4bits量化版对比测试&#xff1a;OpenClaw日常任务执行效率报告 1. 测试背景与动机 最近在折腾OpenClaw自动化工作流时&#xff0c;发现一个棘手问题&#xff1a;当任务链条较长时&#xff0c;本地部署的大模型显存占用会飙升到16GB以上&#xff0c;导致我的RTX 30…...

MySQL技巧(八) :死锁解决与实战案例

在数据库高并发场景下&#xff0c;死锁是一个绕不开的经典难题。两个或多个事务相互持有对方需要的锁&#xff0c;导致都无法继续执行&#xff0c;就像两辆车在狭窄路口互不相让。本文将带你从原理到实战&#xff0c;掌握死锁的排查、解决和预防全流程。一、死锁快速定位当应用…...

3个高效能的核心功能:League-Toolkit开源工具效率提升指南

3个高效能的核心功能&#xff1a;League-Toolkit开源工具效率提升指南 【免费下载链接】League-Toolkit 兴趣使然的、简单易用的英雄联盟工具集。支持战绩查询、自动秒选等功能。基于 LCU API。 项目地址: https://gitcode.com/gh_mirrors/le/League-Toolkit League-Too…...

域环境基础知识

Active Directory&#xff08;AD&#xff09; 域控制器功能&#xff1a; 集中管理所有域用户统一身份认证组策略分发资源访问控制 Windows Server域环境搭建 推荐版本&#xff1a; Windows Server 2003Windows Server 2008Windows Server 2012 域环境组成&#xff1a; 域控制器…...

基于2026校招数据分析:拥有这几张AI证书的学生,起薪普遍高30%

2026年校招季已近尾声&#xff0c;随着DeepSeek等大模型技术的持续突破与“人工智能”向千行百业的深度渗透&#xff0c;AI人才市场的竞争呈现白热化态势。前程无忧51job发布的《2026届校招市场AI人才需求报告》显示&#xff0c;AI相关岗位校招薪酬中位数已突破2万元/月&#x…...

双模型灾备方案:OpenClaw同时配置百川2-13B-4bits与Llama3应对服务中断

双模型灾备方案&#xff1a;OpenClaw同时配置百川2-13B-4bits与Llama3应对服务中断 1. 为什么需要双模型灾备 去年冬天的一个深夜&#xff0c;我正在用OpenClaw自动处理一批技术文档的翻译任务。突然收到一连串报警通知——原本稳定运行的Qwen模型服务因为网络波动彻底失联。…...

GPT-5-Codex CLI实战:如何用UIUIApi中转服务稳定获取API Key(避坑指南)

GPT-5-Codex CLI高效实践&#xff1a;国内开发者API接入全流程解析 最近在技术社区里&#xff0c;关于GPT-5-Codex的讨论热度持续攀升。作为一名长期关注AI编程工具的开发者&#xff0c;我发现很多同行在尝试接入这项服务时遇到了各种技术障碍。本文将分享一套经过实战验证的完…...