当前位置： 首页 > news >正文

30秒搞定一个属于你的问答机器人，快速抓取网站内容

news 文章来源：https://blog.csdn.net/ddnosh/article/details/134748948 2025/5/11 2:24:51

我的新书《Android App开发入门与实战》已于2020年8月由人民邮电出版社出版，欢迎购买。点击进入详情

文章目录

  • 简介
  • 运行效果
  • GitHub地址

简介

爬取一个网站的内容，然后让这个内容变成你自己的私有知识库，并且还可以搭建一个基于私有知识库的问答机器人，简直太香了！

原理很简单，通过爬虫获取页面内容并保存到一个Output.json文件，然后将文件上传到GPTs，马上我们就能得到一个基于爬取的网站内容的私有知识库。

注意，使用GPTs的时候，你需要：
you may need a paid ChatGPT plan to create and use custom GPTs right now

运行效果

在这里插入图片描述
在这里插入图片描述

GitHub地址

https://github.com/BuilderIO/gpt-crawler

相关文章：

30秒搞定一个属于你的问答机器人，快速抓取网站内容

我的新书《Android App开发入门与实战》已于2020年8月由人民邮电出版社出版，欢迎购买。点击进入详情 文章目录 简介运行效果GitHub地址 简介 爬取一个网站的内容，然后让这个内容变成你自己的私有知识库，并且还可以搭建一个基于私有知识库的问…...

编程日记 2023/12/2 17:34:10

JPA数据源Oracle异常记录

代码执行异常 ObjectOptimisticLockingFailureException org.springframework.orm.ObjectOptimisticLockingFailureException: Batch update returned unexpected row count from update [0]; actual row count: 0; expected: 1; nested exception is org.hibernate.StaleSta…...

编程日记 2023/12/2 17:33:09

抽奖送平板是骗局！！！

在街上被派传单，然后扫了码抽奖中了平板，被领到卖电器门店兑奖。他们给我在宜嘉商城上充值4980，我现场给他们付了4980元，签了他们的业务办理单，上面有违约者赔款30%违约金字样。我领走了荣耀畅玩40plus手机一台。第二天…...

编程日记 2023/12/2 17:32:08

json.decoder.JSONDecodeError: Extra data: line 1 column 332 (char 331)

项目场景： 提示：扩充数据集时，同步修改json标签中的"imagePath"字段的值，出现json文件读写不一致问题。 采用open函数读写模式修改json文件字段。open(jsonF.json, r)。 问题描述 运行修改json文件报错：j…...

编程日记 2023/12/2 17:31:07

rust持续学习 COW

COW我第一次看见还以为是奶牛 很奇怪是个啥 后来了解到是clone on write 缩写的，大乌龙啊 这个有两种enum,一种是borrow，一种是own rust中，数据读写经常涉及到所有权 这个borrow，很显然，就是不可变借用了 own就是可以写…...

编程日记 2023/12/2 17:30:07

【计算机网络】14、DHCP

文章目录 一、概述1.1 好处 二、概念2.1 分配 IP2.2 控制租赁时间2.3 DHCP 的其他网络功能2.4 IP地址范围和用户类别2.5 安全 三、DHCP 消息3.1 DHCP discover message3.2 DHCP offers a message 如果没有 DHCP，IT管理者必须手动选出可用的 ip，这太耗时了…...

编程日记 2023/12/2 17:28:05

【FPGA】Verilog：计数器 | 异步计数器 | 同步计数器 | 2位二进制计数器的实现 | 4位十进制计数器的实现

目录 Ⅰ. 实践说明 0x00 计数器（Counter） 0x01 异步计数器（Asynchronous Counter）...

编程日记 2023/12/2 17:26:03

IDEA常用快捷键

快捷键功能tab接受选择–选择的名称将覆盖带插入符号右侧的其它名称–而如果按shift或者enter，光标右边的内容会保留Ctrlshift空格智能匹配–查找当前上下文的方法和变量Ctrld对比文件–选中需要对比的文件shift滚动水平滚动Ctrlaltl格式化Ctrlk提交Ctrlaltz回滚类C…...

编程日记 2023/12/2 17:17:55

【2024秋招】2023-10-17 金山云文档服务端二面

1 实习 1.1 讲解一下curd启动器 1.2 数据同步的过程是怎么实现的，同步过程中的数据一致性怎么保证的 答：同步过程中会记录断点，表示每一批同步成功时的位置，如果对端出现问题，则下一次同步会继续从这个断点后开始同…...

编程日记 2023/12/2 17:12:51

一种excel多线程并发写sheet的方案

一、背景 有一次项目的需求要求导出excel，并且将不同的数据分别写到不同的sheet中。 二、 方案概述 首先一开始使用easyexcel去导出excel，结果发现导出时间需要3秒左右。于是想着能不能缩短excel导出时间，于是第一次尝试使用异步线程去查询数…...

编程日记 2023/12/2 17:11:50

深入了解接口测试：揭秘网络分层和数据处理！

网络分层和数据 上一小节中介绍了接口测试中一些必要重要的定义，这一节我们来讨论一下在学习接口测试过程中我们要关注的最重要的东西：网络分层和数据。 首先，我们来尝试理解一下，为什么网络是要分层的呢？ 我们可以…...

编程日记 2023/12/2 17:10:49

Java并发编程

进程和线程 进程即程序的一次执行过程，各个进程之间是独立的。线程是更小的单位，一次进程中，可能会有多个线程，可能会相互影响，各个线程有自己的程序计数器，虚拟机栈和本地方法栈，同时共同使用…...

编程日记 2023/12/2 17:06:46

vue+echarts实现依赖关系无向网络拓扑结图节点折叠展开策略

目录 引言 一、设计 1. 树状图（不方便呈现节点之间的关系，次要考虑） 2. 力引导依赖关系图 二、力引导关系图 三、如何实现节点的Open Or Fold 1. 设计逻辑 节点展开细节 节点收缩细节 代码实现 四、结果呈现 五、完整代码 引言 我…...

编程日记 2023/12/2 17:04:43

Unity3d 灯光阴影开启，法线贴图出现BUG

URP项目打开灯光的阴影后，法线贴图出现BUG 解决方案：按照下图所示调整材质的选项即可...

编程日记 2023/12/2 17:03:43

c语言：模拟实现atoi函数

atoi函数的功能和用法&#xff1a; 主要功能&#xff1a;将字符串转换为整数。例如&#xff0c;将字符类型的“123”转换为整数123. #include <stdio.h> #include <stdlib.h>int main() {char str[] "123";int num atoi(str);printf("Converted …...

编程日记 2023/12/2 17:01:41

Docker 使用心得

创建一个docker 镜像&#xff0c;相关运行代码&#xff0c;放在docker镜像文件同级&#xff0c; pm2 不能与 docker一起使用&#xff08;&#xff09; # node 服务docker FROM node:10.16.3LABEL author"sj"RUN mkdir -p /var/nodeCOPY ./node /var/nodeWORKDIR /va…...

编程日记 2023/12/2 17:00:40

Nacos 架构原理

基本架构及概念​ 服务 (Service)​ 服务是指一个或一组软件功能&#xff08;例如特定信息的检索或一组操作的执行&#xff09;&#xff0c;其目的是不同的客户端可以为不同的目的重用&#xff08;例如通过跨进程的网络调用&#xff09;。Nacos 支持主流的服务生态&#xff0c…...

编程日记 2023/12/2 16:59:39

尝试修改vim光标的思路

尝试修改vim光标&#xff0c;失败 想让vim的光标在不同模式下显示不同样式 尝试了很多方法&#xff0c;但是没有作用 " Set cursor shape and color if &term ~ "xterm"" INSERT modelet &t_SI "\<Esc>[6 q" . "\<Esc&…...

编程日记 2023/12/2 16:54:36

SpringBoot整合Activiti7——消息事件（十）

文章目录 消息事件开始事件中间事件边界事件代码实现xml文件测试流程流程执行步骤 消息事件 消息事件只有一个接收者&#xff0c;消息具有名字与载荷。 信息会储存在 act_ru_event_subscr 表中。 <!-- 定义消息 --> <message id"msgId1" name"msgName…...

编程日记 2023/12/2 16:48:29

高翔:《自动驾驶与机器人中的SLAM技术 》-Slam_in_autonomous_driving 编译过程中遇到的问题

使用的环境是ubuntu20.04 问题1.安装g2o没有问题&#xff0c;不过在编译整个项目工程时候报错&#xff1a; ”openmp_mutex.h: 30:10: fatal error: g2o/config.h: No such file or directory“: 解决办法&#xff1a; 只需要将/thirdparty/g2o/build/g2o下的config.h放到/…...

编程日记 2023/12/2 16:45:25

org.springframework.security.crypto.bcrypt.BCryptPasswordEncoder 实现密码加密 验证 代码示例

BCryptPasswordEncoder 是 Spring Security 提供的用于加密和验证密码的实现类。它使用强大的 BCrypt 散列函数来存储密码的散列值&#xff0c;提供了一种安全的密码存储方法。以下是一个简单的示例代码&#xff0c;演示如何使用 BCryptPasswordEncoder 进行密码加密和验证&…...

编程日记 2023/12/2 16:44:24

《微信小程序开发从入门到实战》学习三十八

4.2 云开发JSON数据库 4.2.9 条件查询与查询指令 在查询数据时&#xff0c;有时需要对查找的数据添加一些限定条件&#xff0c;只获取满足给定条件的数据&#xff0c;这样的查询称为条件查询。 可以在集合引用上使用where方法指定查询条件&#xff0c;再用get方法&#xff0…...

编程日记 2023/12/2 16:43:23

云服务器哪家便宜？亚马逊AWS等免费云服务器推荐

在这数字化的时代&#xff0c;云计算技术越来越广泛应用于各种场景&#xff0c;尤其是云服务器&#xff0c;作为一种全新的服务器架构正在逐渐取代传统的物理服务器&#xff0c;“云服务器哪家便宜”等用户相关问题也受到越来越多的关注。自从亚马逊最早推出了首个云计算服务—…...

编程日记 2023/12/2 16:42:22

Linux删除了大文件为什么磁盘空间没有释放？

某天&#xff0c;收到监控系统的告警信息&#xff0c;说磁盘空间占用过高&#xff0c;登上服务器&#xff0c;使用 df -h 一看&#xff0c;发现磁盘占用率已经 96%了&#xff1a; 通过查看 /usr/local/nginx/conf/vhost/xxx.conf 找到 access_log 和 error_log 的路径&#x…...

编程日记 2023/12/2 16:41:21

编写bat脚本执行msyql建库sql

使用cmd命令执行(windows下) 【MySQL的bin目录】\mysql –u用户名 –p密码 –D数据库<【sql脚本文件路径全名】&#xff0c;示例&#xff1a; D:\mysql\bin\mysql –uroot –p123456 -Dtest<d:\test\ss.sql 注意&#xff1a; A、如果在sql脚本文件中使用了use 数据库&…...

编程日记 2023/12/2 16:40:20

【JavaSE学习专栏】第04篇 Java面向对象

文章目录 1 面向过程&面向对象2 类和对象2.1 对象的特征2.2 java类及类的成员2.3 类的语法格式 3 创建与初始化对象3.1 类的成员之一&#xff1a;属性3.2 类的成员之二&#xff1a;方法3.3 类的成员之三&#xff1a;构造器&#xff08;构造方法&#xff09;3.3.1 无参构造方…...

编程日记 2023/12/2 16:37:17

sCrypt 在英国伦敦 Exeter 大学讲学

6月5日&#xff0c;sCrypt CEO晓晖和他的两位同事在英国伦敦Exeter大学举行了一场精彩的讲座。刘晓晖向听众们详细介绍了sCrypt智能合约开平台&#xff0c;并演示了如何使用sCrypt来开发基于比特币的智能合约。他用生动形象的语言&#xff0c;深入浅出地解释了这个领域复杂而又…...

编程日记 2023/12/2 16:35:16

人工智能基础创新的第二增长曲线

编者按&#xff1a;2023年是微软亚洲研究院建院25周年。借此机会&#xff0c;我们特别策划了“智启未来”系列文章&#xff0c;邀请到微软亚洲研究院不同研究领域的领军人物&#xff0c;以署名文章的形式分享他们对人工智能、计算机及其交叉学科领域的观点洞察及前沿展望。希望…...

编程日记 2023/12/2 16:34:14

华为OD机试真题-分割均衡字符串-2023年OD统一考试（C卷）

题目描述&#xff1a; 均衡串定义&#xff1a;字符串只包含两种字符&#xff0c;且两种字符的个数相同。 给定一个均衡字符串&#xff0c;请给出可分割成新的均衡子串的最大个数。 约定字符串中只包含大写的X和Y两种字符。 输入描述&#xff1a; 均衡串&#xff1a;XXYYXY 字符…...

编程日记 2023/12/2 16:33:14

基于SpringBoot的图书推荐系统的

摘 要 网络信息技术的高速发展&#xff0c;使得高校图书馆的服务空间日益扩大&#xff0c;依据个人特点的针对性服务逐渐成为新服务模式的主导趋势。对于大多数用户而言&#xff0c;很难在大量的学术图书馆中快速找到他们想要的材料。另外&#xff0c;随着时代的不断发展&…...

编程日记 2023/12/2 16:32:13