Python 短文本匹配，短文本语义相似度，基于大模型的短文本匹配，基于LLMs的短文本语义相似度识别，短文本语义扩充和匹配
1.任务描述
之前在做疾病相似度匹配的时候，堪称史诗级难题，虽然最后加上规则以及一些nlp模型，取得了差强人意的效果，但是短文本的语义相似度匹配一直属于比较难以攻克的难题
2.思路
随着近年大模型的飞速发展，就之前所做的任务给出以下新思路：
模型分为两条通路：语义相似度和字形相似度
语义相似度解决问题：卵巢子宫内膜异位囊肿和巧克力囊肿，其实本质一样，语义应该是一致的，但是通过字形难以解决；
字形相似度解决问题：由于很多疾病中的特殊字符在BERT和LLMs中没有相应的向量表示，所以这部分通过字形相似度来rank，作为辅助手段；
代码后续我会慢慢公开，欢迎大家来讨论。
相关文章：
Python 短文本匹配，短文本语义相似度，基于大模型的短文本匹配，基于LLMs的短文本语义相似度识别，短文本语义扩充和匹配
1.任务描述 之前在做疾病相似度匹配的时候，堪称史诗级难题，虽然最后加上规则以及一些nlp模型，取得了差强人意的效果，但是短文本的语义相似度匹配一直属于比较难以攻克的难题 2.思路 随着近年大模型的飞速发展，就之前…...
提升接口性能方式汇总
1，sql 2，缓存，尤其面向用户，如app数据。可用redis咖啡，二级缓存。 充分利用redis，redis数据类型很多，平时场景中结合实际情况，找一下对应的redis实现方案 比如Zset可以排序&#…...
C++中的常见语法糖汇总
C中的语法糖是指使代码更简洁、可读性更高的语言特性和简化的语法。以下是一些常见的C语法糖： 1. 自动类型推导（auto） 使用 auto 关键字可以让编译器自动推导变量的类型，简化变量的声明。 auto x 10; // 编译器推导 x…...
TensorFlow Playground神经网络演示工具使用方法详解
在现代机器学习领域，神经网络无疑是一个重要的研究方向。然而，对于许多初学者来说，神经网络的概念和实际操作可能显得相当复杂。幸运的是，TensorFlow Playground 提供了一个交互式的在线工具，使得我们可以直观地理解和实验神经网络的基本原理。在这篇博客中，我们将详细介…...
【git】subtree 简单教程
git subtree使用案例 😄生命不息，写作不止 🔥 继续踏上学习之路，学之分享笔记 👊 总有一天我也能像各位大佬一样 🏆 博客首页 怒放吧德德 To记录领地 🌝分享学习心得，欢迎指正&am…...
C语言基础：字符串函数使用与剖析
strtok（分割字符串） char * strtok ( char * str, const char * sep ); sep参数是个字符串，定义了用作分隔符的字符集合 第一个参数指定一个字符串，它包含了0个或者多个由sep字符串中一个或者多个分隔符分割的标 记。strtok函数找…...
搭建Vulnhub靶机网络问题(获取不到IP)
搭建好靶场后，在攻击机运行arp-scan -l无法发现靶机IP。 这时候去看下靶机网络有没有问题。 重新启动客户机，一直按e进入安全模式（要是直接开机了就先按shift进入grub界面，再按e）找到ro，将ro改为rw signie…...
Prompt 提示词强大方法论和框架2
自从ChatGPT Chat Generative Pre-trained Transformer于2022年11月30日发布以来，一个新兴的行业突然兴起， 那就是提示工程Prompt engineering，可谓如日冲天。 从简单的文章扩写到RAG，ChatGPT展现了前所未有的惊人能力。 在上一…...
C语言分支和循环（2）
我的相关博客： C语言的分支与循环（1） 1.switch语句 除了 if 语句外，C语⾔还提供了 switch 语句来实现分⽀结构。 switch 语句是⼀种特殊形式的 的 if...else 结构，⽤于判断条件有多个结果的情况。它把多重 else if…...
14.FreeRTOS 流媒体缓存 Stream Buffer
FreeRTOS 中的 Stream Buffer（流媒体缓存） 在实时操作系统（RTOS）中，处理流媒体数据是一项非常关键的任务。FreeRTOS 提供了一种名为 Stream Buffer（流媒体缓存）的机制，用于高效地管…...
再图片合成视频)
利用ffmpeg把视频分解成图片(每秒x张图)再图片合成视频
1. 视频分解成图片 ffmpeg -i rawVideo.mp4 -r 5 -f image2 img/%04d.png-i rawVideo.mp4 输入文件 -r 5 每秒5帧(1秒5张图) 可不写，默认每秒24帧 -f image2 表示输出的格式图像 可不写，默认图像 img/ 图片放在img文件夹下 %04d.png 图片的命名…...
冯喜运：6.7今日外汇黄金原油走势分析及日内操作策略
【黄金消息面分析】：美国初请失业金人数超预期，市场对美联储9月降息预期升温，全球降息潮起，黄金市场受支撑。北京时间本周四，美国劳工部公布的数据显示，截至6月1日当周初请失业金人数增加至22.9万人&#x…...
[网络基础]——计算机网络(OSI)参考模型 详解
🏡作者主页：点击！ 🌐网络通信基础TCP/IP专栏：点击！ ⏰️创作时间：2024年6月2日21点59分 🀄️文章质量：93分 目录 🎟️OSI基本概念 🎄分层架构…...
使用 Java 获取图片的 MD5 编码
在许多应用场景中，我们需要验证文件的完整性或唯一性，常用的方法是计算文件的哈希值。MD5（Message Digest Algorithm 5）是一种广泛使用的哈希函数，可以生成一个128位的哈希值（32位的十六进制数字࿰…...
GO——泛型
泛型 对于强类型语言，在编写代码时不事先指定类型，在实例化的时候作为参数指明类型 参考：https://www.liwenzhou.com/posts/Go/generics/ 什么时候使用泛型？ 方法中的代码实现与类型T无关参考：https://juejin.cn/p…...
TSP（Python）：Qlearning求解旅行商问题TSP（提供Python代码）
一、Qlearning简介 Q-learning是一种强化学习算法，用于解决基于奖励的决策问题。它是一种无模型的学习方法，通过与环境的交互来学习最优策略。Q-learning的核心思想是通过学习一个Q值函数来指导决策，该函数表示在给定状态下采取某个动作所获…...
【精通NIO】NIO介绍
一、什么是NIO NIO，全称为New Input/Output，是Java平台中用于替代传统I/O（Blocking I/O）模型的一个功能强大的I/O API。NIO在Java 1.4版本中被引入，其设计目标是提供一种非阻塞的、低延迟的I/O操作方式，以…...
ssh远程管理
一、Openssh概述 Openssh是一种安全通道协议，用来实现字符界面的远程登录、远程复制、远程文本传输。 Openssh对通信双方的数据进行了加密。有两种方式： 用户名和密码登录：比较常用密钥对认证方式：可以实现免密登录 ssh端口&a…...
【ai】pycharm远程ssh开发
方式1： gateway的方式是远程放一个pycharm 专业版，经常下载失败 方式2： 类似vs，源码本地，同步到远程进行运行。 参考大神的分享： Pycharm远程连接服务器（2023-11-9） Pycharm远程连接服务器（windows下远程修改服务器代码）[通俗易懂] cpolar 建议同时内网穿透 选 远程开…...
leetcode 9 回文数
给你一个整数 x ，如果 x 是一个回文整数，返回 true ；否则，返回 false 。 回文数是指正序（从左向右）和倒序（从右向左）读都是一样的整数。 例如，121 是回文，而…...
龙虎榜——20250610
上证指数放量收阴线，个股多数下跌，盘中受消息影响大幅波动。 深证指数放量收阴线形成顶分型，指数短线有调整的需求，大概需要一两天。 2025年6月10日龙虎榜行业方向分析 1. 金融科技 代表标的：御银股份、雄帝科技 驱动…...
【网络】每天掌握一个Linux命令 - iftop
在Linux系统中，iftop是网络管理的得力助手，能实时监控网络流量、连接情况等，帮助排查网络异常。接下来从多方面详细介绍它。 目录 【网络】每天掌握一个Linux命令 - iftop工具概述安装方式核心功能基础用法进阶操作实战案例面试题场景生产场景…...
)
Java 语言特性(面试系列1)
一、面向对象编程 1. 封装（Encapsulation） 定义：将数据（属性）和操作数据的方法绑定在一起，通过访问控制符（private、protected、public）隐藏内部实现细节。示例： public …...
Redis相关知识总结（缓存雪崩，缓存穿透，缓存击穿，Redis实现分布式锁，如何保持数据库和缓存一致）
文章目录 1.什么是Redis？2.为什么要使用redis作为mysql的缓存？3.什么是缓存雪崩、缓存穿透、缓存击穿？3.1缓存雪崩3.1.1 大量缓存同时过期3.1.2 Redis宕机 3.2 缓存击穿3.3 缓存穿透3.4 总结 4. 数据库和缓存如何保持一致性5. Redis实现分布式…...
前端开发面试题总结-JavaScript篇(一)
文章目录 JavaScript高频问答一、作用域与闭包1.什么是闭包（Closure）？闭包有什么应用场景和潜在问题？2.解释 JavaScript 的作用域链（Scope Chain） 二、原型与继承3.原型链是什么？如何实现继承&a…...
宇树科技，改名了！
提到国内具身智能和机器人领域的代表企业，那宇树科技（Unitree）必须名列其榜。 最近，宇树科技的一项新变动消息在业界引发了不少关注和讨论，即： 宇树向其合作伙伴发布了一封公司名称变更函称，因…...
【学习笔记】erase 删除顺序迭代器后迭代器失效的解决方案
目录 使用 erase 返回值继续迭代使用索引进行遍历 我们知道类似 vector 的顺序迭代器被删除后，迭代器会失效，因为顺序迭代器在内存中是连续存储的，元素删除后，后续元素会前移。 但一些场景中，我们又需要在执行删除操作…...
FFmpeg avformat_open_input函数分析
函数内部的总体流程如下： avformat_open_input 精简后的代码如下： int avformat_open_input(AVFormatContext **ps, const char *filename,ff_const59 AVInputFormat *fmt, AVDictionary **options) {AVFormatContext *s *ps;int i, ret 0;AVDictio…...
DAY 26 函数专题1
函数定义与参数知识点回顾：1. 函数的定义2. 变量作用域：局部变量和全局变量3. 函数的参数类型：位置参数、默认参数、不定参数4. 传递参数的手段：关键词参数5 题目1：计算圆的面积 任务： 编写一…...
pgsql：还原数据库后出现重复序列导致“more than one owned sequence found“报错问题的解决
问题： pgsql数据库通过备份数据库文件进行还原时，如果表中有自增序列，还原后可能会出现重复的序列，此时若向表中插入新行时会出现“more than one owned sequence found”的报错提示。 点击菜单“其它”-》“序列”，…...