当前位置： 首页 > news >正文

解决 .csv 文件上传到 pgsql 的字符报错问题

news 2025/12/15 13:18:25

目录

    • 背景
    • 问题
    • 解决办法

背景

上传 .csv 文件进行数据导入到 pg 时，报错显示如下：

ods.tbl_inp_fee_detail.csv数据上传失败
报错信息:org.postgresql.util.PSQLException: ERROR: invalid byte sequence for encoding "UTF8": 0x00 Where: COPY tbl_inp_fee_detail, line 3942264

问题

通过报错信息定位到 line 3942264，发现该 .csv 文件中存在 NUL 的字符，在 notepad++ 中显示如下图所示：

image

PS：notepad++ 记得先勾选上 功能栏选择 视图->显示符号->显示所有字符

解决办法

  1. 把打开 .csv 文件的默认格式改为 notepad++ 打开

  2. 最好采用本地的解压软件打开压缩包

  3. 由于压缩包的 .csv 文件是加密的，需要先解密，然后就可以打开报错相应的 .csv 文件，这时就直接打开的是 notepad++

  4. 在 notepad++ 中，点搜索栏的查找，在弹出窗口选替换，输入框输入 \x00 ，下面的替换为给它删到空，因为就是要把 NUL 字符替换为空，然后注意查找模式要选择扩展,最后点全部替换即可，记得 ctrl + s 保存，然后压缩包会提示你保存更改，点确认即可

  5. PS：解压 .csv 文件，notepad++ 打开 。csv 文件，以及替换字符的过程都可能需要挺长时间（看 .csv 文件的大小），不要乱点界面不然会卡死被强制退出

image

相关文章：

解决 .csv 文件上传到 pgsql 的字符报错问题

目录 背景问题解决办法 背景 上传 .csv 文件进行数据导入到 pg 时，报错显示如下： ods.tbl_inp_fee_detail.csv数据上传失败 报错信息:org.postgresql.util.PSQLException: ERROR: invalid byte sequence for encoding "UTF8": 0x00 Where: C…...

编程日记 2023/9/4 1:51:15

linux自动挂载并添加用户权限

目录 写在前面自动挂载完 写在前面 1、本文内容 linux挂载文件后，没有文件权限，使用uid和gid指定所需的所有者和所属组 2、平台/环境 linux 3、转载请注明出处： https://blog.csdn.net/qq_41102371/article/details/132539384 自动挂载 开…...

编程日记 2023/9/4 1:50:13

【C++】学习STL中的stack和queue

❤️前言 今天这篇博客的内容主要关于STL中的stack、queue和priority_queue三种容器。 正文 stack和queue的使用方式非常简单，我们只要根据之前学习数据结构的经验和文档介绍就可以轻松上手。于是我们直接开始对它们的模拟实现。 stack和queue的模拟实现 stack和q…...

编程日记 2023/9/4 1:49:10

Java捕获异常

在Java中，凡是可能抛出异常的语句，都可以用try ... catch捕获。把可能发生异常的语句放在try { ... }中，然后使用catch捕获对应的Exception及其子类。 使用try ... catch ... finally时： 多个catch语句的匹配顺序非常重要&#xf…...

编程日记 2023/9/4 1:48:10

【LLM】快速开始 LangChain

theme: orange LangChain是一个软件开发工具包，它通过将组件链接在一起并公开简单统一的API，简化了大型语言模型和应用程序的集成。本篇文章将会简要介绍，让各位开发者对其有一个整体的认识。 前言 如果你是一名软件开发人员，努力…...

编程日记 2023/9/4 1:47:08

Unity中立体声平移的应用

实现的效果 若从左声道开始，播放效果逐渐从左声道过渡到右声道，再从右声道过渡到左声道，具体效果请戴上耳机播放下列视频。 StereoPanning 代码实现 public class AudioInfo {[HideInInspector] public float[] StereoTranslationValues;//立…...

编程日记 2023/9/4 1:46:07

jupyter常用的方法以及快捷键

选中状态 蓝色 按enter 进入编辑状态 编辑状态 绿色 按Esc 进入选中状态 Code模式运行是运行代码 Markdown模式运行是进入预览状态 - - - 是文本格式的一种精简的语法形式 Raw NBConvert 是默认文本状态 - - - 输入什么样 展示什么样 Y - - - 切换code模式 M - - - 切换Markdo…...

编程日记 2023/9/4 1:45:05

SQL Server 操作JSON数据库列

Sql Server 从 2016 开始支持了一些 json 操作，但在SqlServer中Json还是被存储为字符串，如下： use [tempdb]declare JSON nvarchar(max) set JSONN{"id": "WakefieldFamily","parents": [{ "familyName&q…...

编程日记 2023/9/4 1:44:04

拼多多开放平台的API接口可以获取拼多多电商数据。以下是API接口流程

使用拼多多开放平台的API接口可以获取拼多多电商数据。以下是一般的API接口流程： 1. 注册开发者账号：首先，您需要在拼多多开放平台注册一个开发者账号。通过开发者账号，您可以获得API密钥和其他必要的信息。 2. 鉴权与认证&…...

编程日记 2023/9/4 1:43:03

使用Docker安装和部署kkFileView

🎈1 参考文档 kkFileView官方文档 🚀2 安装kkFileView 拉取Redis镜像。 docker pull keking/kkfileview启动docker容器。 docker run -it -d -p 8012:8012 keking/kkfileview --restart always解释： docker run redis # 从kkfileview镜像运行…...

编程日记 2023/9/4 1:42:01

胆囊结石3mm严重吗（解析胆囊结石的危害和处理方法）

胆囊结石是指胆囊内形成的固体结晶，大小不一，主要由胆固醇、胆汁色素和钙盐等物质组成。胆囊结石是一种比较常见的疾病，据统计，我国胆囊结石的患病率约为5%~10%左右。那么，胆囊结石3mm严重吗?下面就来一起了解一下。 …...

编程日记 2023/9/4 1:41:00

全新UI站长在线工具箱系统源码带后台开源版

该系统的全开源版本可供下载，并且支持暗黑模式。 系统内置高达72种站长工具、开发工具、娱乐工具等功能。此系统支持本地调用API，同时还自带免费API接口， 是一个多功能性工具程序，支持后台管理、上传插件、添加增减删功能。 环…...

编程日记 2023/9/4 1:39:59

maven的依赖下载不下来的几种解决方法

前言 每次部署测试环境，从代码库拉取代码，都会出现缺少包的情况。然后找开发一通调试，到处拷包。 方案一：pom文件注释/取消注释 注释掉pom.xml里的报红色的依赖（同时可以把本地maven库repo里对应的包删除）&…...

编程日记 2023/9/4 1:37:55

CAR-T商品化的第一步

1、CAR-T细胞的体外扩增能力 CAR-T细胞疗法需要先从患者体内获得T淋巴细胞，然后通过体外转基因技术 transduce CAR靶向结构域。这一过程需要在细胞培养体系中得到充分的扩增，以获得足够的治疗CAR-T细胞数量。因此，CAR-T细胞的体外扩增能力直…...

编程日记 2023/9/4 1:36:53

yolov2相较于yolov1的改进

目录 前言 BN层取代了Dropout 使用了高分辨率分类器 K-means选定先验框的尺寸 网络结构—darknet19 细粒度的特征 前言 yolov2是在yolov1的基础上进行改进的，主要解决了yolov1定位不准确以及检测重叠的物体极差的情况，总的来说，它有以下…...

编程日记 2023/9/4 1:35:52

如何在Spring Boot应用中使用Nacos实现动态更新数据源

🌷🍁 博主猫头虎 带您 Go to New World.✨🍁 🦄 博客首页——猫头虎的博客🎐 🐳《面试题大全专栏》 文章图文并茂🦕生动形象🦖简单易学！欢迎大家来踩踩~🌺 &a…...

编程日记 2023/9/4 1:34:51

代码随想录算法训练营day1～18总结

时间、空间复杂度，解题过程中运用的函数补充说明 数组 day1： http://t.csdn.cn/dBSgY day2： http://t.csdn.cn/JTDvH 数组总结 链表 day3：http://t.csdn.cn/mJx9V day4：http://t.csdn.cn/qiGqz 链表总结 哈希表 day6:…...

编程日记 2023/9/4 1:33:48

【炼气境】HashMap原理以及如何使用

系列文章目录 文章目录 系列文章目录前言1、数据结构2、工作原理3、当两个对象的 hashCode 相同会发生什么？4、你知道 hash 的实现吗？为什么要这样实现？5、为什么要用异或运算符？6、HashMap 的 table 的容量如何确定？l…...

编程日记 2023/9/4 1:32:47

QT基础教程之七Qt消息机制和事件

QT基础教程之七Qt消息机制和事件 事件 事件（event）是由系统或者 Qt 本身在不同的时刻发出的。当用户按下鼠标、敲下键盘，或者是窗口需要重新绘制的时候，都会发出一个相应的事件。一些事件在对用户操作做出响应时发出&#xff0c…...

编程日记 2023/9/4 1:31:45

Python入门自学进阶-Web框架——40、redis、rabbitmq、git——3

git，一个分布式的版本管理工具。主要用处：版本管理、协作开发。 常见版本管理工具： VSS —— Visual Source Safe CVS —— Concurrent Versions System SVN —— CollabNet Subversion GIT GIT安装：下载安装文件：…...

编程日记 2023/9/4 1:30:44

Docker 离线安装指南

参考文章 1、确认操作系统类型及内核版本 Docker依赖于Linux内核的一些特性，不同版本的Docker对内核版本有不同要求。例如，Docker 17.06及之后的版本通常需要Linux内核3.10及以上版本，Docker17.09及更高版本对应Linux内核4.9.x及更高版本。…...

编程新知 2025/12/12 8:27:30

ssc377d修改flash分区大小

1、flash的分区默认分配16M、 / # df -h Filesystem Size Used Available Use% Mounted on /dev/root 1.9M 1.9M 0 100% / /dev/mtdblock4 3.0M...

编程新知 2025/8/4 2:45:15

算法岗面试经验分享-大模型篇

文章目录 A 基础语言模型A.1 TransformerA.2 Bert B 大语言模型结构B.1 GPTB.2 LLamaB.3 ChatGLMB.4 Qwen C 大语言模型微调C.1 Fine-tuningC.2 Adapter-tuningC.3 Prefix-tuningC.4 P-tuningC.5 LoRA A 基础语言模型 A.1 Transformer （1）资源 论文&a…...

编程新知 2025/12/14 14:26:01

【p2p、分布式，区块链笔记 MESH】Bluetooth蓝牙通信 BLE Mesh协议的拓扑结构 定向转发机制

目录 节点的功能承载层（GATT/Adv）局限性： 拓扑关系定向转发机制定向转发意义 CG 节点的功能 节点的功能由节点支持的特性和功能决定。所有节点都能够发送和接收网格消息。节点还可以选择支持一个或多个附加功能，如 Configuration …...

编程新知 2025/12/12 18:28:59

Linux部署私有文件管理系统MinIO

最近需要用到一个文件管理服务，但是又不想花钱，所以就想着自己搭建一个，刚好我们用的一个开源框架已经集成了MinIO，所以就选了这个 我这边对文件服务性能要求不是太高，单机版就可以 安装非常简单，几个命令就…...

编程新知 2025/12/10 23:26:48

协议转换利器，profinet转ethercat网关的两大派系，各有千秋

随着工业以太网的发展，其高效、便捷、协议开放、易于冗余等诸多优点，被越来越多的工业现场所采用。西门子SIMATIC S7-1200/1500系列PLC集成有Profinet接口，具有实时性、开放性，使用TCP/IP和IT标准，符合基于工业以太网的…...

编程新知 2025/12/14 19:01:59

Java 与 MySQL 性能优化：MySQL 慢 SQL 诊断与分析方法详解

文章目录 一、开启慢查询日志，定位耗时SQL1.1 查看慢查询日志是否开启1.2 临时开启慢查询日志1.3 永久开启慢查询日志1.4 分析慢查询日志 二、使用EXPLAIN分析SQL执行计划2.1 EXPLAIN的基本使用2.2 EXPLAIN分析案例2.3 根据EXPLAIN结果优化SQL 三、使用SHOW PROFILE…...

编程新知 2025/7/24 5:10:25

动态规划-1035.不相交的线-力扣(LeetCode)

一、题目解析 光看题目要求和例图，感觉这题好麻烦，直线不能相交啊，每个数字只属于一条连线啊等等，但我们结合题目所给的信息和例图的内容，这不就是最长公共子序列吗？，我们把最长公共子序列连线起…...

编程新知 2025/12/14 12:27:19

Qt的学习（二）

1. 创建Hello Word 两种方式，实现helloworld： 1.通过图形化的方式，在界面上创建出一个控件，显示helloworld 2.通过纯代码的方式，通过编写代码，在界面上创建控件， 显示hello world； …...

编程新知 2025/12/8 2:51:32

用js实现常见排序算法

以下是几种常见排序算法的 JS实现，包括选择排序、冒泡排序、插入排序、快速排序和归并排序，以及每种算法的特点和复杂度分析 1. 选择排序（Selection Sort） 核心思想：每次从未排序部分选择最小元素，与未排…...

编程新知 2025/9/25 19:59:14