当前位置： 首页 > article >正文

sparkSQL读入csv文件写入mysql

article 2025/9/19 19:36:18

思路

示例

（年龄>18改成>20)

mysql的字符集问题

把user改成person

“让字符集认识中文”

相关文章：

sparkSQL读入csv文件写入mysql

思路 示例 （年龄>18改成>20) mysql的字符集问题 把user改成person “让字符集认识中文”...

编程日记 2025/9/3 17:20:15

大涡模拟实战：从区域尺度到街区尺度的大气环境模拟

前言： 随着低空经济的蓬勃发展，无人机、空中出租车等新型交通工具正在重塑我们的城市空间。这场静默的革命不仅带来了经济机遇，更对城市大气环境提出了全新挑战。在距离地面200米以下的城市冠层中，建筑物与大气的复杂相互作用、人…...

编程日记 2025/9/18 13:40:53

centos安装方式的aarch64架构下的kylinv10安装docker23.0.0

以下通过压缩包方式安装docker 因为yum方式配置各种依赖仓库太麻烦了，如果你不想执行 yum repolist yum clean all yum makecache那可以按照以下压缩包的方式安装任何版本的docker 1.查看glibc版本 ldd --version我这里显示2.28，安装docker23.0.0没问…...

编程日记 2025/6/21 13:51:19

单目测距和双目测距 bev 3D车道线

单目视觉测距原理 单目视觉测距有两种方式。 第一种，是通过深度神经网络来预测深度，这需要大量的训练数据。训练后的单目视觉摄像头可以认识道路上最典型的参与者——人、汽车、卡车、摩托车，或是其他障碍物（雪糕桶之类&#xf…...

编程日记 2025/9/18 4:29:37

鸿蒙OSUniApp 实现一个精致的日历组件#三方框架 #Uniapp

使用 UniApp 实现一个精致的日历组件 前言 最近在开发一个约会小程序时，需要实现一个既美观又实用的日历组件。市面上虽然有不少现成的组件库，但都不太符合我们的设计需求。于是，我决定从零开始，基于 UniApp 自己实现一个功能完…...

编程日记 2025/9/18 0:52:20

【爬虫】DrissionPage-3

安装：4.1最新版本 pip install drissionpage --upgrade 官方文档：🛰️ 连接浏览器 | DrissionPage官网 1 Chromium对象 Chromium对象用于连接和管理浏览器。标签页的开关和获取、整体运行参数配置、浏览器信息获取等都由它进行。 1.1 默认…...

编程日记 2025/9/18 14:41:55

Web开发-JavaEE应用SpringBoot栈SnakeYaml反序列化链JARWAR构建打包

知识点： 1、安全开发-JavaEE-WAR&JAR打包&反编译 2、安全开发-JavaEE-SnakeYaml反序列化&链 一、演示案例-WEB开发-JavaEE-项目-SnakeYaml序列化 常见的创建的序列化和反序列化协议 • （已讲）JAVA内置的writeObject()/readObje…...

编程日记 2025/9/19 14:11:58

项目复习（2）

第四天 高并发优化 前端每隔15秒就发起一次请求，将播放记录写入数据库。 但问题是，提交播放记录的业务太复杂了，其中涉及到大量的数据库操作：在并发较高的情况下，会给数据库带来非常大的压力 使用Redis合并写请求 一…...

编程日记 2025/9/5 18:33:05

UE 材质基础 第一天

课程：虚幻引擎【UE5】材质宝典【初学者材质基础入门系列】-北冥没有鱼啊_-稍后再看-哔哩哔哩视频 随便记录一些 黑色是0到负无穷，白色是1到无穷 各向异性 有点类似于高光，可以配合切线来使用，R G B 相当于 X Y Z轴，切…...

编程日记 2025/9/12 10:24:18

短剧小程序系统开发源码上架，短剧项目市场分析

引言 随着短视频内容消费的爆发式增长，短剧小程序凭借其碎片化、强互动、低成本的特点，成为内容创业与资本布局的新风口。2024年以来，行业规模突破500亿元，预计2027年将超千亿17。本文将深度解析短剧小程序系统开发的技术优势、市…...

编程日记 2025/7/12 13:33:36

学习FineBI

FineBI 第一章 FineBI 介绍 1.1. FineBI 概述 FineBI 是帆软软件有限公司推出的一款商业智能 （Business Intelligence） 产品 。 FineBI 是新一代大数据分析的 BI 工具 ， 旨在帮助企业的业务人员充分了解和利用他们的数据 。FineBI 凭借强…...

编程日记 2025/9/5 18:32:46

Oracle日期计算跟Mysql计算日期差距问题-导致两边计算不一致

Oracle数据库对日期做加法时，得到的时间是某天的12:00:00 例： Oracle计算 select (TO_DATE(2025-04-14, YYYY-MM-DD)1.5*365) from dual; 结果：2026/10/13 12:00:00Mysql计算 select DATE_ADD( str_to_date( 2025-04-14, %Y-%m-%d ), INTER…...

编程日记 2025/8/26 17:11:23

深入剖析某App视频详情逆向：聚焦sig3参数攻克

深入剖析某手App视频详情逆向：聚焦sig3参数攻克 一、引言 在当今互联网信息爆炸的时代，短视频平台如某手，已成为人们获取信息、娱乐消遣的重要渠道。对于技术爱好者和研究人员而言，深入探索其内部机制，特别是视频详情…...

编程日记 2025/9/5 18:32:31

Java求职面试揭秘：从Spring到微服务的技术挑战

文章简述 在这篇文章中，我们将通过一个幽默的面试场景，揭秘互联网大厂Java求职者在面试中面对的技术挑战。面试官将从Spring框架、微服务架构到大数据处理等多个维度进行提问，并详细讲解这些技术点的应用场景和解决方案，帮助小白…...

编程日记 2025/9/1 8:30:55

【Linux】Linux安装并配置MongoDB

目录 1.添加仓库 2.安装 MongoDB 包 3.启动 MongoDB 服务 4. 验证安装 5.配置 5.1.进入无认证模式 5.2.1创建用户 5.2.2.开启认证 5.2.3重启 5.2.4.登录 6.端口变更 7.卸载 7.1.停止 MongoDB 服务 7.2.禁用 MongoDB 开机自启动 7.3.卸载 MongoDB 包 7.4.删除数…...

编程日记 2025/9/5 18:32:22

HANA数据库死锁

死锁是两个或多个事务相互交叉锁定的情况，因此任何事务都无法继续进行。 通常死锁是由应用程序设计缺陷引起的，但在主键约束的上下文中也可能存在更多的技术死锁（这种情况请参考 SAP note 2429521）。 当 HANA 数据库出现死锁时&am…...

编程日记 2025/8/11 18:13:38

STC32G12K128实战：串口通信

STC32G12K128芯片写一个按键通过串口1发送字符串的程序。首先，确认芯片的串口1配置。STC32G系列通常使用UART1，相关的寄存器是P_SW1来选择引脚。默认情况下，UART1的TX是P3.1。 接下来是设置定时器作为波特率发生器。通常用定时器2&#xff0c…...

编程日记 2025/8/25 19:40:59

Kotlin Multiplatform与Flutter、Compose共存：构建高效跨平台应用的完整指南

简介 在移动开发领域，跨平台技术正在重塑开发范式。Kotlin Multiplatform (KMP) 作为 JetBrains 推出的多平台开发框架，结合了 Kotlin 的简洁性与原生性能优势，使开发者能够高效共享业务逻辑。而 Flutter 凭借其高性能渲染引擎（Skia）和丰富的组件库，成为混合开发的首选方…...

编程日记 2025/7/8 14:33:02

ElasticSearch深入解析（十二）：聚合——分桶聚合、指标聚合、管道子聚合

文章目录 一、分桶聚合1. 分桶聚合的核心逻辑与核心类型2. 分桶聚合的高级特性 二、指标聚合1. 指标聚合的核心逻辑与基础类型（1）基础统计指标（单值输出）（2）复合统计指标（多值输出） …...

编程日记 2025/9/5 0:18:48

spark小任务

import org.apache.spark.{Partitioner, SparkConf, SparkContext}object PartitionCustom {// 分区器决定哪一个元素进入某一个分区// 目标: 把10个分区器，偶数分在第一个分区，奇数分在第二个分区// 自定义分区器// 1. 创建一个类继承Partitioner// 2. …...

编程日记 2025/9/18 17:26:22

Ubuntu 20.04 报错记录: Matplotlib 无法使用 OpenCV 的 libqxcb.so

网上查了一下这个报错，有很多解决方案，但是都不是针对 OpenCV 触发的这种 qt.qpa.plugin: Could not load the Qt platform plugin "xcb" in " */lib/*/site-packages/cv2/qt/plugins" even though it was found. 本文的方案是牺牲 …...

编程日记 2025/9/18 7:09:57

JS 高级程序设计 设计模式

设计模式是提升代码可维护性、可扩展性和可复用的重要工具 创建型模式 工厂模式 封装对象的创建过程，通过函数或类统一生成实例，避免直接使用 new 关键字简单工厂：通过函数返回不同对象实例 function createButton(type) {if (type prim…...

编程日记 2025/6/20 1:56:02

新电脑软件配置二：安装python，git, pycharm

安装python 地址 https://www.python.org/downloads/ 不是很懂为什么这么多版本 安装windows64位的 这里我是凭自己感觉装的了 然后cmd输入命令没有生效，先重启下？ 重启之后再次验证 环境是成功的 之前是输入的python -version 命令输入错误 安装pyc…...

编程日记 2025/9/6 14:09:43

数据仓库：企业数据管理的核心引擎

一、数据仓库的由来 数据仓库（Data Warehouse, DW）概念的诞生源于企业对数据价值的深度挖掘需求。在1980年代，随着OLTP（联机事务处理）系统在企业中的普及，传统关系型数据库在处理海量数据分析时显露出明显瓶…...

编程日记 2025/9/6 21:54:08

MCU开发学习记录17* - RTC学习与实践(HAL库) - 日历、闹钟、RTC备份寄存器 -STM32CubeMX

名词解释： RTC：Real-Time Clock​ 统一文章结构（数字后加*）： 第一部分： 阐述外设工作原理；第二部分：芯片参考手册对应外设的学习；第三部分：使用STM32CubeMX进…...

编程日记 2025/9/19 4:20:15

C++中的四种强制转换

static_cast 原型&#xff1a;static_cast<type-id>(expression) type-id表示目标类型&#xff0c;expression表示要转换的表达式 static_cast用于非多态类型的转换&#xff08;静态转换&#xff09;&#xff0c;编译器隐式执行的任何类型转换都可用static_c…...

编程日记 2025/9/6 18:35:29

YOLOv2目标检测算法：速度与精度的平衡之道

一、YOLOv2的核心改进&#xff1a;从V1到V2的蜕变 YOLOv2作为YOLO系列的第二代算法&#xff0c;在继承V1端到端、单阶段检测的基础上&#xff0c;针对V1存在的小目标检测弱、定位精度低等问题进行了全方位升级&#xff0c;成为目标检测领域的重要里程碑。 &#xff08;一&am…...

编程日记 2025/9/19 14:13:37

Quic如何实现udp可靠传输

QUIC&#xff08;Quick UDP Internet Connections&#xff09;是由 Google 设计并被 IETF 标准化的传输层协议&#xff0c;它基于 UDP 实现&#xff0c;但提供了类似 TCP 的可靠性和更高级的功能&#xff08;如多路复用、0-RTT 握手、TLS 加密等&#xff09;。 尽管 UDP 是不可…...

编程日记 2025/9/3 23:30:25

利用腾讯云MCP提升跨平台协作效率的实践与探索

一、场景痛点 在当今这个数字化快速发展的时代&#xff0c;跨平台协作成为了许多企业和团队面临的一个重大挑战。随着企业业务的不断拓展&#xff0c;团队成员往往需要利用多种工具和平台进行沟通、协作和管理。这些平台包括但不限于电子邮件、即时通讯工具、项目管理软件、文…...

编程日记 2025/9/18 4:29:12

【Vue篇】数据秘语：从watch源码看响应式宇宙的蝴蝶效应

目录 引言 一、watch侦听器&#xff08;监视器&#xff09; 1.作用&#xff1a; 2.语法&#xff1a; 3.侦听器代码准备 4. 配置项 5.总结 二、翻译案例-代码实现 1.需求 2.代码实现 三、综合案例——购物车案例 1. 需求 2. 代码 引言 &#x1f4ac; 欢迎讨论&#…...

编程日记 2025/9/6 14:09:19