当前位置: 首页 > news >正文

Apache SeaTunnel 社区 3 月月报

file

各位热爱 SeaTunnel 的小伙伴们,SeaTunnel 社区 3 月月报来啦!这里将记录 SeaTunnel 社区每个月的重要更新,并评选出月度之星,欢迎关注。

SeaTunnel 月度 Merge Stars

感谢以下小伙伴 3 月为 Apache SeaTunnel 做的精彩贡献(排名不分先后): file

@Carl-Zhou-CN,@ilsl1007,@loveyang1990,@dailai,@liugddx,@CheneyYin,@litiliu,@ShaunWuu,@hailin0,@rewerma,@wineternity,@lihjChina,@luohoufu,@lightzhao,@liunaijie,@zhilinli123,@Hisoka-X,@xiaochen-zhou,@LeonYoah,@mosence,@Ivan-gfan,@dzygoon,@JueLance

apache/seatunnel

fix

  • [Bugfix][TDengine]修复因多次调用提交任务API导致驱动丢失的问题。#6581 #6595 @ilsl1007
  • [Fix][Connector-V2]修复了Doris/StarRocks创建表的SQL解析错误。 @Hisoka-X
  • [Fix][Doc]修复了StarrocksSink文档中的排版错误 @Hisoka-X
  • [Fix][Connector-V2]修复Doris流加载未读取任何数据时Sink无法关闭的问题 @Hisoka-X
  • [bugfix][zeta] Fixed the problem that the [jvm_options]配置文件G1GC没有生效 @LeonYoah
  • [Fix][SQLTransform]修复SQL转换中的尺度失真问题 @dailai
  • [BugFix][Spark-translation]类型转换错误 @Carl-Zhou-CN
  • [Fix][Connector-V2]修复连接器支持SPI,但不提供无参构造函数。 @Hisoka-X
  • [Fix][StarRocks]修复上游catalogtable表路径只包含表名部分时的空指针异常(NPE) @liunaijie
  • [Bug]修复SQLTransform中的常量减去错误 @rewerma
  • [Fix][Zeta]优化Hazelcast本地模式连接 @liunaijie
  • [Fix][Zeta]在使用缓存模式时,修复线程类加载器被设置为null的问题。 @Hisoka-X
  • [Bug] [zeta]修复提交任务时出现的空指针异常 @liugddx
  • [Hotfix]修复Spark示例 @hailin0
  • [bugfix] [Zeta]修复通过REST API提交任务时类加载器未能释放的问题 @liugddx
  • [BUG][Zeta]任务名称:显示错误#6470 @loveyang1990
  • [Hotfix]解决编译错误 @hailin0
  • [Hotfix][Doc][Chinese]修复与Apache SeaTunnel配置日志相关参数的无效链接 @CheneyYin
  • [Fix][FakeSource]修复模板中的随机选取问题,不包括最新值 @liunaijie
  • [Hotfix][Zeta]解决当表结构变更时出现的死锁问题 @hailin0
  • [Fix][Connector-V2]修复Doris源选择字段丢失主键信息的问题 @Hisoka-X

improve

  • [Improve][Test]当代码合并到dev分支时,运行所有测试 @Hisoka-X
  • [Improve][Test]使类加载器缓存测试更加稳定 @Hisoka-X
  • [Improve][JDBC]优化了获取JDBC字段类型的代码风格 @zhilinli123
  • [Improve][RestAPI]当任务完成后,返回已完成的工作信息。 @liunaijie
  • [Improve][Connector-V2]添加Elasticsearch类型转换器 @Hisoka-X
  • [Improve][Test]为Zeta本地模式添加测试用例 @liunaijie
  • [Feature][Paimon]支持指定Paimon表的写入属性、分区键和主键 @dailai
  • [Improve][Connector-V2]支持通过schema配置读取orc格式,并进行类型转换 @Hisoka-X
  • [Improve][Jdbc]支持定制的大小写敏感配置对于dameng。 @hailin0
  • [Improve][Connector-V2]支持StarRocks上的TableSourceFactory @xiaochen-zhou
  • [Improve]优化多表写入SinkWriter的准备提交性能 @Hisoka-X
  • [Feature][Connectors-V2][File]支持为文件源/ sink分配编码 @ShaunWuu
  • [Improve][Transform]支持SQL转换,包括内嵌结构查询。 @liunaijie
  • [Improve]StarRocksSourceReader 使用现有的客户端 @xiaochen-zhou
  • [Doc][Improve]修复 Kubernetes 的 Dockerfile @litiliu
  • [Improve][CDC-Connector]修复CDC选项规则。 @lightzhao
  • [Feature][Connector-V2]支持Paimon的多表Sink功能#5652 @dailai
  • [Doc][Improve]支持中文翻译/seatunnel-engine/rest-api.md、local-mode.md、cluster-mode.md和checkpoint-storage.md。 @dzygoon
  • [Feature][connector-jdbc]支持基于PostgreSQL的数据库,使用Copy语句加速数据写入。 @mosence
  • [Doc][Improve]支持中文提交目录 @wineternity
  • [Improve][RestAPI]调用getJobInfoById API时,始终返回jobId。 @liunaijie
  • [Feature][Core]支持作业的事件监听器 @hailin0
  • [Doc][Improve]为start-v2/locally/quick-start-seatunnel-engine.md和start-v2/locally/deployment.md添加中文支持。 @dzygoon
  • [Improve][Jdbc]在Oracle中使用varchar2数据类型存储字符串。 @hailin0
  • [Improve]添加进程详细信息的SaveMode日志 @Hisoka-X
  • [Doc][Improve]支持中文 @JueLance
  • [Feature]支持Doris DateTimeV2类型的纳秒级精度。 @Hisoka-X
  • [Improve]为ReadonlyConfig::toConfig方法添加过时注解。 @Hisoka-X
  • [Feature][Connector-V2]为各种文件连接器添加对XML文件类型的 support。 @Ivan-gfan
  • [Improve][Connector-V2]支持INFINI易搜索 @luohoufu

others

  • [Imprve]修正拼写错误 @xiaochen-zhou
  • [ [Chore]修正 "file" 的拼写错误 ]( https://github.com/apache/seatunnel/pull/6606 " [Chore]修正 "file" 的拼写错误 ") @Hisoka-X
  • [Doc]更新REST API文档 @liunaijie
  • [Chore]删除log4j1.x中未使用的配置项。 @hailin0
  • [Docs]更新Apache SeaTunnel的SQL UDF文档 @liunaijie
  • [Docs]更新Apache SeaTunnel的文档 @liunaijie
  • 在 IntelliJ IDEA 中显示项目图标 @liunaijie
  • 为transform-v2/*添加中文支持 @lihjChina

本文由 白鲸开源科技 提供发布支持!

相关文章:

Apache SeaTunnel 社区 3 月月报

各位热爱 SeaTunnel 的小伙伴们,SeaTunnel 社区 3 月月报来啦!这里将记录 SeaTunnel 社区每个月的重要更新,并评选出月度之星,欢迎关注。 SeaTunnel 月度 Merge Stars 感谢以下小伙伴 3 月为 Apache SeaTunnel 做的精彩贡献&…...

ElasticSearch 的 ConstantScoreQuery 的理解

ConstantScoreQuery的定义: A query that wraps another query and simply returns a constant score equal to 1 for every document that matches the query. It therefore simply strips of all scores and always returns 1. 结合DisMaxQueryBuilder可以查找所…...

【RV1106的ISP使用记录之一】基础环境搭建

公司缺少ISP工程师,做为图像算法工程师的我这就不就给顶上来了么,也没给发两份工资,唉~ 先写个标题,占一个新坑,记录RK平台的传统ISP工作。 一、基础环境的硬件包括三部分: 1、相机环境,用于采…...

mars3d.MaterialType.Image2修改配置面状:图片2的speed数值实现动画效果说明

摘要: mars3d.MaterialType.Image2修改配置面状:图片2的speed数值实现动画效果说明 前提: 1.在示例中,尝试给mars3d.MaterialType.Image2材质的图片加上speed参数,实现动画效果,但是没有看到流动效果说明…...

Elasticsearch部署安装

环境准备 Anolis OS 8 Firewall关闭状态,端口自行处理 Elasticsearch:7.16.1(该版本需要jdk11) JDK:11.0.19 JDK # 解压 tar -zxvf jdk-11.0.19_linux-x64_bin.tar.gz# 编辑/etc/profile vim /etc/profile# 加入如下…...

Android零基础入门(一)配置环境和安装Android Studio

闲来无事学一下Android,本人目前java为主,jdk的环境就不赘述了 配置环境 Java JDK5 或 以后版本 Android SDK Java运行时环境(JRE) Android Studio 你可以从 Oracle 的 Java 网站:JDKJava SE下载下载最新版本的 Jav…...

Golang编译优化——消除Copy指令

一、优化概述 以下是Go编译器对某个代码段编译生成的SSA IR摘选&#xff0c;对于Golang SSA IR的介绍我写了文章&#xff0c;但是在犹豫要不要发。 b1:-... Plain → b2 (5)b2: ← b1 b4-v9 (5) Phi <int> v8 v16 (i[int])v22 (8) Phi <int> v7 v14 (r[int])v1…...

Java IO流对象流实操

ATM的io对象流&#xff1a; package com.jsu.atm; import com.jsu.atm.Serializable; public class Account implements Serializable{//私有数据成员private String UserName; // 用户名称private String PassWord; // 用户密码private double RemainMoney; // 用户余额…...

Mapbox教程:一个简单Demo

近期工作中准备把Mapbox用起来&#xff0c;准备发几个教程&#xff0c;把Mapbox再熟悉熟悉。工作中也用过不少的Web GIS组件&#xff0c;在这里说一下我对这些WebGIS组件的印象。 Leaflet 代码简洁&#xff0c;插件丰富&#xff0c;相比于其大小&#xff0c;功能也挺强大&#…...

看AI赋能数智化 | Gooxi AI服务器闪耀CITE 2024

4月9日“中国电子信息博览会暨2024 AI算力产业大会”在深圳如期开展&#xff0c;Gooxi携最新产品、行业应用全栈解决方案出席盛会&#xff0c;全面展示Gooxi回应数智新时代下机遇与挑战的丰富AI创新实践成果。 All in AI&#xff0c;奔赴新质生产力 作为中国领先的服务器解决…...

大话设计模式——21.中介者模式(Mediator Pattern)

简介 用一个中介对象来封装一系列的对象交互。中介者使各对象不需要显式地相互引用&#xff0c;从而使其耦合松散&#xff0c;而且可以独立地改变它们之间的交互 UML图 应用场景 大量的连接使得一个对象不可能在没有其他对象的支持下工作&#xff0c;系统表现为一个不可分割的…...

Linux 计算机网络

目录 一、网络协议 1、 "协议" 是一种约定 2、协议分层 二、网络模型 1、OSI七层模型 2、TCP/IP五层(或四层)模型 三、网络传输基本流程 四、数据包封装和分用 五、网络中的地址管理 六、网络编程套接字 1、理解源IP地址和目的IP地址 2、端口号 理解 &q…...

bash脚本中‘-b -u -p’‘$# -eq’‘#!/bin/bash’‘sed -i “s/\r//“ $1’的用法说明

#!/bin/bash#!/bin/bash: 这是 Bash 脚本的开头&#xff0c;指定了要使用的解释器&#xff0c;即 Bash。 if [ $# -eq 0 ]; thenif [ $# -eq 0 ]; then: 检查脚本是否被调用时提供了参数。$# 表示参数的数量&#xff0c;-eq 0 表示等于 0&#xff0c;即无参数。 echo "p…...

【人工智能】Gitee AI 天数智芯有奖体验开源AI模型,一定能有所收货,快来体验吧

大家好&#xff0c;我是全栈小5&#xff0c;欢迎阅读小5的系列文章。 这是《人工智能》系列文章&#xff0c;每篇文章将以博主理解的角度展开讲解。 目录 前言两大赛道天数智芯1.模型地址2.天数智芯专区3.选择模型4.模型详情页5.部署模型6.成功部署7.执行例子8.移除模型 千模盲…...

Ceph学习 -8.认证管理-用户基础

文章目录 1.用户基础1.1 基础知识1.2 简单实践1.3 小结 1.用户基础 学习目标&#xff1a;这一节&#xff0c;我们从基础知识、简单实践、小结三个方面来学习。 1.1 基础知识 简介 Ceph集群管理员能够直接在Ceph集群中创建、更新和删除用户 注意&#xff1a;创建用户时&#x…...

大创项目推荐 深度学习+opencv+python实现昆虫识别 -图像识别 昆虫识别

文章目录 0 前言1 课题背景2 具体实现3 数据收集和处理3 卷积神经网络2.1卷积层2.2 池化层2.3 激活函数&#xff1a;2.4 全连接层2.5 使用tensorflow中keras模块实现卷积神经网络 4 MobileNetV2网络5 损失函数softmax 交叉熵5.1 softmax函数5.2 交叉熵损失函数 6 优化器SGD7 学…...

Python小工具提升工作效率【附完整版,可下载word】

1、多个ppt汇总成一个ppt的python代码实现: import win32com.client as win32 import os import re def find(s): pat = re.compile(r"\d+") result = pat.match(s) return int(result.group(0)) def join_ppt(path:str): """ :param path: ppt所…...

k8s-Pod

文章目录 k8s-Podpod 配置文件详解pod 生命周期pod 探针StartupProbeLivenessProbeReadinessProbe探针使用建议 初始化容器钩子函数 k8s-Pod pod 是k8s 中可以调度的最小单位 每个Pod中都可以包含一个或者多个容器&#xff0c;这些容器可以分为两类&#xff1a; 用户程序所在的…...

智能网络新纪元:机器学习赋能未来计算机网络高速发展

&#x1f9d1; 作者简介&#xff1a;阿里巴巴嵌入式技术专家&#xff0c;深耕嵌入式人工智能领域&#xff0c;具备多年的嵌入式硬件产品研发管理经验。 &#x1f4d2; 博客介绍&#xff1a;分享嵌入式开发领域的相关知识、经验、思考和感悟,欢迎关注。提供嵌入式方向的学习指导…...

大数据之kafka应用

大数据之kafka应用 2024启kafkakafka常见命令生产上重放信息jmxjmx的配置和开启jmx的使用jmx例子一 jmx例子二jmx例子三jmx例子四&#xff08;special&#xff09; 2024启kafka kafka常见命令 指定jmx端口启动kafka lsof -i :9999 JMX_PORT9999 /opt/kafka_2.12-3.1.0/bin/kaf…...

手把手教你将自定义视频问答JSON转成EasyR1可用的Parquet数据集

手把手教你将自定义视频问答JSON转成EasyR1可用的Parquet数据集 当你在构建视频问答模型时&#xff0c;可能已经收集了大量结构化的JSON格式数据&#xff0c;但如何将这些数据适配到EasyR1框架中却成了一个技术难题。本文将为你提供一个从零开始的完整解决方案&#xff0c;解决…...

别再死记硬背了!用DCM模式反激电路,手把手教你搞定宽电压输入的隔离电源

从零构建宽电压隔离电源&#xff1a;DCM反激电路实战指南 当你在深夜调试电路时突然闻到焦糊味&#xff0c;或是面对一堆烧毁的MOS管束手无策&#xff0c;是否想过——电源设计本可以更简单&#xff1f;本文将带你用工程师的思维重新理解反激变换器&#xff0c;避开教科书式的理…...

Pixel Language Portal快速上手:无需Python基础的Streamlit镜像开箱即用

Pixel Language Portal快速上手&#xff1a;无需Python基础的Streamlit镜像开箱即用 1. 什么是Pixel Language Portal&#xff1f; Pixel Language Portal&#xff08;像素语言跨维传送门&#xff09;是一款基于腾讯Hunyuan-MT-7B核心引擎构建的创新翻译工具。它最大的特点是…...

告别手写CRUD:用IDEA插件实现数据库到Java代码的智能生成

1. 为什么我们需要告别手写CRUD&#xff1f; 作为一名有多年开发经验的程序员&#xff0c;我深知手写CRUD代码的痛苦。每次新建一个表&#xff0c;就要重复编写几乎相同的实体类、Mapper接口和XML文件。这种重复劳动不仅枯燥乏味&#xff0c;还容易出错。记得有一次我因为手误把…...

STM32开发方式对比与HAL库实战指南

1. STM32开发方式概述作为一名嵌入式开发者&#xff0c;我亲历了STM32开发方式的变迁。从早期的寄存器操作到标准库&#xff0c;再到如今主流的HAL库&#xff0c;每种方式都有其独特的优势和适用场景。对于刚接触STM32的新手来说&#xff0c;选择合适的开发方式往往是个令人困惑…...

别再死磕状态机了!用Verilog实现I2C主机/从机,这份可综合代码直接拿去用

实战派Verilog I2C实现&#xff1a;模块化设计到上板调试全指南 在FPGA和数字IC开发中&#xff0c;I2C协议因其简洁的两线制接口&#xff08;SCL时钟线和SDA数据线&#xff09;而广受欢迎。但当工程师真正需要在项目中实现I2C功能时&#xff0c;往往会陷入状态机调试的泥潭——…...

Virtualbox “Kernel driver not installed (rc=-1908)”问题全面解析与修复指南

1. 遇到Virtualbox "Kernel driver not installed (rc-1908)"错误怎么办&#xff1f; 最近在Ubuntu系统上更新后&#xff0c;突然发现Virtualbox无法正常启动虚拟机了&#xff0c;屏幕上赫然显示着"Kernel driver not installed (rc-1908)"的错误提示。作为…...

QuickSnap:Blender智能捕捉引擎提升40%建模效率

QuickSnap&#xff1a;Blender智能捕捉引擎提升40%建模效率 【免费下载链接】quicksnap Blender addon to quickly snap objects/vertices/points to object origins/vertices/points 项目地址: https://gitcode.com/gh_mirrors/qu/quicksnap 在三维建模领域&#xff0c…...

新手也能懂:DCDC芯片外围那个神秘的‘自举电容’,到底怎么选才不会翻车?

新手也能懂&#xff1a;DCDC芯片外围那个神秘的‘自举电容’&#xff0c;到底怎么选才不会翻车&#xff1f; 第一次看到DCDC芯片数据手册里的"自举电容"时&#xff0c;我盯着那个连接在BTST和SW引脚之间的小元件发呆了十分钟——它看起来和普通电容没什么两样&#x…...

2025年LoL国服皮肤修改器R3nzSkin避坑实录:从VS2022编译到DLL注入,我踩过的那些雷

2025年LoL国服皮肤修改器R3nzSkin避坑实录&#xff1a;从VS2022编译到DLL注入实战全解析 当你在深夜的召唤师峡谷中看到对手炫酷的限定皮肤时&#xff0c;是否也曾动过"免费体验"的念头&#xff1f;作为一款开源的外部DLL修改器&#xff0c;R3nzSkin确实能让玩家在本…...