当前位置： 首页 > news >正文

iceberg-flink 十一：在dlink代码中建表增加catalog地址。

news 2026/4/2 4:15:56

一：catalog

是存储元数据的地方。

二：表中增加catalog地址’

当我们映射iceberg表的时候，增加了地址，就会成功映射到表

CREATE CATALOG dk_empower WITH('type'='iceberg','catalog-type'='hadoop','warehouse'='hdfs://cluster/iceberg/warehouse/iceberg_hadoop/dk_empower','property-version'='1'
);

create table  dwd_dk_event_log (p_dt	        string,process_name	string,stage	        int,stage_name	string,event_id	    string,event_name	string,flag          int,state         int,`ts` timestamp_ltz,`ts1` as CAST(ts AS TIMESTAMP_LTZ(3)),WATERMARK FOR ts1 AS ts1 - INTERVAL '5' SECOND   -- 在t_s上定义5 秒延迟的 watermark
) with ('connector'='iceberg','catalog-name'='dk_empower','catalog-database'='ods','catalog-table'='dwd_dk_event_log','streaming'='true','monitor-interval'='2s','catalog-type'='hadoop','warehouse'='hdfs://cluster/iceberg/warehouse/iceberg_hadoop/dk_empower'--'start-snapshot-id'='');

相关文章：

iceberg-flink 十一：在dlink代码中建表增加catalog地址。

一：catalog 是存储元数据的地方。 二：表中增加catalog地址’ 当我们映射iceberg表的时候，增加了地址，就会成功映射到表 CREATE CATALOG dk_empower WITH(typeiceberg,catalog-typehadoop,warehousehdfs://cluster/iceberg/war…...

编程日记 2023/10/12 19:47:46

多列等高实现

预期效果 多列等高，左右两列高度自适应且一样，分别设置不同背景色效果预览： 分别由6种方法实现 1、使用padding + margin + overflow 实现多列等高效果，具有良好的兼容性； 2、border实现多列等高，左边框宽度为200px，左列浮动，伪元素清除浮动； 3、父元素线性渐变背景色…...

编程日记 2023/10/12 19:46:45

2023 泰山杯 --- Crypto wp

文章目录 题目解题过程part1part2part3 解题代码 题目 from fastecdsa.curve import P521 as Curve from fastecdsa.point import Point from os import urandom from random import getrandbits import uuid from Crypto.PublicKey import DSA from Crypto.Util.number impor…...

编程日记 2023/10/12 19:44:43

蓝桥杯每日一题20233.10.10

题目描述 回文日期 - 蓝桥云课 (lanqiao.cn) 题目分析 对于此题，我们最先想到的是暴力解法，将每一种情况经行循环查找，在查找的过程中记录下答案，回文日期就是字符串判断回文，ABABBABA型回文日期可以将回文经行特判…...

编程日记 2023/10/12 19:43:41

366. 寻找⼆叉树的叶⼦节点

366. 寻找⼆叉树的叶⼦节点 这道题混用二叉树递归 「遍历」和「分解问题」 两种思维模式。 class FindLeaves:"""366. 寻找⼆叉树的叶⼦节点https://leetcode.cn/problems/find-leaves-of-binary-tree/"""def solution(self, root):self.res …...

编程日记 2023/10/12 19:42:40

python - excel 设置样式

文章目录 前言python - excel 设置样式1. 准备2. 示例2.1. 给单元格设置样式"等线"、大小为24磅、斜体、红色颜色和粗体2.2. 给第二行设置样式"宋体"、大小为16磅、斜体、红色颜色和粗体2.3. 给第三行数据设置垂直居中和水平居中2.4. 给第四行设置行高为30…...

编程日记 2023/10/12 19:40:38

Gemmini测试test文件chisel源码详解（一）

DMACommandTrackerTest.scala 源码如下： package gemminiimport scala.collection.mutable.ArrayBufferimport chisel3._ import chisel3.iotesters.{ChiselFlatSpec, PeekPokeTester}class DMACommandTrackerTester(c: DMAReadCommandTracker[UInt]) extends Pee…...

编程日记 2023/10/12 19:38:37

RabbitMQ中的手动应答和自动应答

当使用RabbitMQ来处理消息时，消息确认是一个重要的概念。RabbitMQ提供了两种不同的消息确认方式：自动应答（Automatic Acknowledgment）和手动应答（Manual Acknowledgment）。这两种方式适用于不同的应用场景&…...

编程日记 2023/10/12 19:37:36

【C语言】文件的操作与文件函数的使用(详细讲解)

前言：我们在学习C语言的时候会发现在编写一个程序的时候，数据是存在内存当中的，而当我们退出这个程序的时候会发现这个数据不复存在了，因此我们可以通过文件把数据记录下来，使用文件我们可以将数据直接存放在电脑的硬盘…...

编程日记 2023/10/12 19:36:33

ROS-PX4仿真笔记_1

offbord模式测试 rosrun offboard_pkg position stablelize模式 lqr控制器实验 roslaunch px4 fast_test.launch 无人机起飞1.5-2m sh mybot_gazebo.sh#roslaunch px4 fast_racing.launch & sleep 20; roslaunch ego_planner single_run_in_gazebo.launch & sleep 1…...

编程日记 2023/10/12 19:35:32

使用 Python 中的小波变换信号驾驭股票价格的波动

一、简介 股票上涨和下跌，创造出像海浪一样难以预测的模式和走势。然而，就像科学家通过了解下面的水流来预测波浪的运动一样，我们也可以使用类似的工具破译股票市场的一些模式。 通过利用小波变换的力量，我们深入表面，试图揭示驱动股价的深层原因。这段旅程不仅仅涉及数字…...

编程日记 2023/10/12 19:33:30

AndroidStudio模拟器，没有Google Play的就有ROOT权限

正确选择版本 测试 D:\>adb shell emulator64_x86_64:/ $ su emulator64_x86_64:/ #...

编程日记 2023/10/12 19:32:29

复选框 前端代码

表单中复选框选项 <el-form-item label="是否公开：" hidden="true"><input type="checkbox...

编程日记 2023/10/12 19:31:27

每日一练 | 网络工程师软考真题Day41

1、包过滤防火墙对通过防火墙的数据包进行检查&#xff0c;只有满足条件的数据包才能通过&#xff0c;对数据包的检查内容一般不包括 。 A&#xff0e;源地址 B&#xff0e;目的地址 C&#xff0e;协议 D&#xff0e;有效载荷 2、下面关于ARP木马的描述中&#xff0c;错误的…...

编程日记 2023/10/12 19:30:26

vue使用pinia存储数据并保持数据持久化

在Vue中使用Pinia存储数据并保持数据持久化&#xff0c;你可以遵循以下步骤&#xff1a; 安装Pinia&#xff1a;首先&#xff0c;你需要安装Pinia。可以通过npm或yarn来安装它。在终端中运行以下命令&#xff1a; npm install pinia# 或者使用yarn yarn add pinia创建Pinia St…...

编程日记 2023/10/12 19:29:25

k8s - Flannel

1.Flannel概念剖析 Flannel是 CoreOS 团队针对 Kubernetes 设计的一个覆盖网络&#xff08;Overlay Network&#xff09;工具&#xff0c;其目的在于帮助每一个使用 Kuberentes 的 CoreOS 主机拥有一个完整的子网。这次的分享内容将从Flannel的介绍、工作原理及安装和配置三方…...

编程日记 2023/10/12 19:28:24

服务器中了balckhoues勒索病毒怎么办？勒索病毒解密，数据恢复

近日&#xff0c;云天数据恢复中心发现&#xff0c;有多位用户的服务器中了一种名为balckhoues的勒索病毒&#xff0c;因为绝大多数用户是第一次遇到这种情况&#xff0c;所以对这种类型的勒索病毒并不是很了解。那接下来我们将对balckhoues勒索病毒做一个分析。 中毒特征 服务…...

编程日记 2023/10/12 19:26:22

react-pdf | Warning: TextLayer styles not found.

问题描述&#xff1a; 使用react-pdf展示pdf&#xff0c;但是报警告&#xff0c;Warning: TextLayer styles not found. 解决方法&#xff1a; <Pageloading{"加载中..."}renderAnnotationLayer{false}renderTextLayer{false}/> 添加属性如上&#xff0c;设…...

编程日记 2023/10/12 19:25:20

vue上传文件MD5加密

1.下载MD5依赖 npm install crypto-js 2.在utils文件夹中新增文件md5方法文件&#xff0c;文件名自定义&#xff08;fileMd5Sum.js&#xff09; import CryptoJs from crypto-js export default {// md5值计算fileMd5Sum(file) {let CryptoJS require("crypto-js"…...

编程日记 2023/10/12 19:23:17

vue2 .sync 修饰符

vue2 .sync 修饰符 **创建 工程&#xff1a; H:\java_work\java_springboot\vue_study ctrl按住不放 右键 悬着 powershell H:\java_work\java_springboot\js_study\Vue2_3入门到实战-配套资料\01-随堂代码素材\day04\准备代码\13-sync修饰符 vue --version vue create v-sy…...

编程日记 2023/10/12 19:22:16

AI绘图小说配图批量生成 小说插图制作神器 小说配图 动漫图片生成 低配显卡可用 解决图片一致性的问题 生成的图片一致性 可控

简介说明 AI绘图小说配图批量生成 小说插图制作神器 小说配图 动漫图片生成 低配显卡可用 把常见的出图流程整理成更容易操作、更适合生产使用的工作台&#xff0c;且支持低配显卡稳定运行&#xff0c;无需升级硬件即可流畅出图。 它可以帮助用户把“启动服务、填写提示词、切…...

编程新知 2026/4/2 3:50:32

OpenClaw日志分析：千问3.5-35B-A3B-FP8任务执行问题定位

OpenClaw日志分析&#xff1a;千问3.5-35B-A3B-FP8任务执行问题定位 1. 问题背景与日志分析的价值 上周我在尝试用OpenClaw自动化处理一批技术文档时&#xff0c;遇到了任务频繁中断的问题。当时对接的是千问3.5-35B-A3B-FP8模型&#xff0c;系统提示"模型响应异常"…...

编程新知 2026/4/2 3:05:29

基于vue的非遗文化传承平台[vue]-计算机毕业设计源码+LW文档

摘要&#xff1a;非物质文化遗产&#xff08;非遗&#xff09;作为民族文化的重要组成部分&#xff0c;承载着人类社会的文明和历史记忆。随着现代社会的快速发展&#xff0c;非遗文化的传承面临着诸多挑战。为了更好地保护和传承非遗文化&#xff0c;本文设计并实现了一个基于…...

编程新知 2026/4/2 2:28:50

AI营销SaaS榜单评测：原圈科技如何助力品牌客户破局增长？

本文深度探讨AI营销行业趋势与SaaS产品评选标准。在众多解决方案中&#xff0c;原圈科技的AI营销SaaS平台凭借其领先的技术底层能力、产品成熟度及客户成功案例&#xff0c;在市场适配度与服务落地性等多个维度下表现突出&#xff0c;被普遍视为企业实现精细化营销升级的有力选…...

编程新知 2026/4/2 1:50:15

AIGlasses_for_navigation多场景落地：日常通勤、医院导诊、地铁站导航三场景实测

AIGlasses_for_navigation多场景落地&#xff1a;日常通勤、医院导诊、地铁站导航三场景实测 1. 引言&#xff1a;当导航从手机屏幕“走”到眼前 想象一下这样的场景&#xff1a;你走在陌生的城市街道&#xff0c;要去一个从未去过的咖啡馆。你不需要低头看手机地图&#xff…...

编程新知 2026/4/1 23:58:40

Omni-Vision Sanctuary 企业级部署架构设计：高可用与弹性伸缩

Omni-Vision Sanctuary 企业级部署架构设计&#xff1a;高可用与弹性伸缩 1. 企业级AI部署面临的挑战 当企业决定在生产环境中部署Omni-Vision Sanctuary这类AI服务时&#xff0c;通常会遇到几个关键挑战。首先是服务可用性问题&#xff0c;任何计划外停机都可能直接影响业务…...

编程新知 2026/4/1 23:52:37

落地生产级推理引擎！高性能GPU算子生成系统Kernel-Smith发布

在当今的大模型时代&#xff0c;高性能 GPU 算子&#xff08;Kernel&#xff09;是将硬件算力转化为实际吞吐量的核心引擎。无论是支撑 Megatron、vLLM、LMDeploy 等底层系统&#xff0c;还是驱动 AI for Science (AI4S) 的复杂科学计算&#xff0c;高效的算子实现都是释放硬件…...

编程新知 2026/4/1 22:39:31

SaaS的末日重构：AI Agent浪潮下的危机与新生

目录 前言 一、 市场恐慌的源头&#xff1a;“软件-PE”的死亡循环 二、 核心重构&#xff1a;AI 将如何改造企业级 SaaS&#xff1f; 2.1 交互层的降维打击&#xff1a;从“点界面”到“说意图” 2.2 流程层的动态重组&#xff1a;从“应用中心”到“工作流中心” 2.3 定…...

编程新知 2026/4/1 22:33:30

十分钟用快马AI搭建中科院期刊分区查询工具原型

最近在帮实验室整理投稿期刊清单时&#xff0c;发现中科院分区查询是个高频需求。每次都要登录官网、输入验证码、反复跳转页面&#xff0c;特别影响效率。于是想做个简易查询工具&#xff0c;正好用InsCode(快马)平台试试快速原型开发&#xff0c;没想到十分钟就搭出了可用版本…...

编程新知 2026/4/1 21:38:33

Qwen3-VL-30B部署避坑指南：从下载到运行一气呵成

Qwen3-VL-30B部署避坑指南&#xff1a;从下载到运行一气呵成 1. 为什么选择Qwen3-VL-30B Qwen3-VL-30B是目前通义千问系列中最强大的视觉-语言模型&#xff0c;它在多个方面实现了显著提升&#xff1a; 更优秀的文本理解和生成&#xff1a;能够处理复杂语义和长文本更深入的…...

编程新知 2026/4/1 20:03:36