当前位置：首页 > news >正文

flink on yarn 部署

news 2025/12/28 14:06:39

需要jars

-rwxr-xrwx   3 root supergroup      58284 2022-11-30 03:44 /lib/flink/commons-cli-1.5.0.jar
-rw-r--r--   3 root supergroup      48497 2022-12-10 03:04 /lib/flink/flink-cep-scala_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup     189468 2022-12-10 03:04 /lib/flink/flink-cep_2.12-1.14.3.jar
-rwxr-xrwx   3 root supergroup     205889 2022-11-30 03:44 /lib/flink/flink-clients_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup     389152 2022-12-10 04:56 /lib/flink/flink-connector-kafka_2.12-1.14.3.jar
-rwxr-xrwx   3 root supergroup      85584 2022-11-30 03:44 /lib/flink/flink-csv-1.14.3.jar
-rwxr-xrwx   3 root supergroup  136054094 2022-11-30 03:44 /lib/flink/flink-dist_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup     732616 2022-12-10 03:04 /lib/flink/flink-gelly-scala_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup     639867 2022-12-10 03:04 /lib/flink/flink-gelly_2.12-1.14.3.jar
-rwxr-xrwx   3 root supergroup     153145 2022-11-30 03:44 /lib/flink/flink-json-1.14.3.jar
-rw-r--r--   3 root supergroup   18179726 2022-12-10 03:04 /lib/flink/flink-oss-fs-hadoop-1.14.3.jar
-rw-r--r--   3 root supergroup   38662126 2022-12-10 03:04 /lib/flink/flink-python_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup      20401 2022-12-10 03:04 /lib/flink/flink-queryable-state-runtime-1.14.3.jar
-rwxr-xrwx   3 root supergroup   59604787 2022-11-30 03:44 /lib/flink/flink-shaded-hadoop-3-uber-3.1.1.7.2.9.0-173-9.0.jar
-rw-r--r--   3 root supergroup     221113 2022-12-10 03:04 /lib/flink/flink-shaded-netty-tcnative-dynamic-2.0.39.Final-14.0.jar
-rwxr-xrwx   3 root supergroup    7709731 2022-11-30 03:44 /lib/flink/flink-shaded-zookeeper-3.4.14.jar
-rw-r--r--   3 root supergroup     482874 2022-12-10 03:04 /lib/flink/flink-sql-client_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup   42150848 2022-12-07 09:44 /lib/flink/flink-sql-connector-hive-2.2.0_2.11-1.14.4.jar
-rw-r--r--   3 root supergroup     142960 2022-12-10 03:04 /lib/flink/flink-state-processor-api_2.12-1.14.3.jar
-rwxr-xrwx   3 root supergroup   39633410 2022-11-30 03:44 /lib/flink/flink-table_2.12-1.14.3.jar
-rwxr-xrwx   3 root supergroup     153997 2022-11-30 03:48 /lib/flink/flink-yarn_2.12-1.14.3.jar
-rw-r--r--   3 root supergroup   35787665 2022-12-07 09:44 /lib/flink/hive-exec-2.1.1-cdh6.2.0.jar
-rw-r--r--   3 root supergroup    2661351 2022-12-17 01:25 /lib/flink/kafka-clients-2.2.0.jar
-rwxr-xrwx   3 root supergroup     208006 2022-11-30 03:44 /lib/flink/log4j-1.2-api-2.17.1.jar
-rwxr-xrwx   3 root supergroup     301872 2022-11-30 03:44 /lib/flink/log4j-api-2.17.1.jar
-rwxr-xrwx   3 root supergroup    1790452 2022-11-30 03:44 /lib/flink/log4j-core-2.17.1.jar
-rwxr-xrwx   3 root supergroup      24279 2022-11-30 03:44 /lib/flink/log4j-slf4j-impl-2.17.1.jar
drwxr-xr-x   - root supergroup          0 2022-12-10 03:04 /lib/flink/python

flink on yarn 部署

需要jars -rwxr-xrwx 3 root supergroup 58284 2022-11-30 03:44 /lib/flink/commons-cli-1.5.0.jar -rw-r--r-- 3 root supergroup 48497 2022-12-10 03:04 /lib/flink/flink-cep-scala_2.12-1.14.3.jar -rw-r--r-- 3 root supergroup 189468 2022-12-10…...

编程日记 2023/8/30 0:33:13

postgresql基于postgis常用空间函数

1、ST_AsGeoJSON 图元转geojson格式 select ST_AsGeoJSON(l.geom) from g_zd l limit 10 2、 ST_Transform 坐标转换 select st_transform(l.shape, 3857) from sde_wf_cyyq l limit 10select st_astext(st_transform(l.shape, 3857)) from sde_wf_cyyq l limit 103、st_aste…...

编程日记 2023/8/30 0:32:12

详细讲解移植u-boot.2022.10版本移植到开发板基本方法

大家好，我是ST。今天给大家讲一讲如何将u-boot.2022.10版本移植到imx6ull开发板上。环境选项内容编译主机UbuntuLTS 18.04目标板ATK I.MX6ULL（512MB DDR3 8GB EMMC）u-boot版本2022.10交叉编译工具链gcc-linaro-7.5.0-2019.12-i686…...

编程日记 2023/8/30 0:31:08

Vue.js2+Cesium1.103.0 十一、Three.js 炸裂效果

Vue.js2Cesium1.103.0 十一、Three.js 炸裂效果 Demo ThreeModelBoom.vue <template><div:id"id"class"three_container"/> </template><script> /* eslint-disable eqeqeq */ /* eslint-disable no-unused-vars */ /* eslint-d…...

编程日记 2023/8/30 0:30:07

Nodejs快速搭建简单的HTTP服务器，并发布公网远程访问

前言 Node.js 是能够在服务器端运行 JavaScript 的开放源代码、跨平台运行环境。Node.js 由 OpenJS Foundation（原为 Node.js Foundation，已与 JS Foundation 合并）持有和维护，亦为 Linux 基金会的项目。Node.js 采用 Google 开发…...

编程日记 2023/8/30 0:29:05

爬虫入门01

1. 请求头中最常见的一些重要内容 User-Agent : 请求载体的身份标识(⽤啥发送的请求)Referer: 防盗链(这次请求是从哪个⻚⾯来的? 反爬会⽤到)cookie: 本地字符串数据信息(⽤户登录信息, 反爬的token) 2. 响应头中一些重要内容 cookie: 本地字符串数据信息(⽤户登录信息, 反…...

编程日记 2023/8/30 0:28:04

解读GIS软件：从ArcGIS到山海鲸可视化的全方位介绍

在现代社会，地理信息系统（GIS）的应用已经渗透到了各个领域，为我们提供了丰富的地理数据分析和可视化工具。下面介绍几款常见的GIS工具软件，一起来了解它们的特点和优势。 1. ArcGIS: ArcGIS由Esri公司开发，…...

编程日记 2023/8/30 0:27:03

嵌入式通用硬件模块设计——串口音频播放模块

模块功能展示： 串口音频控制模块一、简介方案为串口音频播放芯片功放芯片，口音频播放芯片IC为my1690-16s，功放为PAM8406。 1、my1690-16s 迈优科技的一款由串口控制的插卡MP3播放控制芯片，支持串口控制播放指定音频、音量调节…...

编程日记 2023/8/30 0:26:02

【PLSQL】PLSQL基础

文章目录一：记录类型1.语法2.代码实例二：字符转换三：%TYPE和%ROWTYPE1.%TYPE2.%ROWTYPE 四：循环1.LOOP2.WHILE（推荐）3.数字式循环五：游标1.游标定义及读取2.游标属性3.NO_DATA_FOUND和%NOTFO…...

编程日记 2023/8/30 0:24:59

【C++笔记】C++内存管理

【C笔记】C内存管理一、C中动态内存申请的方式二、new和delete的实现原理2.1、operator new和operator delete函数一、C中动态内存申请的方式在C语言中我们需要动态申请空间的时候我们通常都是用malloc函数，但是malloc函数对自定义类型是没什么问题的&#xff0…...

编程日记 2023/8/30 0:23:57

十四五双碳双控时代下的“低碳认证”

目录前言十四五双碳双控时代下的“低碳认证” 一、关于“低碳认证” 二、低碳认证优势三、环境产品认证EPD 四、EPD相关运营机构五、碳中和相关机构六、EPD的认证流程七、低碳产品认证认证流程和要求八、相关机构认证证书样例九、证书附件表前言通过本篇文…...

编程日记 2023/8/30 0:22:56

Android——基本控件（下）（十九）

1. 菜单：Menu 1.1 知识点 （1）掌握Android中菜单的使用； （2）掌握选项菜单（OptionsMenu）的使用； （3）掌握上下文菜单（ContextMenu&am…...

编程日记 2023/8/30 0:21:55

聚类分析 | MATLAB实现基于DBSCAD密度聚类算法可视化

聚类分析 | MATLAB实现基于LP拉普拉斯映射的聚类可视化目录聚类分析 | MATLAB实现基于LP拉普拉斯映射的聚类可视化效果一览基本介绍程序设计参考资料效果一览基本介绍基于DBSCAD密度聚类算法可视化，MATLAB程序。使用带有KD树加速的dbscan_with_kdtree函数进行…...

编程日记 2023/8/30 0:20:54

reactantd（12）动态表单的默认值问题

最近遇到一个需求是有一个表单可以输入各种信息，然后还需要有一个编辑功能，点击编辑的时候需要把当前数据填入到表单里面。在网上查了很多种方法，然后我的思路是使用initialValues搭配setState()使用。默认值都为空，然后点击单条数…...

编程日记 2023/8/30 0:19:53

无涯教程-Python机器学习 - Stochastic Gradient Boosting函数

它也称为梯度提升机。在下面的Python食谱中,我们将通过使用pima Indians糖尿病数据集上的 sklearn 的 GradientBoostingClassifier 类来创建随机梯度Boostingensemble模型进行分类。首先,导入所需的软件包,如下所示: from pandas import read_csv from sklearn.model_select…...

编程日记 2023/8/30 0:18:49

SOLIDWORKS中多实体文件到装配体的转换技巧

我们在做机械等工程设计中，有时为了节省时间，需要把多实体的“零件”，直接转换为装配体，不再另外装配，这样能大大简化设计的操作时间，复杂程度。在这里，我们首先要了解，SOLIDWORKS文…...

编程日记 2023/8/30 0:17:48

Transformer (Attention Is All You Need) 论文精读笔记

Transformer(Attention Is All You Need) Attention Is All You Need 参考：跟李沐学AI-Transformer论文逐段精读【论文精读】摘要（Abstract） 首先摘要说明：目前，主流的序列转录（序列转录：给…...

编程日记 2023/8/30 0:16:47

Git企业开发控制理论和实操-从入门到深入（二）｜Git的基本操作

前言那么这里博主先安利一些干货满满的专栏了！ 首先是博主的高质量博客的汇总，这个专栏里面的博客，都是博主最最用心写的一部分，干货满满，希望对大家有帮助。高质量博客汇总https://blog.csdn.net/yu_cblog/cate…...

编程日记 2023/8/30 0:15:46

Positive Technologies 专家帮助修复 Western Digital 网络存储设备中的一个危险漏洞

Positive Technologies 专家帮助修复 Western Digital 网络存储设备中的一个危险漏洞经过验证的攻击者可利用该漏洞在受攻击的设备上注入恶意软件并远程访问文件 Western Digital 感谢 Positive Technologies 专家 Nikita Abramov 发现 Western Digital NAS 固件中的一个漏洞…...

编程日记 2023/8/30 0:14:44

【springboot】springboot定时任务：

文章目录一、文档：二、案例： 一、文档： 【cron表达式在线生成器】https://cron.qqe2.com/ 二、案例： EnableScheduling //开启任务调度package com.sky.task;import com.sky.entity.Orders; import com.sky.mapper.OrderMapper; …...

编程日记 2023/8/30 0:13:41

观成科技：隐蔽隧道工具Ligolo-ng加密流量分析

1.工具介绍 Ligolo-ng是一款由go编写的高效隧道工具，该工具基于TUN接口实现其功能，利用反向TCP/TLS连接建立一条隐蔽的通信信道，支持使用Let’s Encrypt自动生成证书。Ligolo-ng的通信隐蔽性体现在其支持多种连接方式，适应复杂网…...

编程新知 2025/12/27 15:17:01

uni-app学习笔记二十二---使用vite.config.js全局导入常用依赖

在前面的练习中，每个页面需要使用ref，onShow等生命周期钩子函数时都需要像下面这样导入 import {onMounted, ref} from "vue" 如果不想每个页面都导入，需要使用node.js命令npm安装unplugin-auto-import npm install unplugin-au…...

编程新知 2025/9/14 18:41:15

Cloudflare 从 Nginx 到 Pingora：性能、效率与安全的全面升级

在互联网的快速发展中，高性能、高效率和高安全性的网络服务成为了各大互联网基础设施提供商的核心追求。Cloudflare 作为全球领先的互联网安全和基础设施公司，近期做出了一个重大技术决策：弃用长期使用的 Nginx，转而采用其内部开发…...

编程新知 2025/12/18 18:46:20

图表类系列各种样式PPT模版分享

图标图表系列PPT模版，柱状图PPT模版，线状图PPT模版，折线图PPT模版，饼状图PPT模版，雷达图PPT模版，树状图PPT模版图表类系列各种样式PPT模版分享：图表系列PPT模板https://pan.quark.cn/s/20d40aa…...

编程新知 2025/12/20 22:08:15

MySQL用户和授权

开放MySQL白名单可以通过iptables-save命令确认对应客户端ip是否可以访问MySQL服务： test: # iptables-save | grep 3306 -A mp_srv_whitelist -s 172.16.14.102/32 -p tcp -m tcp --dport 3306 -j ACCEPT -A mp_srv_whitelist -s 172.16.4.16/32 -p tcp -m tcp -…...

编程新知 2025/8/25 19:12:45

高效线程安全的单例模式：Python 中的懒加载与自定义初始化参数

高效线程安全的单例模式：Python 中的懒加载与自定义初始化参数在软件开发中，单例模式（Singleton Pattern）是一种常见的设计模式，确保一个类仅有一个实例，并提供一个全局访问点。在多线程环境下，实现单例模式时需要注意线程安全问题，以防止多个线程同时创建实例，导致…...

编程新知 2025/11/25 19:50:27

智能AI电话机器人系统的识别能力现状与发展水平

一、引言随着人工智能技术的飞速发展，AI电话机器人系统已经从简单的自动应答工具演变为具备复杂交互能力的智能助手。这类系统结合了语音识别、自然语言处理、情感计算和机器学习等多项前沿技术，在客户服务、营销推广、信息查询等领域发挥着越来越重要…...

编程新知 2025/6/11 3:05:02

[免费]微信小程序问卷调查系统(SpringBoot后端+Vue管理端)【论文+源码+SQL脚本】

大家好，我是java1234_小锋老师，看到一个不错的微信小程序问卷调查系统(SpringBoot后端Vue管理端)【论文源码SQL脚本】，分享下哈。项目视频演示【免费】微信小程序问卷调查系统(SpringBoot后端Vue管理端) Java毕业设计_哔哩哔哩_bilibili 项…...

编程新知 2025/12/21 14:10:00

前端中slice和splic的区别

1. slice slice 用于从数组中提取一部分元素，返回一个新的数组。特点： 不修改原数组：slice 不会改变原数组，而是返回一个新的数组。提取数组的部分：slice 会根据指定的开始索引和结束索引提取数组的一部分。不包含…...

编程新知 2025/11/27 20:15:13

ThreadLocal 源码

ThreadLocal 源码此类提供线程局部变量。这些变量不同于它们的普通对应物，因为每个访问一个线程局部变量的线程（通过其 get 或 set 方法）都有自己独立初始化的变量副本。ThreadLocal 实例通常是类中的私有静态字段，这些类希望将…...

编程新知 2025/11/5 10:19:24

相关文章：