flink operator 拉取阿里云私有镜像（其他私有类似）
创建 k8s secret
kubectl --namespace flink create secret docker-registry aliyun-docker-registry --docker-server=registry.cn-shenzhen.aliyuncs.com --docker-username=ops_acr@1060896234 --docker-password=passwd --docker-email=DOCKER_EMAIL
注意命名空间指定你使用的 我的命名空间是flink
secret type = docker-registry 这个是固定值不需要动
aliyun-docker-registry 为你的secret 取的固定名称
–docker-server 就是你私库地址
–docker-username 登录名称
–docker-password 登录密码
查看
kubectl get secret aliyun-docker-registry -n flink
#后面的命名空间不要忘记 要不然找不到
kubectl --namespace flink get secret aliyun-docker-registry -o yaml
# 以yaml 的方式查看配置文件
flink yaml
apiVersion: flink.apache.org/v1beta1
kind: FlinkDeployment
metadata:name: autoscaling-examplenamespace: flink
spec:imagePullPolicy: IfNotPresentflinkVersion: v1_18flinkConfiguration:job.autoscaler.enabled: "true"job.autoscaler.stabilization.interval: "1m"job.autoscaler.metrics.window: "3m"pipeline.max-parallelism: "24"taskmanager.numberOfTaskSlots: "2"state.savepoints.dir: hdfs:///flink/savepointsstate.checkpoints.dir: hdfs:///flink/checkpointshigh-availability.type: kuberneteshigh-availability.storageDir: hdfs:///flink/haexecution.checkpointing.interval: "1m"jobmanager.scheduler: adaptivejob.autoscaler.target.utilization.boundary: "0.1"serviceAccount: flinkpodTemplate:apiVersion: v1kind: Podmetadata:name: pod-templatespec:containers:- name: flink-main-containerimagePullPolicy: IfNotPresentimage: registry.cn-hangzhou.aliyuncs.com/liguo/autoscaling-example:17.0imagePullSecrets:- name: aliyun-docker-registryjobManager:resource:memory: "1024m"cpu: 1taskManager:resource:memory: "1024m"cpu: 1job:jarURI: local:///opt/flink/usrlib/flink1_18demo-1.0-SNAPSHOT.jarparallelism: 1upgradeMode: last-state
目前对k8s 刚刚接触1周所有对podTemplate 还是不太了解 目前这个配置时可用的 在pod 中拉取镜像引用 鉴权
提交
kubectl create -f test.yaml -n flink
#我内部已经指定命名空间了 但是我习惯对外加上
日志持久化
非镜像部署
日志持久化到hdfs
相关文章：
flink operator 拉取阿里云私有镜像（其他私有类似）
创建 k8s secret kubectl --namespace flink create secret docker-registry aliyun-docker-registry --docker-serverregistry.cn-shenzhen.aliyuncs.com --docker-usernameops_acr1060896234 --docker-passwordpasswd --docker-emailDOCKER_EMAIL注意命名空间指定你使用的 我…...
C语言算法赛——蓝桥杯（省赛试题）
一、十四届C/C程序设计C组试题 十四届程序C组试题A#include <stdio.h> int main() {long long sum 0;int n 20230408;int i 0;// 累加从1到n的所有整数for (i 1; i < n; i){sum i;}// 输出结果printf("%lld\n", sum);return 0; }//十四届程序C组试题B…...
【文本到上下文 #2】：NLP 的数据预处理步骤
一、说明 欢迎阅读此文，NLP 爱好者！当我们继续探索自然语言处理 (NLP) 的广阔前景时，我们已经在最初的博客中探讨了它的历史、应用和挑战。今天，我们更深入地探讨 NLP 的核心——数据预处理的复杂世界。 这篇文章是我们的“完整 N…...
Minio文件分片上传实现
资源准备 MacM1Pro 安装Parallels19.1.0请参考 https://blog.csdn.net/qq_41594280/article/details/135420241 MacM1Pro Parallels安装CentOS7.9请参考 https://blog.csdn.net/qq_41594280/article/details/135420461 部署Minio和整合SpringBoot请参考 https://blog.csdn.net/…...
C语言总结十一：自定义类型：结构体、枚举、联合(共用体)
本篇博客详细介绍C语言最后的三种自定义类型，它们分别有着各自的特点和应用场景，重点在于理解这三种自定义类型的声明方式和使用，以及各自的特点，最后重点掌握该章节常考的考点，如：结构体内存对齐问题&…...
解决Spring Boot应用打包后文件访问问题
在Spring Boot项目的开发过程中，一个常见的挑战是如何有效地访问和操作资源文件。这一挑战尤其显著当应用从IDE环境（如IntelliJ IDEA）迁移到被打包成JAR文件后的生产环境。开发者经常遇到的问题是，在IDE中运行正常的代码ÿ…...
循环神经网络的变体模型-LSTM、GRU
一.LSTM（长短时记忆网络） 1.1基本介绍 长短时记忆网络（Long Short-Term Memory，LSTM）是一种深度学习模型，属于循环神经网络（Recurrent Neural Network，RNN）的一种变体。…...
视频图像的color range简介
介绍 研究FFmpeg发现，在avcodec.h中有关于color的解释，主要有四个属性，primaries、transfer、space和range。 color primaries： 基于RGB空间对应的绝对颜色XYZ的变换，决定了最终三原色RGB分别是什么颜色；…...
tcp的三次握手
http 和 https 都是是基于 TCP 的请求，https 是 http 加上 tls 连接。TCP 是面向连接的协议。 对于 http1.1 协议chrome 限制在同一个域名下最多可以建立 6 个 tcp 连接，所以如果在同一个域名下，同时有超过 6 个请求发生，那么多余…...
unity 矩阵探究
public void MatrixTest1(){ ///Matrix4x4 是列矩阵，就是一个vector4表示一列，所以在c#中矩阵和Vector4只能矩阵右乘坐标。但是在shader中是矩阵左乘坐标，所以在shader中是行矩阵 Matrix4x4 moveMatrix1 new Matrix4x4(new Vector4(1,0,0,0)…...
MySQL---单表查询综合练习
创建emp表 CREATE TABLE emp( empno INT(4) NOT NULL COMMENT 员工编号, ename VARCHAR(10) COMMENT 员工名字, job VARCHAR(10) COMMENT 职位, mgr INT(4) COMMENT 上司, hiredate DATE COMMENT 入职时间, sal INT(7) COMMENT 基本工资, comm INT(7) COMMENT 补贴, deptno INT…...
Python项目——搞怪小程序（PySide6+Pyinstaller）
1、介绍 使用python编写一个小程序，回答你是猪吗。 点击“是”提交，弹窗并退出。 点击“不是”提交，等待5秒，重新选择。 并且隐藏了关闭按钮。 2、实现 新建一个项目。 2.1、设计UI 使用Qt designer设计一个UI界面，…...
MySQL练习题
参考：https://blog.csdn.net/paul0127/article/details/82529216 数据表介绍 --1.学生表 Student(SId,Sname,Sage,Ssex) --SId 学生编号,Sname 学生姓名,Sage 出生年月,Ssex 学生性别 --2.课程表 Course(CId,Cname,TId) --CId 课程编号,Cname 课程名称,TId 教师编号…...
vue-项目打包、配置路由懒加载
1. 简介 在现代前端开发中，Vue.js因其简洁、灵活和高效的特点，已经成为许多开发者的首选框架。 在Vue项目中，打包部署和路由懒加载是两个非常重要的环节。 打包Vue项目是为了将源代码转换为浏览器可以解析的JavaScript文件，以便…...
词语的魔力：语言在我们生活中的艺术与影响
Words That Move Mountains: The Art and Impact of Language in Our Lives 词语的魔力：语言在我们生活中的艺术与影响 Hello there, wonderful people! Today, I’d like to gab about the magical essence of language that’s more than just a chatty tool in o…...
android List,Set,Map区别和介绍
List 元素存放有序，元素可重复 1.LinkedList 链表，插入删除，非线性安全，插入和删除操作是双向链表操作，增加删除快，查找慢 add(E e)//添加元素 addFirst(E e)//向集合头部添加元素 addList(E e)//向集合…...
Mysql 编译安装部署
Mysql 编译安装部署 环境： 172.20.26.198（Centos7.6） 源码安装Mysql-5.7 大概步骤如下： 1、上传mysql-5.7.28.tar.gz 、boost_1_59_0.tar 到/usr/src 目录下 2、安装依赖 3、cmake 4、make && make install 5、…...
【目标检测】YOLOv5算法实现(九)：模型预测
本系列文章记录本人硕士阶段YOLO系列目标检测算法自学及其代码实现的过程。其中算法具体实现借鉴于ultralytics YOLO源码Github，删减了源码中部分内容，满足个人科研需求。 本系列文章主要以YOLOv5为例完成算法的实现，后续修改、增加相关模…...
centos宝塔远程服务器怎么链接?
要远程连接CentOS宝塔服务器，可以按照以下步骤操作： 打开终端或远程连接工具，比如PuTTY。输入服务器的IP地址和SSH端口号（默认为22），点击连接。输入用户名和密码进行登录。 如果你已经安装了宝塔面板&…...
C语言练习day8
变种水仙花 变种水仙花_牛客题霸_牛客网 题目： 思路：我们拿到题目的第一步可以先看一看题目给的例子，1461这个数被从中间拆成了两部分：1和461，14和61，146和1，不知道看到这大家有没有觉得很熟…...
Linux应用开发之网络套接字编程(实例篇)
服务端与客户端单连接 服务端代码 #include <sys/socket.h> #include <sys/types.h> #include <netinet/in.h> #include <stdio.h> #include <stdlib.h> #include <string.h> #include <arpa/inet.h> #include <pthread.h> …...
XCTF-web-easyupload
试了试php，php7，pht，phtml等，都没有用 尝试.user.ini 抓包修改将.user.ini修改为jpg图片 在上传一个123.jpg 用蚁剑连接，得到flag...
利用ngx_stream_return_module构建简易 TCP/UDP 响应网关
一、模块概述 ngx_stream_return_module 提供了一个极简的指令： return <value>;在收到客户端连接后，立即将 <value> 写回并关闭连接。<value> 支持内嵌文本和内置变量（如 $time_iso8601、$remote_addr 等）&a…...
K8S认证|CKS题库+答案| 11. AppArmor
目录 11. AppArmor 免费获取并激活 CKA_v1.31_模拟系统 题目 开始操作： 1）、切换集群 2）、切换节点 3）、切换到 apparmor 的目录 4）、执行 apparmor 策略模块 5）、修改 pod 文件 6）、…...
【Oracle APEX开发小技巧12】
有如下需求： 有一个问题反馈页面，要实现在apex页面展示能直观看到反馈时间超过7天未处理的数据，方便管理员及时处理反馈。 我的方法：直接将逻辑写在SQL中，这样可以直接在页面展示 完整代码： SELECTSF.FE…...
CentOS下的分布式内存计算Spark环境部署
一、Spark 核心架构与应用场景 1.1 分布式计算引擎的核心优势 Spark 是基于内存的分布式计算框架，相比 MapReduce 具有以下核心优势： 内存计算：数据可常驻内存，迭代计算性能提升 10-100 倍（文档段落：3-79…...
大数据学习（132）-HIve数据分析
🍋🍋大数据学习🍋🍋 🔥系列专栏： 👑哲学语录: 用力所能及，改变世界。 💖如果觉得博主的文章还不错的话，请点赞👍收藏⭐️留言Ǵ…...
【电力电子】基于STM32F103C8T6单片机双极性SPWM逆变（硬件篇）
本项目是基于 STM32F103C8T6 微控制器的 SPWM（正弦脉宽调制）电源模块，能够生成可调频率和幅值的正弦波交流电源输出。该项目适用于逆变器、UPS电源、变频器等应用场景。 供电电源 输入电压采集 上图为本设计的电源电路，图中 D1 为二极管， 其目的是防止正负极电源反接， …...
Kafka入门-生产者
生产者 生产者发送流程： 延迟时间为0ms时，也就意味着每当有数据就会直接发送 异步发送API 异步发送和同步发送的不同在于：异步发送不需要等待结果，同步发送必须等待结果才能进行下一步发送。 普通异步发送 首先导入所需的k…...
LLMs 系列实操科普（1）
写在前面： 本期内容我们继续 Andrej Karpathy 的《How I use LLMs》讲座内容，原视频时长 ~130 分钟，以实操演示主流的一些 LLMs 的使用，由于涉及到实操，实际上并不适合以文字整理，但还是决定尽量整理一份笔…...