当前位置： 首页 > news >正文

大数据flink篇之三-flink运行环境安装（一）单机Standalone安装

news 2026/2/9 14:20:50

一、安装包下载地址
https://archive.apache.org/dist/flink/flink-1.15.0/
在这里插入图片描述
二、安装配置流程
前提基础：Centos环境（建议7以上）
安装命令：
解压：tar -zxvf flink-xxxx.tar.gz
修改配置conf/flink-conf.yaml：
jobmanager.rpc.address: 192.168.47.131-主机地址
jobmanager.rpc.port: 6123
taskmanager.numberOfTaskSlots: 4
rest.port: 8081
配置类参数
在这里插入图片描述
**部分配置解析如下：
jobmanager.rpc.address: localhost-主机名
jobmanager.rpc.port: 6123-主机通信端口号
jobmanager.heap.size: 1024m-jvm 堆内存
taskmanager.memory.process.size: 1728m-当前 taskmanager 进程的堆内和堆外内存等（与 flink.size 相比，多了一些不在flink 状态管理的堆外内存）
taskmanager.numberOfTaskSlots: 1-静态分配属性资源
parallelism.default: 1-运行时的并行度，默认

启动flink:
./bin/start-cluster.sh
启动的进程为：
在这里插入图片描述
三、Web界面
安装成功后会显示如下界面：
在这里插入图片描述
后续会补充集群版本及在yarn和k8s环境下的部署。
注：如果在虚拟机上安装，需要开放相关端口
firewall-cmd --zone=public --permanent --add-port=8081/tcp：开启端口8081
firewall-cmd --reload：重载防火墙

相关文章：

大数据flink篇之三-flink运行环境安装（一）单机Standalone安装

一、安装包下载地址 https://archive.apache.org/dist/flink/flink-1.15.0/ 二、安装配置流程 前提基础：Centos环境（建议7以上） 安装命令： 解压：tar -zxvf flink-xxxx.tar.gz 修改配置conf/flink-conf.yaml&#xff1…...

编程日记 2023/10/16 3:12:59

Redisson使用延时队列

延时队列 在开发中，有时需要使用延时队列。 比如，订单15分钟内未支付自动取消。 jdk延时队列 如果使用 jdk自带的延时队列，那么服务器挂了或者重启时，延时队列里的数据就会失效，可用性比较差。 Redisson延时队列 …...

编程日记 2023/10/16 3:11:58

基于php 进行每半小时钉钉预警

前言 业务场景：监控当前业务当出现并发情况时技术人员可以可以及时处理 使用技术栈： laravelredis 半小时触发一次报警信息实现思路 1、xshell脚本 具体参数就不详细解释了，想要详细了解可以自行百度 curl -H "Content-Type:appl…...

编程日记 2023/10/16 3:08:55

5.Python-使用XMLHttpRequest对象来发送Ajax请求

题记 使用XMLHttpRequest对象来发送Ajax请求，以下是一个简单的实例和操作过程。 安装flask模块 pip install flask 安装mysql.connector模块 pip install mysql-connector-python 编写app.py文件 app.py文件如下： from flask import Flask, reque…...

编程日记 2023/10/16 3:06:53

八皇后问题的解析与实现

问题描述 八皇后问题是一个古老而又著名的问题。 时间退回到1848年，国际西洋棋棋手马克斯贝瑟尔提出了这样的一个问题： 在88格的国际象棋上摆放八个皇后，使其不能互相攻击，即任意两个皇后都不能处于同一行、同一列或同一斜线上，问一共有多少种摆法。 如何找到这所有的…...

编程日记 2023/10/16 3:04:50

论文浅尝 | 深度神经网络的模型压缩

笔记整理：闵德海，东南大学硕士，研究方向为知识图谱 链接：https://arxiv.org/abs/1412.6550 动机 提高神经网络的深度通常可以提高网络性能，但它也使基于梯度的训练更加困难，因为更深的网络往往更加强的非线…...

编程日记 2023/10/16 3:03:49

进阶JAVA篇- DateTimeFormatter 类与 Period 类、Duration类的常用API（八）

目录 1.0 DateTimeFormatter 类的说明 1.1 如何创建格式化器的对象呢？ 1.2 DateTimeFormatter 类中的 format（LocalDateTime ldt） 实例方法 2.0 Period 类的说明 2.1 Period 类中的 between(localDate1,localDate2) 静态方法来创建对象。 3.…...

编程日记 2023/10/16 3:02:47

1.1 Windows驱动开发：配置驱动开发环境

在进行驱动开发之前，您需要先安装适当的开发环境和工具。首先，您需要安装Windows驱动开发工具包（WDK），这是一组驱动开发所需的工具、库、示例和文档。然后，您需要安装Visual Studio开发环境，以便…...

编程日记 2023/10/16 3:01:47

Jetpack：009-kotlin中的lambda、匿名函数和闭包

文章目录 1. 概念介绍2. 使用方法2.1 函数类型的变量2.2 高阶函数 3. 内容总结4.经验分享 我们在上一章回中介绍了Jetpack中Icon和Imamg相关的内容，本章回中主要介绍Kotlin中的 lambda、匿名函数和闭包。闲话休提，让我们一起Talk Android Jetpack吧&…...

编程日记 2023/10/16 3:00:46

openGauss指定schema下全部表结构备份与恢复

本次测试针对openGauss版本为2.0.5 gs_dump指定schema下全部表结构信息备份 gs_dump database_name -U username -p port -F c -s -n schema_name -f schema.sqldatabase_name：数据库名，要备份的数据库名称 username：用户名，数据…...

编程日记 2023/10/16 2:59:45

干货：如何在前端统计用户访问来源？

在前端统计用户访问来源是一个常见的需求，通过获取访问来源信息，我们可以了解用户是通过直接访问、搜索引擎、外部链接等途径进入我们的网站或应用。下面是一个详细的介绍，包括方法和实现步骤。 一、获取HTTP Referer HTTP Referer是HTTP请…...

编程日记 2023/10/16 2:57:43

李宏毅生成式AI课程笔记（持续更新

01 ChatGPT在做的事情 02 预训练（Pre-train） ChatGPT G-Generative P-Pre-trained T-Transformer GPT3 ----> InstructGPT（经过预训练的GPT3） 生成式学习的两种策略 我们在使用ChatGPT的时候会注意到，网站上…...

编程日记 2023/10/16 2:56:42

nodejs+vue+elementui酒店客房服务系统mysql带商家

视图层其实质就是vue页面，通过编写vue页面从而展示在浏览器中，编写完成的vue页面要能够和控制器类进行交互，从而使得用户在点击网页进行操作时能够正常。 简单的说 Node.js 就是运行在服务端的 JavaScript。 前端技术：nodejsvueel…...

编程日记 2023/10/16 2:54:38

【网络协议】聊聊网络分层

常用的网络协议 首先我们输入www.taobao.com，会先经过DNS进行域名解析，转换为59.82.122.115的公网IP地址。然后就会发起请求，一般来说非加密的使用http，加密的使用https。上面是在应用层做的处理，那么接下来就是到传输…...

编程日记 2023/10/16 2:52:36

[开源]基于Vue+ElementUI+G2Plot+Echarts的仪表盘设计器

一、开源项目简介 基于SpringBoot、MyBatisPlus、ElementUI、G2Plot、Echarts等技术栈的仪表盘设计器，具备仪表盘目录管理、仪表盘设计、仪表盘预览能力，支持MySQL、Oracle、PostgreSQL、MSSQL、JSON等数据集接入，对于复杂数据处理还可以使用…...

编程日记 2023/10/16 2:51:35

html设置前端加载动画

主体思路参考： 前端实现页面加载动画_边城仔的博客-CSDN博客 JS图片显示与隐藏案例_js控制图片显示隐藏-CSDN博客 1、编写load.css /* 显示加载场景 */ .loadBackGround{position: absolute;top: 0px;text-align: center;width: 100%;height: 100vh;background-c…...

编程日记 2023/10/16 2:50:34

【git的使用方法】——上传文件到gitlab仓库

先进入到你克隆下来的仓库的目录里面 比如：我的仓库名字为zhuox 然后将需要上传推送的文件拷贝到你的克隆仓库下 这里的话我需要拷贝的项目是t3 输入命令ls，就可以查看该文件目录下的所有文件信息 然后输入git add 文件名 我这边输入的是 &#x…...

编程日记 2023/10/16 2:49:33

Kafka 开启SASL/SCRAM认证 及 ACL授权（二）ACL

Kafka 开启SASL/SCRAM认证 及 ACL授权（二）ACL。 官网地址：https://kafka.apache.org/ kafka authentorization：https://docs.confluent.io/platform/current/kafka/authorization.html 一、开启ZK ACL（可选，内网环境，用户无机器访问权限时） 给kafka meta都加上zk的ac…...

编程日记 2023/10/16 2:48:32

Java8 新特性之Stream（三）-- Stream的终结操作

目录 1.forEach(Consumer) 2.reduce(BinaryOperator) 3.max([Comparator]) 4.min([Comparator]) 5.count() 6.findFirst() 7.findAny() 拓展：...

编程日记 2023/10/16 2:46:29

【Vue面试题二十八】、vue要做权限管理该怎么做？如果控制到按钮级别的权限怎么做？

文章底部有个人公众号：热爱技术的小郑。主要分享开发知识、学习资料、毕业设计指导等。有兴趣的可以关注一下。为何分享？ 踩过的坑没必要让别人在再踩，自己复盘也能加深记忆。利己利人、所谓双赢。 面试官：vue要做权限管理该怎么做…...

编程日记 2023/10/16 2:45:27

反向工程与模型迁移：打造未来商品详情API的可持续创新体系

在电商行业蓬勃发展的当下，商品详情API作为连接电商平台与开发者、商家及用户的关键纽带，其重要性日益凸显。传统商品详情API主要聚焦于商品基本信息（如名称、价格、库存等）的获取与展示，已难以满足市场对个性化、智能…...

编程新知 2025/9/15 5:56:53

MySQL 隔离级别：脏读、幻读及不可重复读的原理与示例

一、MySQL 隔离级别 MySQL 提供了四种隔离级别，用于控制事务之间的并发访问以及数据的可见性，不同隔离级别对脏读、幻读、不可重复读这几种并发数据问题有着不同的处理方式，具体如下： 隔离级别脏读不可重复读幻读性能特点及锁机制读未提交（READ UNCOMMITTED）允许出现允许…...

编程新知 2025/9/16 21:01:58

Python爬虫实战：研究feedparser库相关技术

1. 引言 1.1 研究背景与意义 在当今信息爆炸的时代，互联网上存在着海量的信息资源。RSS（Really Simple Syndication）作为一种标准化的信息聚合技术，被广泛用于网站内容的发布和订阅。通过 RSS，用户可以方便地获取网站更新的内容，而无需频繁访问各个网站。 然而，互联网…...

编程新知 2025/8/18 9:54:31

[10-3]软件I2C读写MPU6050 江协科技学习笔记（16个知识点）

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16...

编程新知 2026/1/28 8:34:48

IoT/HCIP实验-3/LiteOS操作系统内核实验(任务、内存、信号量、CMSIS..)

文章目录 概述HelloWorld 工程C/C配置编译器主配置Makefile脚本烧录器主配置运行结果程序调用栈 任务管理实验实验结果osal 系统适配层osal_task_create 其他实验实验源码内存管理实验互斥锁实验信号量实验 CMISIS接口实验还是得JlINKCMSIS 简介LiteOS->CMSIS任务间消息交互…...

编程新知 2026/1/31 23:44:39

多种风格导航菜单 HTML 实现（附源码）

下面我将为您展示 6 种不同风格的导航菜单实现&#xff0c;每种都包含完整 HTML、CSS 和 JavaScript 代码。 1. 简约水平导航栏 <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta name"viewport&qu…...

编程新知 2026/2/2 2:49:11

【Go语言基础【13】】函数、闭包、方法

文章目录 零、概述一、函数基础1、函数基础概念2、参数传递机制3、返回值特性3.1. 多返回值3.2. 命名返回值3.3. 错误处理 二、函数类型与高阶函数1. 函数类型定义2. 高阶函数&#xff08;函数作为参数、返回值&#xff09; 三、匿名函数与闭包1. 匿名函数&#xff08;Lambda函…...

编程新知 2025/12/8 19:02:25

JVM 内存结构 详解

内存结构 运行时数据区&#xff1a; Java虚拟机在运行Java程序过程中管理的内存区域。 程序计数器&#xff1a; ​ 线程私有&#xff0c;程序控制流的指示器&#xff0c;分支、循环、跳转、异常处理、线程恢复等基础功能都依赖这个计数器完成。 ​ 每个线程都有一个程序计数…...

编程新知 2026/2/6 3:24:58

Linux 中如何提取压缩文件 ？

Linux 是一种流行的开源操作系统&#xff0c;它提供了许多工具来管理、压缩和解压缩文件。压缩文件有助于节省存储空间&#xff0c;使数据传输更快。本指南将向您展示如何在 Linux 中提取不同类型的压缩文件。 1. Unpacking ZIP Files ZIP 文件是非常常见的&#xff0c;要在 …...

编程新知 2026/2/1 5:38:25

mac 安装homebrew (nvm 及git)

mac 安装nvm 及git 万恶之源 mac 安装这些东西离不开Xcode。及homebrew 一、先说安装git步骤 通用&#xff1a; 方法一&#xff1a;使用 Homebrew 安装 Git&#xff08;推荐&#xff09; 步骤如下&#xff1a;打开终端&#xff08;Terminal.app&#xff09; 1.安装 Homebrew…...

编程新知 2026/1/30 4:58:21