当前位置： 首页 > news >正文

Flink 第1章 基础介绍和特性

news 2026/3/29 15:25:21

一 Flink概念

1.1 Flink的概念

Flink是一个框架和分布式处理引擎，用于对无界和有解数据流进行状态计算。如下图所示：

1.2 Flink的应用场景

 1.3 Flink的目标

1.高吞吐量  2.低延迟  3，结果的准确性和良好的容错性。

1.4 Flink与spark的区别联系

Spark 和 Flink 可以说目前是各擅胜场，批处理领 域 Spark 称王，而在流处理方面 Flink 当仁不让。
1.数据模型上，sprak采用RDD模型，spark streaming的Dstream实际上就是一组组小批数据RDD的集合。
2.flink的基本数据类型是数据流。
工作中需要从 Spark 和 Flink 这两个主流框架中选择一个来进行实时流处理，我们
更加推荐使用 Flink，主要的原因有：
⚫ Flink 的延迟是毫秒级别，而 Spark Streaming 的延迟是秒级延迟。
⚫ Flink 提供了严格的精确一次性语义保证。
⚫ Flink 的窗口 API 更加灵活、语义更丰富。
⚫ Flink 提供事件时间语义，可以正确处理延迟数据。
⚫ Flink 提供了更加灵活的对状态编程的 API

相关文章：

Flink 第1章 基础介绍和特性

一 Flink概念 1.1 Flink的概念 Flink是一个框架和分布式处理引擎，用于对无界和有解数据流进行状态计算。如下图所示： 1.2 Flink的应用场景 1.3 Flink的目标 1.高吞吐量 2.低延迟 3，结果的准确性和良好的容错性。 1.4 Flink与spark的区别…...

编程日记 2023/3/23 13:47:13

docker 安装 nginx无坑版

一. 拉取镜像 docker pull nginx二. 创建挂载目录 mkdir -p /usr/local/nginx/conf mkdir -p /usr/local/nginx/log mkdir -p /usr/local/nginx/html三. 从nginx容器里复制nginx的配置文件到主机里 创建个容器 docker run --name nginx -p 80:80 -d nginx将容器内的配置文件…...

编程日记 2023/3/23 13:42:11

自己动手做chatGPT：向量的概念和相关操作

chatGPT的横空出世给人工智能注入一针强心剂，它是历史上以最短时间达到一亿用户的应用。chatGPT的能力相当惊人，它可以用相当流利的语言和人对话，同时能够对用户提出的问题给出相当顺畅的答案。它的出现已经给各个行业带来不小冲击&#xff0…...

编程日记 2023/3/23 13:37:09

【洛谷刷题】蓝桥杯专题突破-深度优先搜索-dfs（7）

目录 写在前面： 题目：P1596 [USACO10OCT]Lake Counting S - 洛谷 | 计算机科学教育新生态 (luogu.com.cn) 题目描述： 输入格式： 输出格式： 输入样例： 输出样例： 解题思路： …...

编程日记 2023/4/13 4:43:16

Python嵌套函数（Nested function）和闭包（closure）

Python嵌套函数（Nested function）和闭包（closure） 闭包（closure）是建立在嵌套函数基础上的，是一种特殊的嵌套函数结构。 先看嵌套函数（Nested function）。 Python允许…...

编程日记 2023/3/23 13:27:05

【实战】React 必会第三方插件 —— Cron 表达式生成器（qnn-react-cron）

文章目录一、引子二、配置使用1.安装2.使用（1）直接调用（2）赋值到表单（Form）（3）自定义功能按钮（4）隐藏指定 Tab（5）其他三、常见问题及解…...

编程日记 2023/4/12 16:16:20

C# 教你如何终止Task线程

我们在多线程中通常使用一个bool IsExit类似的代码来控制是否线程的运行与终止，其实使用CancellationTokenSource来进行控制更为好用，下面我们将介绍CancellationTokenSource相关用法。C# 使用 CancellationTokenSource 终止线程使用CancellationTokenSo…...

编程日记 2023/3/23 13:17:00

整合SpringCache

整合SpringCache 1、引入依赖cache还有redis <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-cache</artifactId> </dependency>2、写配置 spring:cache:type: redis3、测试使用缓存 Cache…...

编程日记 2023/3/23 13:11:57

05 - 环境变量编程

---- 整理自狄泰软件唐佐林老师课程 查看所有文章链接&#xff1a;&#xff08;更新中&#xff09;Linux系统编程训练营 - 目录 文章目录1. 初识环境变量1.1 问题1.2 main函数&#xff08;默认进程入口&#xff09;1.3 什么是环境变量&#xff1f;1.4 环境表的构成1.5 思考2. 深…...

编程日记 2023/4/12 16:17:11

vue3后台管理系统

后面可参考下&#xff1a;vue系列&#xff08;三&#xff09;——手把手教你搭建一个vue3管理后台基础模板 以下代码项目gitee地址 文章目录1. 初始化前端项目初始化项目添加加载效果配置 vite.config.js2. 使用路由安装路由配置路由配置别名和跳转安装pathvite.config.jsjsco…...

编程日记 2023/3/23 13:01:51

掷骰子式的乐趣：探究C语言生成随机数的奥秘

掷骰子式的乐趣&#xff1a;探究C语言生成随机数的奥秘一、引言二、C标准库的rand函数三、srand函数的使用四、基于时间的种子生成五、高质量随机数的应用一、引言 C语言中生成随机数是一项非常重要的功能&#xff0c;因为许多现代应用程序需要使用随机数。随机数可以用于密码…...

编程日记 2023/4/12 6:44:16

一线大厂软件测试常见面试题1500问，背完直接拿捏面试官，

三、测试理论 3.1 你们原来项目的测试流程是怎么样的? 我们的测试流程主要有三个阶段&#xff1a;需求了解分析、测试准备、测试执行。 1、需求了解分析阶段 我们的SE会把需求文档给我们自己先去了解一到两天这样&#xff0c;之后我们会有一个需求澄清会议&#xff0c; 我…...

编程日记 2023/3/23 12:51:47

小迪安全day12WEB漏洞-SQL注入之简要SQL注入

小迪安全day12WEB漏洞-SQL注入之简要SQL注入 注入产生原理详细分析 可控变量带入数据库查询变量未存在过滤或过滤不严谨 连接符区分 and是sql语句连接符&#xff0c;&是uel参数连接符 and 11是注入语句&#xff0c; &是添加一个新变量 数据库内容 数据库A 网站…...

编程日记 2023/4/12 16:20:10

自动化测试学习（七）-正则表达式，你真的会用吗？

目录 一、正则表达式在python中如何使用 二、用正则表达式匹配更多模式 三、常用字符分类的缩写代码 总结 所谓正则表达式&#xff08;regex&#xff09;&#xff0c;就是一种模式匹配&#xff0c;学会用正则匹配&#xff0c;就可以达到事半功倍的效果。 一、正则表达式在…...

编程日记 2023/3/23 12:41:43

验证码——vue中后端返回的图片流如何显示

目录 前言 一、p调用接口获取验证码 canvas画布渲染&#xff1f; 二、后端返回图片&#xff08;图片流&#xff09;&#xff0c;前端显示 1.blob 2.arraybuffer 总结 前言 登录界面经常会有验证码&#xff0c;验证码的实现方式也有很多&#xff0c;我目前做过以下两种&…...

编程日记 2023/3/23 12:36:40

聚观早报 | 拼多多驳斥Google的指控；80%美国人工作将被AI影响

今日要闻&#xff1a;拼多多驳斥Google“恶意软件”的指控&#xff1b;80%美国人工作将被AI影响&#xff1b;iPhone 15 Pro设计图上热搜&#xff1b;贾扬清离职阿里投身AI大模型创业&#xff1b;OPPO Find X6 系列发布拼多多驳斥Google“恶意软件”的指控 3 月 21 日&#xff0…...

编程日记 2023/3/23 12:31:38

define，typedef，inline 的区别

define 1.用于在代码中创建宏定义&#xff0c;将一个标识符替换为一个表达式或语句。例如&#xff1a; #define PI 3.14159 #define SQUARE(x) ((x) * (x))这样&#xff0c;程序中所有出现的 PI 都将被替换为 3.14159&#xff0c;SQUARE(x) 则被替换成了 (x) * (x)。 使用 #…...

编程日记 2023/4/12 16:21:38

百度文心一言正式亮相

OpenAI 刚发布了 GPT-4&#xff0c;百度预热已久的人工智能生成式对话产品也终于亮相了。昨天下午&#xff0c;文心一言 (ERNIE Bot)—— 百度全新一代知识增强大语言模型、文心大模型家族的新成员&#xff0c;正式在百度总部 “挥手点江山” 会议室里发布。 发布会一开场&…...

编程日记 2023/3/23 12:21:30

使用Android架构模板

使用Android架构模板 项目介绍 为了方便开发者引入最新的Android架构组建进行开发&#xff0c;Google官方给我们引入了一个架构模板&#xff0c;方便我们快速进入开发。 github地址&#xff1a; https://github.com/android/architecture-templates 该模板遵循官方架构指南 …...

编程日记 2023/4/13 4:45:35

2023年天津市逆向re2.exe解析-比较难（超详细）

2023年天津市逆向re2.exe解析（较难） 1.拖进IDA里进行分析2.动态调试3.编写EXP脚本获取FLAG4.获得FLAG1.拖进IDA里进行分析 进入主程序查看伪代码 发现一个循环，根据行为初步判定为遍历输入的字符并对其ascii^7进行加密 初步判断sub_1400ab4ec为比较输入和flag的函数 跟进u…...

编程日记 2023/3/23 12:11:26

AI芯片算力揭秘：从INT8到FP16，如何正确理解不同精度的TOPS值？

AI芯片算力揭秘&#xff1a;从INT8到FP16&#xff0c;如何正确理解不同精度的TOPS值&#xff1f; 当你在选购AI加速卡时&#xff0c;是否曾被厂商宣传的"200TOPS算力"搞得晕头转向&#xff1f;作为在边缘计算部署过数十个模型的工程师&#xff0c;我必须告诉你一个残…...

编程新知 2026/3/29 15:13:53

从机械臂精度控制到模型防过拟合：工程师视角下的‘无穷范数’实用指南

从机械臂精度控制到模型防过拟合&#xff1a;工程师视角下的‘无穷范数’实用指南 在工业自动化和机器学习领域&#xff0c;工程师们常常面临一个共同挑战&#xff1a;如何有效控制系统中的"最坏情况"。无论是机械臂关节的极限误差&#xff0c;还是神经网络对抗样本…...

编程新知 2026/3/29 14:21:30

从固定到自适应：手把手教你改进Savitzky-Golay滤波器，告别边界效应和参数调优烦恼

从固定到自适应&#xff1a;手把手教你改进Savitzky-Golay滤波器&#xff0c;告别边界效应和参数调优烦恼 信号处理领域的从业者常常面临一个两难选择&#xff1a;如何在去除噪声的同时&#xff0c;尽可能保留信号的关键特征&#xff1f;传统Savitzky-Golay滤波器虽然在一定程度…...

编程新知 2026/3/29 14:19:29

避坑指南：解决多Livox雷达在ROS中TF树报错‘extrapolation into the past’的完整流程

避坑指南&#xff1a;解决多Livox雷达在ROS中TF树报错‘extrapolation into the past’的完整流程 当你在ROS系统中整合多个Livox雷达时&#xff0c;突然遭遇[WARN] Lookup would require extrapolation into the past的警告信息&#xff0c;Rviz中点云显示异常或TF树断裂&…...

编程新知 2026/3/29 12:56:18

OpenClaw深度沟通渠道-全景深度解构

OpenClaw深度沟通渠道-全景深度解构OpenClaw的渠道&#xff08;Channels&#xff09;是其“交互层”的核心&#xff0c;是用户意图与AI执行力的唯一交汇点。选择渠道&#xff0c;就是选择将AI能力注入您数字生活的哪个场景。以下分析将超越简单列表&#xff0c;深入每个渠道的技…...

编程新知 2026/3/29 11:39:29

Transformer搞超分，别再只堆模块了！从TTSR到VSRT，聊聊那些被忽视的局部对齐与轻量化设计

Transformer在超分辨率重建中的创新设计&#xff1a;超越模块堆叠的局部对齐与轻量化实践 当Transformer架构从自然语言处理领域席卷计算机视觉任务时&#xff0c;超分辨率重建(SR)领域也迎来了新一轮的技术革新。然而&#xff0c;许多研究陷入了一个误区——简单地将Transform…...

编程新知 2026/3/29 11:19:18

GetQzonehistory：终极QQ空间说说备份完整指南

GetQzonehistory&#xff1a;终极QQ空间说说备份完整指南 【免费下载链接】GetQzonehistory 获取QQ空间发布的历史说说 项目地址: https://gitcode.com/GitHub_Trending/ge/GetQzonehistory 在数字记忆时代&#xff0c;QQ空间承载了无数人的青春回忆。那些年发的说说、分…...

编程新知 2026/3/29 6:55:17

AI净界-RMBG-1.4企业落地：制造业产品手册高清图自动透明化处理

AI净界-RMBG-1.4企业落地&#xff1a;制造业产品手册高清图自动透明化处理 1. 引言&#xff1a;从“手动抠图”到“一键透明”的制造业痛点 在制造业&#xff0c;产品手册、宣传图册、官网详情页是展示企业实力的重要窗口。一张清晰、专业、背景干净的产品图&#xff0c;往往…...

编程新知 2026/3/29 6:40:45

FigmaCN：消除语言壁垒的中文界面本地化解决方案

FigmaCN&#xff1a;消除语言壁垒的中文界面本地化解决方案 【免费下载链接】figmaCN 中文 Figma 插件&#xff0c;设计师人工翻译校验 项目地址: https://gitcode.com/gh_mirrors/fi/figmaCN FigmaCN是一款专为中文设计师打造的浏览器插件&#xff0c;通过3800条人工校…...

编程新知 2026/3/29 5:21:58

OpenClaw+GLM-4.7-Flash：自动化测试脚本生成器

OpenClawGLM-4.7-Flash&#xff1a;自动化测试脚本生成器 1. 为什么需要自动化测试脚本生成 作为一名长期奋战在一线的开发者&#xff0c;我深知测试环节的重要性与繁琐程度。每当项目进入测试阶段&#xff0c;编写测试用例和脚本往往要占据整个开发周期的30%-40%时间。更令人头…...

编程新知 2026/3/29 4:43:23