当前位置: 首页 > article >正文

StarRocks Community Monthly Newsletter (Mar)


版本动态

3.4.1 版本更新

核心功能升级

  1. 数据安全与权限管控

    • 支持「安全视图」功能,严格管控视图查询权限

    • MySQL协议连接支持SSL认证,保障数据传输安全

  2. 存算分离架构增强

    1. 支持自动创建Snapshot(集群恢复更便捷)

    2. Storage Volume新增Azure Data Lake Gen2支持

  3. 分析能力优化

    1. 湖分析支持Delta Lake Deletion Vector

    2. 支持高精度去重函数Sketch HLL(精度优于approx_count_distinct)

性能与稳定性提升

  • 写入优化:多数副本提交成功即可完成事务(原需全部副本)

🔎Release Note: https://docs.mirrorship.cn/zh/releasenotes/release-3.4/

3.3.11 版本更新

核心功能升级

  1. 存算分离架构增强

    1. 提升存算分离集群中云原生表Data Cache预热性能

  2. 分析能力优化

    1. 窗口函数扩展max_by/min_by支持

性能与稳定性提升

  • 查询加速:

    • 基于ARM架构的性能提升

  • 资源管控:

    • 存算分离集群中主键表的部分列更新支持条件更新

    • 统计信息收集优先级策略优化

  • 查询加速:

    • 消除非必要unnest计算

    • 物化视图分区刷新策略改进(避免全表重刷)

🔎Release Note:https://docs.mirrorship.cn/zh/releasenotes/release-3.3/

下载:https://www.mirrorship.cn/zh-CN/download/starrocks

StarRocks 应用

StarRocks 表属性扫描工具

集群内表指标可视化

贡献者:夏天

  • 项目亮点:

    • 一键全景查看:快速获取库名、表名、模型类型等核心元数据

    • 智能存储分析:精准统计数据量、分区分布(含空分区识别)、容量指标(MB/单位)

    • 健康度评估:实时监控副本均衡度(标准差)、分片/分桶分布状态

    • 差异对比:提供总副本数平均差等关键运维指标

  • 项目介绍:https://forum.mirrorship.cn/t/topic/17913

  • 项目地址:https://github.com/chengkenli/healthyreport

文档动态

  • 【数据湖】:新增文档 Iceberg 元数据表。

  • 【查询加速】:新增文档 查看运行中的查询。

  • 【常见问题】:新增文档 FE 堆内存故障排查。

  • 【管理手册】

    • 新增文档 集群快照。

    • 新增/优化部分 FE/BE 配置项 描述。

  • 【参考手册】

    • 新增 JSON Array 处理文档。

    • 优化部分 SQL 及函数参考文档的示例。

本月精选内容

文章精选

StarRocks 存算分离在京东物流的落地实践

vivo 湖仓架构的性能提升之旅

StarRocks + Paimon 在阿里集团 Lakehouse 的探索与实践

微信基于 StarRocks 的实时因果推断实践

韩国互联网巨头 NAVER 如何借助 StarRocks 实现实时数据洞察?

深度剖析 StarRocks 读取 ORC 加密文件背后的技术

StarRocks资源组:实现高效资源隔离与利用的关键机制

StarRocks数据导入技术全解析

StarRocks 升级注意事项

StarRocks问题复盘 Clone RUNTIME_ERROR 

Starrocks Clone 问题修复

本月精选活动

StarRocks 受邀亮相卡内基梅隆大学--SQL or Death?研讨会

3月31日,StarRocks 受邀“SQL or Death?”研讨会,特别感谢 Andy Pavlo 教授的邀请和组织,让我们有机会在这一重量级平台上,与全球数据库专家交流,并分享 StarRocks 在查询优化方面的实践与思考。

在本次演讲中,StarRocks TSC Member 、查询团队的技术负责人康凯森,将深入解析 StarRocks 优化器的核心优化策略和关键设计选择

📺 视频回放:https://www.youtube.com/watch?v=hzMOXfTkg-4

StarRocks Singapore Meetup #2 @Shopee

3 月 13 日,StarRocks 社区在新加坡成功举办了第二场 Meetup 活动,主题为“Empowering Customer-Facing Analytics”。本次活动在 Shopee 新加坡办公室举行,吸引了来自 ShopeeGrab Pinterest 的专家讲师以及 50 多位参会者。大家围绕电商、BI 报表和广告场景中的数据分析挑战展开了深入探讨,并分享了如何利用 StarRocks 为关键业务提供更快、更精准的数据分析解决方案。

⏬PPT下载:https://forum.mirrorship.cn/t/topic/18005

📺视频回放:https://space.bilibili.com/1273141509/lists/3059098?type=season

本月新晋 Committer

本月新晋 Contributor

感谢新朋友们为 StarRocks 社区注入活力!期待你们继续闪耀光芒,与社区共同成长,创造更多精彩!✨🚀

加入 StarRocks 社区!

GitHub:https://github.com/StarRocks/starrocks

中文社区官网:https://www.mirrorship.cn/zh-CN/community

相关文章:

StarRocks Community Monthly Newsletter (Mar)

版本动态 3.4.1 版本更新 核心功能升级 数据安全与权限管控 支持「安全视图」功能,严格管控视图查询权限 MySQL协议连接支持SSL认证,保障数据传输安全 存算分离架构增强 支持自动创建Snapshot(集群恢复更便捷) Storage Volu…...

Github 2FA(Two-Factor Authentication/两因素认证)

Github 2FA认证 多因素用户认证(Multi-Factor Authentication),基本上各个大互联网平台,尤其是云平台厂商(如:阿里云的MFA、华为云、腾讯云/QQ安全中心等)都有启用了,Github算是搞得比较晚些了。 双因素身…...

动态规划 -- 简单多状态dp,打家劫舍问题

1 按摩师 面试题 17.16. 按摩师 - 力扣(LeetCode) 本题的意思简单理解就是,如果我们接受了第 i 个预约,那么第 i -1 个预约和第 i1 个预约我们都是无法接受的,只能至少间隔一个选择。 按照以前的经验,我们…...

list的模拟实现和反向迭代器的底层

1&#xff1a;list的模拟实现 1&#xff1a;链表的节点 对于list的模拟实现&#xff0c;我们需要先定义一个节点的类可以使用&#xff08;class也可以使用struct&#xff09; // List的节点类 template<class T> struct ListNode {ListNode(const T& val T()){_p…...

C++学习之游戏服务器开发⑤AOI业务逻辑

目录 1.项目进度回顾 2.完善整体架构 3.AOI网格思路 4.网络AOI数据结构 5.游戏世界类添加&#xff0c;删除和构造 6.AOI查找实现 7.GAMEROLE类结合AOI 8.登陆时发送ID和姓名 9.登陆时发送周围玩家位置 10.玩家上线完成 11.玩家下线处理 1.项目进度回顾 时间轮调度处理…...

C/C++语言常见问题-智能指针、多态原理

文章目录 智能指针实现原理智能指针&#xff0c;里面的计数器何时会改变std::shared_ptr的引用计数器&#xff1a;std::weak_ptr的弱引用计数器&#xff1a;std::unique_ptr的控制块&#xff1a;总结&#xff1a; 智能指针和管理的对象分别在哪个区面向对象的特性&#xff1a;多…...

Python 实现日志备份守护进程

实训背景 假设你是一名运维工程师&#xff0c;需要为公司的监控系统开发一个简单的日志备份守护进程。该进程需满足以下需求&#xff1a; 后台运行&#xff1a;脱离终端&#xff0c;长期监控指定目录&#xff08;如 /var/log/app/&#xff09;中的日志文件。自动备份&#xf…...

Electricity Market Optimization 探索系列(VII)- 直流潮流方程的推导及例题

本文参考书籍&#xff1a;电力经济与电力市场&#xff0c;甘德强&#xff0c;杨莉&#xff0c;冯冬涵 著 link \hspace{1.6em} 文章的结构如下&#xff1a;围绕电力传输系统中短线路的等值等效模型&#xff0c;从节点注入功率的角度和线路功率的角度分析电网中的潮流&#xff0…...

DataOutputStream 终极解析与记忆指南

DataOutputStream 终极解析与记忆指南 一、核心本质 DataOutputStream 是 Java 提供的数据字节输出流&#xff0c;继承自 FilterOutputStream&#xff0c;用于写入基本数据类型和字符串的二进制数据。 作用&#xff1a;1.将java程序中的数据直接写入到文件&#xff0c;写到文…...

Spring AI与通义千问的完美结合:构建智能对话应用

Spring AI是Spring生态系统中的新成员,它为开发人员提供了一套简单而强大的工具,用于集成各种AI大模型。本文将介绍如何使用Spring AI与阿里云通义千问大模型进行集成,构建智能对话应用,帮助你快速掌握AI应用开发的核心技能。 引言 随着人工智能技术的快速发展,越来越多的…...

路由过滤实验

实验拓扑以及要求 此实验总结 1.ip-prefix 拒绝192.168.4.1 32,这样写的话并不会匹配192.168.4.1 32,需要加上范围less-eq 32,也就是说,192.168.4.1 32只是规则的范围,匹配还是得写范围 2.router-policy适合用在边界路由器引入 filter-policy都可以用 配置IP 配置ospf,rip …...

Idea连接远程云服务器上的MySQL,开放云服务器端口

1.开放云服务器的3306端口 &#xff08;1&#xff09;进入到云服务器的控制台 &#xff08;2&#xff09;点击使用的云服务器 &#xff08;3&#xff09;点击 配置安全组规则 &#xff08;4&#xff09;添加规则 &#xff08;5&#xff09;开放端口 2.创建可以远程访问…...

Oracle查询大表的全部数据

2000w的大表 表结构如下&#xff0c;其中id是索引 查询处理慢的写法 List<String> queryLoidForPage(Integer startNum,Integer endNum){try {Connection oracleConnection initBean.oracleConnection;Statement stmt oracleConnection.createStatement();// 4.执行查…...

Java锁的分类与解析

在多线程编程中&#xff0c;锁是确保共享资源不会同时被多个线程访问的关键工具。Java 提供了多种锁的实现方式&#xff0c;可以根据不同的需求选择适合的锁。本文将从多个维度对 Java 的锁进行分类&#xff0c;并对每种锁的特性进行详细解析。 锁的分类 锁的分类并没有唯一标…...

PyTorch生成式人工智能实战(1)——神经网络与模型训练过程详解

PyTorch生成式人工智能实战&#xff08;1&#xff09;——神经网络与模型训练过程详解 0. 前言1. 传统机器学习与人工智能2. 人工神经网络基础2.1 人工神经网络组成2.2 神经网络的训练 3. 前向传播3.1 计算隐藏层值3.2 执行非线性激活3.3 计算输出层值3.4 计算损失值3.5 实现前…...

基于X86/Nvidia+FPGA大模型具身智能机器人控制器解决方案,同时拥有算力与实时的便利

2025年成为人形机器人产业化元年&#xff0c;行业已突破早期实验室研发阶段&#xff0c;进入"场景验证量产爬坡"新周期&#xff0c;预计2031年具身智能市场规模有望突破万亿元。这一进程的背后&#xff0c;是硬件算力、实时控制、环境适应等底层技术的系统性突破——…...

使用 OpenRewrite 简化 Java 和 SpringBoot 迁移

大家好&#xff0c;这里是架构资源栈&#xff01;点击上方关注&#xff0c;添加“星标”&#xff0c;一起学习大厂前沿架构&#xff01; 移民的挑战 随着 Spring Boot 2.x 等旧版本即将到期且不再获得支持&#xff0c;迁移到较新版本对于安全性、兼容性和性能改进至关重要。但…...

2025中国移动云智算大会回顾:云智变革,AI+跃迁

4月10日&#xff0c;2025中国移动云智算大会在苏州举办。会上&#xff0c;中国移动开启“由云向智”新范式&#xff0c;以“智”为核心开辟算网新生态&#xff0c;彰显其在AI新时代的战略远见与技术引领力。 “云智算”将如何通过算网基础设施与人工智能核心技术的深度融合&am…...

ubuntu 2204 安装 vcs 2023

系统 : Ubuntu 22.04.1 LTS vcs 软件 : 有已经安装好的软件(位于redhat8.10),没找到安装包 . 安装好的目录文件 占用 94 G注意 : 该虚拟机(包括安装好的软件)有114G,其中安装好的目录文件占用94GB // 即 我要把 这里 已经安装好的软件(包括scl/vcs/verdi 和其他软件) 在 …...

C#实例化类型详解:从概念到实战

在C#编程中&#xff0c;实例化类型是构建程序的核心操作。本文将通过通俗易懂的案例&#xff0c;深入解析类型实例化的原理与实践技巧&#xff0c;帮助开发者快速掌握这一基础但至关重要的概念。 实例化类型是什么&#xff1f; 定义 通过类型模板创建具体对象的过程称为实例…...

Redis的Key的过期策略

我们都知道Redis的键值对是可以设置过期时间的&#xff0c;那么就会涉及到一个问题&#xff0c;Redis到底是如何做到响应快的同时有能快速地释放掉过期的键值对的呢&#xff1f;不卖关子了&#xff0c;直接说答案&#xff0c;那就是Redis两个策略&#xff1a;定期删除和惰性删除…...

python爬虫降低IP封禁,python爬虫除了使用代理IP和降低请求频率,还有哪些方法可以应对IP封禁?

文章目录 前言1. 利用 CDN 节点2. 模拟真实用户行为3. 使用 IP 池轮换策略4. 处理 Cookie 和会话信息5. 分布式爬虫 前言 除了使用代理 IP 和降低请求频率&#xff0c;以下这些方法也能应对 IP 封禁&#xff1a; Python 3.13.2安装教程&#xff08;附安装包&#xff09;Python…...

Unity URP Moblie AR示例工程,真机打包出来,没阴影

效果&#xff1a; unity ar示例演示 现象&#xff1a; 真机打包测试私活没有阴影 Unity版本&#xff1a;2022.3.4f1c1 分析原因&#xff1a; Prefab &#xff1a;ARFeatheredPlane中也有材质&#xff0c;一个用于环境遮挡&#xff0c;一个用于阴影接受。 按理说有啊。 urp …...

单片机 | 基于51单片机的自动循迹小车设计

以下是一个基于51单片机的自动循迹小车设计详解,包含原理、公式和完整代码: 一、系统原理 核心模块: 传感器:红外对管(TCRT5000)x4主控芯片:STC89C52RC(51单片机)电机驱动:L298N驱动模块电源:7.4V锂电池(电机) + 5V稳压(单片机)工作原理: 红外对管发射红外线,…...

【AI】——结合Ollama、Open WebUI和Docker本地部署可视化AI大语言模型

&#x1f3bc;个人主页&#xff1a;【Y小夜】 &#x1f60e;作者简介&#xff1a;一位双非学校的大三学生&#xff0c;编程爱好者&#xff0c; 专注于基础和实战分享&#xff0c;欢迎私信咨询&#xff01; &#x1f386;入门专栏&#xff1a;&#x1f387;【MySQL&#xff0…...

Hook插件

hook插件 1.概念 在JavaScript中&#xff0c;hook是一种能够拦截和修改函数或方法行为的技术。通过使用hook&#xff0c;开发者可以在现有的函数执行前、执行后或者替换函数的实现逻辑。hook目的是找到函数入口以及一些参数变化&#xff0c;便于分析js逻辑。 2.hook的作用&a…...

双 Token 与 单 Token 优缺点

双Token与单Token认证机制对比 在Web应用开发中&#xff0c;身份认证和授权是保障系统安全的核心环节。随着技术演进&#xff0c;基于Token的认证机制逐渐取代传统Session方案&#xff0c;而双Token与单Token架构的选型争议也日益成为开发者关注的焦点。本文将从技术原理、优缺…...

Android 不插SIM卡,手机不能拨打紧急电话;2g+gsm配置才支持112紧急拨号

[DESCRIPTION] 不插SIM卡&#xff0c;手机不能拨打紧急电话 Root Cause 手机没有写入合法的IMEI;或者当地的某个运营商不支持紧急电话&#xff0c;而手机正好选上了这个运营商;或者当地的某个运营商不支持无SIM卡的紧急电话&#xff0c;而手机正好选上了这个运营商 [SOLUTION] …...

java 多线程之Worker Thread模式(Thread Pool模式)

Worker Thread模式 Worker的意思是工作的人&#xff0c;在Worker Thread模式中&#xff0c;工人线程Worker thread会逐个取回工作并进行处理&#xff0c;当所有工作全部完成后&#xff0c;工人线程会等待新的工作到来。 Worker Thread模式也被成为Background Thread&#xff…...

在 MoonBit 中引入 Elm 架构:用简单原则打造健壮的 Web 应用

Elm 是一种纯函数式编程语言&#xff0c;专为构建前端 Web 应用程序而设计。它编译为 JavaScript&#xff0c;强调简洁性、性能和健壮性。 纯函数式的含义是函数没有副作用&#xff0c;这使得代码更易于理解和调试。通过强大的静态类型检查&#xff0c;Elm 确保应用程序不会抛…...