大数据安全方案 验证
一、背景
文档用于记录配置 Kerberos 和 Ranger 后，对 HDFS、Hive 认证和鉴权的功能测试。
二、Kerberos 验证
2.1、验证功能 1，HDFS 认证
2.1.1、访问 HDFS
Kerberos 验证前，访问 HDFS 失败。
Kerberos 验证后，访问 HDFS 成功。
2.2、验证功能 2，Hive 认证
2.2.1、访问 Hive
Kerberos 验证前，访问 Hive 失败。
Kerberos 验证后，访问 Hive 成功。
2.3、验证功能 3，HDFS 鉴权
认证通过之后，对鉴权进行测试。
2.3.1、测试对 HDFS 的查看权限
把用户 lexin_user_2 添加到 hadoop 组之前，有查看的权限，但没有写入和删除的权限。
linux层面权限设置。把用户 lexin_user_2 添加到 hadoop 组里。
HDFS层面权限设置。设置 hadoop 组对 HDFS 指定路径有查看和写入的权限。
2.3.2、测试对 HDFS 的写入权限
把用户 lexin_user_2 添加到 hadoop 组之后，测试写入权限成功。
2.4、验证功能 4，Hive 鉴权
2.4.1、测试对Hive的增删改查权限
Kerberos 只有认证的功能，如果有鉴权的需求，需要结合 Ranger。
三、Ranger 验证
3.1、验证功能 1，HDFS 鉴权
Ranger 设置权限之前，读写操作被禁止
Ranger 设置权限之后，
3.1.1、测试对 HDFS 的查看权限
3.1.2、测试对 HDFS 的写入权限
3.2、验证功能 2，Hive 鉴权
3.2.1、测试对 Hive 的查询权限
3.2.1.1、设置只对表 test_hive_row_number_1 有查询权限
3.2.1.1、设置对表 test_hive_row_number_2 也同时有查询权限
3.2.2、设置只对表 test_hive_row_number_1 有更新权限
相关文章：
大数据安全方案 验证
一、背景 文档用于记录配置 Kerberos 和 Ranger 后，对 HDFS、Hive 认证和鉴权的功能测试。 二、Kerberos 验证 2.1、验证功能 1，HDFS 认证 2.1.1、访问 HDFS Kerberos 验证前，访问 HDFS 失败。 Kerberos 验证后，访问 HDFS 成…...
电脑软件：推荐一款免费且实用的电脑开关机小工具
目录 一、软件简介 二、软件功能 三、软件特点 四、使用说明 五、软件下载 今天给大家推荐一款免费且实用的电脑开关机小工具KShutdown，有需要的朋友可以下载试一下！ 一、软件简介 KShutdown是一款精巧且实用的定时自动关机小工具，对于…...
php反序列化靶场随笔分析
项目地址：github.com/mcc0624/php_ser_Class 推荐使用docker部署：https://hub.docker.com/r/mcc0624/ser/tags 前面讲了以下php基础，我们直接从class6开始实验 class6 访问页面，传一个序列化的字符串，php代码将其反…...
动态规划 - 编辑距离
115. 不同的子序列 困难 给你两个字符串 s 和 t ，统计并返回在 s 的 子序列 中 t 出现的个数，结果需要对 10^9 7 取模。 算法思想：利用动态规划，分s[i - 1] 与 t[j - 1]相等，s[i - 1] 与 t[j - 1] 不相等两种情况具…...
力扣——113. 路径总和
113. 路径总和 II 给你二叉树的根节点 root 和一个整数目标和 targetSum ，找出所有 从根节点到叶子节点 路径总和等于给定目标和的路径。 叶子节点 是指没有子节点的节点。 示例 1： 输入：root [5,4,8,11,null,13,4,7,2,null,null,5,1], t…...
C02S04-Ubuntu基本使用
一、Ubuntu初始配置 1. 使用root用户 Ubuntu系统默认只能使用普通用户，要想使用root用户，需要先设置root用户密码。 进入终端，配置root用户密码。按照提示输入密码。 sudo passwd root配置完成后，执行下面的密码，切换…...
C语言 | Leetcode C语言题解之第525题连续数组
题目： 题解： struct HashTable {int key, val;UT_hash_handle hh; };int findMaxLength(int* nums, int numsSize) {int maxLength 0;struct HashTable* hashTable NULL;struct HashTable* tmp malloc(sizeof(struct HashTable));tmp->key 0, tm…...
Qml-Transition的使用
Qml-Transition的使用 Transition的概述 Transition：定义了当状态发生改变时应用的动画属性animations : list：(Transition)过渡的动画属性enabled : bool：状态发生变化时，是否使能此过渡（Transition）动画…...
Notepad++检索包含多个关键字的行
Notepad检索包含多个关键字的行 在Notepad中，你可以使用正则表达式来检索包含多个关键字的行。以下是具体步骤： 打开Notepad，打开要搜索的文件。 点击菜单栏上的“搜索”选项，然后选择“查找”。 在弹出的查找对话框中…...
C语言:水仙花树,要求三位以上的N位整数每位的N次方等于数本身,全部输出出来
#include <stdio.h> int main() { int n; scanf("%d",&n);//这里是说明多少n位整数 int first1; int i1; while(i<n){//此while循环可以得到n位数的最小位,例如3位的100. first*10; i; } ifirst; whil…...
金融贷款口子超市V2源码 Thinkphp开发的贷款和超市平台源码（亲测源码含安装视频教程）
金融贷款口子超市V2源码 Thinkphp开发的贷款和超市平台源码 源码下载：https://download.csdn.net/download/m0_66047725/89938268 更多资源下载：关注我。...
redis的三种客户端
在 Redis 中，常用的 Java 客户端有三种：Jedis、Lettuce 和 Redisson。它们各有特点，适用于不同的场景。以下是它们的详细介绍，以及如何在 Spring Boot 中集成 Redis。 一、Redis 三种常用客户端详解 1.1 Jedis Jedis 是 Redis 官…...
边缘计算【智能+安全检测】系列教程--agx orin解决RTC时间问题
因为是离线运行，首要问题是时间不准确，就在主板上加装了纽扣电池，但是会有一系列问题，比如无法将RTC时间回写到系统时间，或者无法将系统时间写到RTC中等等一些列问题。为解决这些问题，一劳永逸的方式&#…...
数据库动态扩容：Java实现与技术策略
引言 数据库动态扩容是应对数据量增长和业务需求变化的关键技术。它允许数据库系统在不停机的情况下，通过增加或减少资源来适应业务负载的变化。本文将详细介绍数据库动态扩容的工作原理、技术策略，并提供Java代码示例。 1. 数据库动态扩容的工作原理 …...
Golang | Leetcode Golang题解之第525题连续数组
题目： 题解： func findMaxLength(nums []int) (maxLength int) {mp : map[int]int{0: -1}counter : 0for i, num : range nums {if num 1 {counter} else {counter--}if prevIndex, has : mp[counter]; has {maxLength max(maxLength, i-prevIndex)} …...
低代码架构浅析
低代码的定义与应用场景 定义 低代码平台是一种通过可视化工具和预定义组件实现快速应用开发的环境，显著减少了编码量。它旨在简化开发流程，加快应用交付，提高开发效率，使非技术人员也能参与应用开发。 应用场景 企业内部应用 …...
mysql字段是datetime如何按照小时来统计
在 MySQL 中，如果你有一个包含 DATETIME 类型的列，并且你想按照小时来统计数据，可以使用 DATE_FORMAT 函数将 DATETIME 列格式化为仅包含日期和小时的形式，然后使用 GROUP BY 子句来分组。 假设你有一个名为 events 的表…...
nacos快速启动
预备环境准备： 确保是64 bit OS（推荐Linux/Unix/Mac），安装64 bit JDK 1.8并下载&配置，安装Maven 3.2.x并下载&配置。 下载源码或者安装包： 从Github上下载源码方式： git clone https://…...
@Excel若依导出异常/解决BusinessBaseEntity里面的字段不支持导出
今天发现所有实体类继承BusinessBaseEntity里面的这些通用字段不支持导出，debug时发现是这样： 导出效果 这里我把能查到的方法都汇总了，如果你也遇到这个异常，可以去逐步排查 1.先看库里有没有数据 2.看字段名是否对齐 3.所需要…...
虚拟机 Email 恢复专用工具：Virtual Machine Email Recovery
天津鸿萌科贸发展有限公司从事数据安全服务二十余年，致力于为各领域客户提供专业的数据恢复、数据备份解决方案与服务，并针对企业面临的数据安全风险，提供专业的相关数据安全培训。 天津鸿萌科贸发展有限公司是 SysTools 系列数据恢复、取证及…...
Linux应用开发之网络套接字编程(实例篇)
服务端与客户端单连接 服务端代码 #include <sys/socket.h> #include <sys/types.h> #include <netinet/in.h> #include <stdio.h> #include <stdlib.h> #include <string.h> #include <arpa/inet.h> #include <pthread.h> …...
。】2022-5-15)
【根据当天日期输出明天的日期(需对闰年做判定)。】2022-5-15
缘由根据当天日期输出明天的日期(需对闰年做判定)。日期类型结构体如下： struct data{ int year; int month; int day;};-编程语言-CSDN问答 struct mdata{ int year; int month; int day; }mdata; int 天数(int year, int month) {switch (month){case 1: case 3:…...
LeetCode - 394. 字符串解码
题目 394. 字符串解码 - 力扣（LeetCode） 思路 使用两个栈：一个存储重复次数，一个存储字符串 遍历输入字符串： 数字处理：遇到数字时，累积计算重复次数左括号处理：保存当前状态&a…...
linux arm系统烧录
1、打开瑞芯微程序 2、按住linux arm 的 recover按键 插入电源 3、当瑞芯微检测到有设备 4、松开recover按键 5、选择升级固件 6、点击固件选择本地刷机的linux arm 镜像 7、点击升级 （忘了有没有这步了 估计有） 刷机程序 和 镜像 就不提供了。要刷的时…...
【决胜公务员考试】求职OMG——见面课测验1
2025最新版！！！6.8截至答题，大家注意呀！ 博主码字不易点个关注吧,祝期末顺利~~ 1.单选题(2分) 下列说法错误的是:（ B ） A.选调生属于公务员系统 B.公务员属于事业编 C.选调生有基层锻炼的要求 D…...
LLM基础1_语言模型如何处理文本
基于GitHub项目：https://github.com/datawhalechina/llms-from-scratch-cn 工具介绍 tiktoken：OpenAI开发的专业"分词器" torch：Facebook开发的强力计算引擎，相当于超级计算器 理解词嵌入：给词语画"…...
初探Service服务发现机制
1.Service简介 Service是将运行在一组Pod上的应用程序发布为网络服务的抽象方法。 主要功能：服务发现和负载均衡。 Service类型的包括ClusterIP类型、NodePort类型、LoadBalancer类型、ExternalName类型 2.Endpoints简介 Endpoints是一种Kubernetes资源…...
【Nginx】使用 Nginx+Lua 实现基于 IP 的访问频率限制
使用 NginxLua 实现基于 IP 的访问频率限制 在高并发场景下，限制某个 IP 的访问频率是非常重要的，可以有效防止恶意攻击或错误配置导致的服务宕机。以下是一个详细的实现方案，使用 Nginx 和 Lua 脚本结合 Redis 来实现基于 IP 的访问频率限制…...
站群服务器的应用场景都有哪些？
站群服务器主要是为了多个网站的托管和管理所设计的，可以通过集中管理和高效资源的分配，来支持多个独立的网站同时运行，让每一个网站都可以分配到独立的IP地址，避免出现IP关联的风险，用户还可以通过控制面板进行管理功…...
C++实现分布式网络通信框架RPC(2)——rpc发布端
有了上篇文章的项目的基本知识的了解，现在我们就开始构建项目。 目录 一、构建工程目录 二、本地服务发布成RPC服务 2.1理解RPC发布 2.2实现 三、Mprpc框架的基础类设计 3.1框架的初始化类 MprpcApplication 代码实现 3.2读取配置文件类 MprpcConfig 代码实现…...