当前位置： 首页 > news >正文

Spark入门02-Spark开发环境配置（idea环境）

news 2026/3/28 22:14:47

安装与配置Spark开发环境

1.下载解压安装包

https://archive.apache.org/dist/spark/spark-2.1.2/
https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.3.4/
在这里插入图片描述

2、新建Scala项目

参考https://blog.csdn.net/weixin_38383877/article/details/135894760

3、项目中引入spark的jar文件

第一步：在这里插入图片描述
第二步：在这里插入图片描述

相关文章：

Spark入门02-Spark开发环境配置（idea环境）

安装与配置Spark开发环境 1.下载解压安装包 https://archive.apache.org/dist/spark/spark-2.1.2/ https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.3.4/ 2、新建Scala项目 参考https://blog.csdn.net/weixin_38383877/article/details/135894760 3、项目中引…...

编程日记 2024/1/30 8:01:46

Codeforces Round 886 (Div. 4)

目录 A. To My Critics B. Ten Words of Wisdom C. Word on the Paper D. Balanced Round E. Cardboard for Pictures F. We Were Both Children G. The Morning Star H. The Third Letter A. To My Critics 直接模拟 void solve(){int a,b,c; cin>>a>>b&…...

编程日记 2024/1/30 8:00:45

Pull模式和Push模式

Pull模式是一种消息消费模式，其中客户端主动从服务端拉取数据。 优点：客户端可以根据自己的消费能力来消费数据，不存在消息堆积的情况。 缺点：消息处理可能不及时，可能存在大量无效请求，客户端需要考虑拉取…...

编程日记 2024/1/30 7:59:44

高端车规MCU的破局之路

目录 1 低质量的无效内卷 2 高端车规MCU产品共性 2.1 支持标定测量 2.2 低延迟通信加速 2.3 完备的网络安全解决方案 2.4虚拟化 3 国产替代的囚徒困境 1 低质量的无效内卷 近几年，车规MCU国产替代的呼声此消彼长，但仍然集中在低端产品。 从产…...

编程日记 2024/1/30 7:55:39

活字格V9获取图片失败bug，报错404，了解存储路径，已改为批量上传和批量获取

项目场景： 问题描述 原因分析： 解决方案： 完成了批量上传功能，这插件真的很方便 于是写了个批量获取附件的js代码，我真厉害 项目场景： 活字格V9版本获取图片链接Upload 【9.0.103.0】图片上传的存储路…...

编程日记 2024/1/30 7:54:37

【Echart】echart图表不显示总结

【Echart】echart图表不显示 经常遇到的场景&#xff1a;v-if和el-tabs切换图表不显示图表&#xff1b; 1、echarts.init时确认dom容器是否设置了宽高&#xff0c;必须设置宽高&#xff1b; 错误写法 <div id"line" ref"lineChart" width"100%&qu…...

编程日记 2024/1/30 7:53:36

vue 组件之间相互传值的6种方法

Vue.js 中组件间通信的方法有很多种&#xff0c;以下是6种常见的直接或间接的组件传值方式&#xff1a; 1. Props&#xff08;父向子&#xff09; 优点&#xff1a; 易于理解&#xff0c;符合单向数据流的原则&#xff0c;有利于代码维护。 缺点&#xff1a; 数据只能从父组件…...

编程日记 2024/1/30 7:47:31

开源大规模分布式MQTT消息服务器EMQX部署教程

1.EMQX是什么&#xff1f; EMQX 是一款开源的大规模分布式 MQTT 消息服务器&#xff0c;功能丰富&#xff0c;专为物联网和实时通信应用而设计。EMQX 5.0 单集群支持 MQTT 并发连接数高达 1 亿条&#xff0c;单服务器的传输与处理吞吐量可达每秒百万级 MQTT 消息&#xff0c;并…...

编程日记 2024/1/30 7:46:30

postgresql慢查询排查和复现

postgresql慢查询排查和复现 一. 介绍一张表&#xff1a;pg_stat_activity pg_stat_activity 是 PostgreSQL 中一个非常有用的系统视图&#xff0c;提供了有关当前数据库连接和活动查询的信息。通过查询这个视图&#xff0c;你可以获取有关正在执行的查询、连接的用户、进程 …...

编程日记 2024/1/30 7:42:27

【服务器】搭建ChatGPT站点常见问题

目录 ❓ 常见问题 &#x1f33c;1. 什么是OpenAI APIkey? &#x1f33c;2. 什么是Token&#xff1f; &#x1f33c;3. 为什么回复不是GPT-4&#xff1f; &#x1f33c;4. 如何区分 GPT-3.5 和 GPT-4 &#x1f33c;5. 为什么回复到一半卡住&#xff1f; &#x1f33c;6.…...

编程日记 2024/1/30 7:41:26

QT+opengl 创建一个六边形

一.关键名词解释 VAO: Vertex Array Object, 顶点数组对象&#xff0c;你要绘制的图形。 VBO:Vertex Buffer Object, 顶点缓冲对象&#xff0c;所有顶点的集合。 EBO:Element Buffer Object, 元素缓冲对象&#xff0c;顶点的索引值。 IBO: Index Buffer Object, 索引缓冲对象。…...

编程日记 2024/1/30 7:39:22

Android imageView.setImageXXX() 引发的卡顿问题

在 Android 开发中&#xff0c;ImageView 是一个用户界面控件&#xff0c;用于在应用中显示图片。它是 Android UI 组件库中一个非常基础和常用的部分。使用 ImageView&#xff0c;你可以在屏幕上显示来自不同来源的图像&#xff0c;比如位图文件、绘图资源 drawable、网络来源…...

编程日记 2024/1/30 7:37:20

MavenGradle等引入jSerialComm

引入 jSerialComm [2.0.0,3.0.0) 此版本发布于 Nov 7, 2023 (23年11月) Maven: <dependency><groupId>com.fazecast</groupId><artifactId>jSerialComm</artifactId><version>[2.0.0,3.0.0)</version> </dependency>Ivy: …...

编程日记 2024/1/30 7:36:19

热门技术问答 | 请 GaussDB 用户查收

近年来&#xff0c;Navicat 与华为云 GaussDB 展开一系列技术合作&#xff0c;为 GaussDB 用户提供面向管理开发工具的生态工具。Navicat 现已完成 GaussDB 主备版&#xff08;单节点、多节点&#xff09;和分布式数据库的多项技术对接。Navicat 通过工具的流畅性和实用性&…...

编程日记 2024/1/30 7:35:19

【C/C++ 01】初级排序算法

排序算法通常是针对数组或链表进行排序&#xff0c;在C语言中&#xff0c;需要手写排序算法完成对数据的排序&#xff0c;排序规则通常为升序或降序&#xff08;本文默认为升序&#xff09;&#xff0c;在C中&#xff0c;<algorithm>头文件中已经封装了基于快排算法的 st…...

编程日记 2024/1/30 7:34:18

Android Settings 显示电池点亮百分比

如题&#xff0c;Android 原生 Settings 里有个 电池电量百分比 的选项&#xff0c;打开后电池电量百分比会显示在状态栏。 基于 Android 13 &#xff0c; 代码在 ./packages/apps/Settings/src/com/android/settings/display/BatteryPercentagePreferenceController.java &am…...

编程日记 2024/1/30 7:33:17

Windows记事本不显示下划线的原因及解决方法

最近使用Windows 记事本敲代码发现一个问题&#xff1a;代码中的下划线无法显示&#xff01;&#xff01;&#xff01;(字体为“微软雅黑”、字体大小为11下&#xff0c;代码中的下划线无法显示。当然每个人情况可能不同) 在 Windows 记事本中&#xff0c;下划线可能会因为 字体…...

编程日记 2024/1/30 7:32:16

嵌入式软件工程师面试题——2025校招社招通用(C/C++)（四十六）

说明&#xff1a; 面试群&#xff0c;群号&#xff1a; 228447240面试题来源于网络书籍&#xff0c;公司题目以及博主原创或修改&#xff08;题目大部分来源于各种公司&#xff09;&#xff1b;文中很多题目&#xff0c;或许大家直接编译器写完&#xff0c;1分钟就出结果了。但…...

编程日记 2024/1/30 7:26:11

【学网攻】 第(13)节 -- 动态路由(OSPF)

系列文章目录 目录 系列文章目录 文章目录 前言 一、动态路由是什么&#xff1f; 二、实验 1.引入 实验拓扑图 实验配置 实验验证 总结 文章目录 【学网攻】 第(1)节 -- 认识网络【学网攻】 第(2)节 -- 交换机认识及使用【学网攻】 第(3)节 -- 交换机配置聚合端口【学…...

编程日记 2024/1/30 7:22:08

Asp.Net Core 获取应用程序相关目录

在ASP.NET Core中&#xff0c;可以通过以下三种方式获取应用程序所在目录&#xff1a; 1、使用AppContext.BaseDirectory属性&#xff1a; string appDirectory AppContext.BaseDirectory; 例如&#xff1a;D:\后端项目\testCore\test.WebApi\bin\Debug\net6.0\ 2、使用…...

编程日记 2024/1/30 7:20:06

如何用浏览器扩展将网页内容一键转换为AI知识库

如何用浏览器扩展将网页内容一键转换为AI知识库 【免费下载链接】anything-llm 这是一个全栈应用程序&#xff0c;可以将任何文档、资源&#xff08;如网址链接、音频、视频&#xff09;或内容片段转换为上下文&#xff0c;以便任何大语言模型&#xff08;LLM&#xff09;在聊天…...

编程新知 2026/3/28 21:25:47

API密钥中转站，低成本实现Token自由

最近很多小伙伴都在用AI开发项目 编写程序&#xff0c;或者安装部署龙虾&#xff08;OpenClaw&#xff09;&#xff0c;但是国内的模型很多又满足不了自己的要求&#xff0c;国外的模型要么是不方便购买&#xff0c;要么是价格太贵&#xff0c;每天都要消耗几十上百美元&#x…...

编程新知 2026/3/28 21:07:38

嵌入式开发中PlantUML图表的工程化应用

嵌入式开发中PlantUML图表的工程化应用指南1. 嵌入式文档工具概述在嵌入式系统开发过程中&#xff0c;系统架构图和设计文档是工程师沟通需求、梳理逻辑的核心工具。传统拖拽式绘图工具存在效率低下、维护困难等问题&#xff0c;而基于代码生成图表的PlantUML技术为嵌入式开发文…...

编程新知 2026/3/28 20:09:12

终极指南：3分钟实现Figma完整中文界面本地化

终极指南&#xff1a;3分钟实现Figma完整中文界面本地化 【免费下载链接】figmaCN 中文 Figma 插件&#xff0c;设计师人工翻译校验 项目地址: https://gitcode.com/gh_mirrors/fi/figmaCN FigmaCN是一款专为中文设计师打造的浏览器插件&#xff0c;通过3800条人工校验的…...

编程新知 2026/3/28 19:32:55

手把手教你用Gen6D制作个人数据集：从视频采集到6D姿态估计全流程

从零构建Gen6D个人数据集&#xff1a;6D姿态估计实战指南 引言&#xff1a;为什么需要自定义6D姿态数据集&#xff1f; 在计算机视觉领域&#xff0c;6D姿态估计(6D Pose Estimation)正成为增强现实、机器人抓取和自动驾驶等应用的核心技术。与传统的2D检测不同&#xff0c;6…...

编程新知 2026/3/28 18:06:16

微信聊天记录完全掌控指南：如何永久保存并深度分析你的数字记忆

微信聊天记录完全掌控指南&#xff1a;如何永久保存并深度分析你的数字记忆 【免费下载链接】WeChatMsg 提取微信聊天记录&#xff0c;将其导出成HTML、Word、CSV文档永久保存&#xff0c;对聊天记录进行分析生成年度聊天报告 项目地址: https://gitcode.com/GitHub_Trending…...

编程新知 2026/3/28 17:54:11

2026年国产化人事管理系统TOP10榜单发布：从信创适配到AI提效的选型指南

国产化人事管理系统的竞争&#xff0c;已经从基础人事与算薪&#xff0c;上升到信创环境适配、集团多级管控、复杂用工合规&#xff0c;以及AI在招聘与员工服务中的真实提效。2026年这份TOP10榜单中&#xff0c;红海云更偏向国央企与大型集团的一体化与信创全栈适配&#xff1b…...

编程新知 2026/3/28 17:15:39

从‘保护大熊猫’到游戏设计：用Scratch克隆与子弹机制打造你的第一个塔防小游戏

从“保护大熊猫”到游戏设计&#xff1a;用Scratch克隆与子弹机制打造你的第一个塔防小游戏 当屏幕上那只笨拙的士兵射出第一发子弹&#xff0c;准确击中从天而降的怪物时&#xff0c;12岁的小林突然从椅子上跳了起来——他刚刚用Scratch实现了人生中第一个游戏机制。这个瞬间…...

编程新知 2026/3/28 16:11:08

革命性AI肖像动画工具LivePortrait：一键让静态照片“动“起来

革命性AI肖像动画工具LivePortrait&#xff1a;一键让静态照片"动"起来 【免费下载链接】LivePortrait Bring portraits to life! 项目地址: https://gitcode.com/GitHub_Trending/li/LivePortrait 你是否曾经想过让老照片中的亲人重新展露笑容&#xff1f;或…...

编程新知 2026/3/28 15:18:56

解决Qt程序异常结束的终极指南：从pro文件配置到动态库加载

Qt程序异常崩溃全链路排查手册&#xff1a;从配置陷阱到动态库依赖治理 当你盯着QtCreator控制台里那个刺眼的"程序异常结束"提示时&#xff0c;内心是否在咆哮&#xff1a;"明明代码逻辑没问题&#xff0c;为什么还会崩溃&#xff1f;"这不是你一个人的困…...

编程新知 2026/3/28 15:12:53