小工具      在线工具  汉语词典  dos游戏  css  js  c++  java

Linux配置spark与scala环境

Linux,scala,spark,linux 额外说明

收录于:17天前

scala语言源自java。 Scala使用java虚拟机（JVM）作为运行环境。 scala 源代码 (.scala) 将被编译成 .class 文件。编译命令为scalac，运行命令为scala。

下载scala压缩包
斯卡拉

下载spark压缩包
火花

在这里插入图片描述
选择需要的版本，Linux或者Window。点击PICK A SPECIFIC RELEASE

在这里插入图片描述
在这里插入图片描述
下载tgz的压缩包。

火花也是如此。

下载完成后使用Xftp软件将其上传到服务器或虚拟机上：
在这里插入图片描述

解压并配置环境变量

# 编辑命令
vi /etc/profile
# 重启命令
source /etc/profile

在这里插入图片描述
配置完成之后在任意目录下使用

scala

在这里插入图片描述

spark-shell
在这里插入图片描述

当出现上图时，说明环境变量配置成功！

Spark安装成功后，安装python后就可以直接使用pyspark了。

在这里插入图片描述

. . .

相关推荐

额外说明

转：hibernate映射视图的两种方式

本文转自：http://blog.csdn.net/id19870510/article/details/5453965   1.数据库已经建立视图，hibernate只是把视图当作普通的表来映射。 视图VIEW_MER_INST_POS: select

额外说明

Flex 布局------ 子项常见属性

flex 子项 flex 份数 flex 属性：定义子项目分配剩余空间，用 flex 来表示占多少份数。 <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <me

额外说明

WWW类过时提示使用 UnityWebRequest

学习笔记 其中包括 加载音频 加载图片 加载AssetBundle 加载文本文件 using System.Collections; using System.Collections.Generic; using UnityEngine; using U

额外说明

【STM32】基础知识 第九课 STM32启动

【STM32】基础知识 第九课 STM32启动 MAP 文件 MAP 文件浅析 MAP 文件组成 atk_f103.map 文件 启动模式 STM32 启动模式 (F1) STM32 启动过程 启动文件介绍 Reset_Handler 函数介绍 堆栈简介

额外说明

数据结构 第二节 第六课

[toc] Python 中的顺序表 Python 中的 list 和 tuple 两种采用了顺序表的实现技术, 具体前面讨论的顺序表的所有性质. tuple 是不可变类型, 即不变的顺序表, 因此不支持改变其内部状态的任何操作, 而其他方面, 则与 l

额外说明

Eolink 让我“重新认识“了自动化测试...

文章目录 前言 专为开发者设计的免费 API 协作平台：Eolink 一、Eolink 是什么？ 二、Eolink 自动化测试介绍 三、Eolink 自动化测试 示例 3.1 自动化测试项目 3.1.1 创建 自动化测试项目 3.1.2 项目统计信息 3

额外说明

Gradio的web界面演示与交互机器学习模型，接口自动刷新或连续刷新数据流《5》

通过在接口中设置live=True，可以使接口自动刷新。现在，一旦用户输入发生变化，界面就会重新计算。依然使用计算器的示例： 实时接口 import gradio as gr def calculator(num1, operation, num2):

额外说明

陈小玉：算法学习建议

算法学习建议 知识在于积累，学习需要耐力。学习就像挖金矿，或许一开始毫无头绪，但转个角度、换换工具，时间久了总会找到一个缝隙。成功就是你比别人多走了一段路，或许恰恰是那么一小步。 第一个建议：多角度，对比学习。 学习算法，可以先阅读一本简单的入门书，然后

额外说明

wordpress页面_如何从WordPress搜索结果中排除页面

WordPress 页面 默认情况下，WordPress 搜索功能会在搜索结果中显示已发布的帖子和已发布的页面。通常，当用户在博客中查找某些内容时，它很可能是一篇文章而不是一个页面。在本文中，我们将向您展示如何通过从 WordPress 搜索结果中排除页

额外说明

wordpress下拉菜单_如何在WordPress管理区域中修改帮助下拉文本

WordPress 下拉菜单 每个 WordPress 管理屏幕都有一个“帮助”按钮。该区域下拉并包含帮助用户了解特定页面功能的文本。当为您的客户或插件创建自定义站点时，您可能会发现需要修改帮助下拉文本。在本文中，我们将向您展示如何修改 WordPres

最新推荐

Redis(6)——列表数据类型
30天前
100 道接口测试面试问题。如果您无法回...
27天前
【tcp/ip模型】c.s模型(2)
25天前
vuer路由router跳转传递参数刷新...
25天前
matepad什么时候升级鸿蒙,华为Ma...
25天前
CentosOS搭建Harbor私有Do...
25天前
.Net下实现分布式缓存同步的手
25天前
Mybatis中jdbcType和jav...
25天前
【云原生 • DevOps】influx...
24天前
解决Windows系统目录丢失cdosy...
17天前
ads via 小工具