李林超博客
首页
归档
留言
友链
动态
关于
归档
留言
友链
动态
关于
首页
大数据
正文
02.Livy安装教程
Leefs
2021-06-16 AM
2325℃
0条
# 02.Livy安装教程 ### 一、下载 **1. 命令下载** ``` wget https://www.apache.org/dyn/closer.lua/incubator/livy/0.7.1-incubating/apache-livy-0.7.1-incubating-bin.zip ``` **2. 官网下载** 地址:http://livy.incubator.apache.org/download/ ![02.Livy安装01.jpg](https://lilinchao.com/usr/uploads/2021/06/3533044753.jpg) ### 二、安装 **1. 上传到服务器上,并解压到安装目录** ``` [root@192 root]#unzip apache-livy-0.7.1-incubating-bin.zip -d /opt/software/ ``` **2. 修改`livy.conf`配置** 进入conf目录文件 ``` [root@192 apache-livy-0.7.1-incubating-bin]# cd conf/ [root@192 conf]# pwd /opt/software/apache-livy-0.7.1-incubating-bin/conf ``` 拷贝`livy.conf.template`文件 ``` [root@192 conf]# cp livy.conf.template livy.conf [root@192 conf]# vim livy.conf ``` 修改配置信息 ```sh #Livy会话所使用的Spark集群运行模式 livy.spark.master = yarn #######其他可以根据自身项目需求进行设置,不想修改默认就好######## #Livy会话所使用的Spark集群部署模式 livy.spark.deploy-mode=cluster #默认使用hiveContext livy.repl.enable-hive-context = true #开启用户代理 livy.impersonation.enabled = true #设置session空闲过期时间 livy.server.session.timeout = 1h #yarn/local本地模式或者yarn模式 livy.server.session.factory = yarn ``` **3.修改`livy-env.sh`配置** ``` [root@192 conf]# cp livy-env.sh.template livy-env.sh [root@192 conf]# vim livy-env.sh ``` 修改配置信息 ```sh #Spark安装目录 HADOOP_CONF_DIR=/opt/software/hadoop-3.0.0/etc/hadoop #Hadoo配置目录 SPARK_HOME=/opt/software/spark-2.5.2-bin-without-hadoop ``` **4. 配置环境变量** 配置环境变量可以进行全局操作,可以根据根据自身需求配置 ``` [root@192 conf]# vim /etc/profile ``` 添加配置信息 ``` #Livy export LIVY_HOME=/opt/software/apache-livy-0.7.1-incubating-bin export PATH=$PATH:$LIVY_HOME/bin ``` **保存并退出** 使配置生效 ``` [root@192 home]# . /etc/profile ``` ### 三、操作命令 **1.启动Livy** ``` livy-server start ``` **2.查询运行状态** ``` livy-server status ``` **3. 停止Livy** ``` livy-server stop ``` ### 四、访问UI界面 默认端口8998 http://127.0.0.1:8998/ui ![02.Livy安装02.jpg](https://lilinchao.com/usr/uploads/2021/06/2692376641.jpg)
标签:
Livy
非特殊说明,本博所有文章均为博主原创。
如若转载,请注明出处:
https://lilinchao.com/archives/1260.html
上一篇
01.Livy工作原理简介
下一篇
03.Livy中REST API使用
取消回复
评论啦~
提交评论
栏目分类
随笔
2
Java
326
大数据
229
工具
31
其它
25
GO
47
标签云
Eclipse
SpringCloud
线程池
RSA加解密
Spark RDD
工具
Java
Http
BurpSuite
Git
JavaSE
JVM
数据结构
查找
正则表达式
GET和POST
Stream流
并发线程
Scala
Yarn
递归
栈
Thymeleaf
机器学习
MySQL
Golang
ClickHouse
Spark Core
Elasticsearch
Spark
友情链接
申请
范明明
庄严博客
Mx
陶小桃Blog
虫洞