当前位置: 首页 > news >正文

4.21 从0开始配置spark-local模式

首先准备好安装包

然后使用命令解压

 

 使用source /etc/profile命令让环境变量生效

输入命令

spark-submit --class org.apache.spark.examples.SparkPi --master local[2] /opt/module/spark-local/examples/jars/spark-examples_2.12-3.1.1.jar 10

即在spark运行了第一个程序

查看运行任务详情

在任务还处于运行状态时,可以通过FanLing001:4040来查看。请注意,一旦任务结束,则这个界面就不可访问了。

http://www.xdnf.cn/news/59077.html

相关文章:

  • django入门
  • 基于 FFmpeg 的音视频处理基础原理与实验探究
  • RocketMQ CommitLog 核心恢复机制解析:recoverNormally 如何守护消息可靠性
  • 45.[前端开发-JavaScript高级]Day10-迭代器-生成器
  • 深度学习中的归一化技术:从原理到实战全解析
  • 论文速报《Being-0:结合视觉语言模型与模块化技能的人形机器人智能体》
  • web worker
  • Spark-SQL4
  • B实验-12
  • Android(java) 接口(interface)的简单使用
  • Kotlin安卓算法总结
  • 使用谷歌浏览器自带功能将网页转换为PDF文件
  • 人工智能在智能家居中的应用与发展
  • cgroup threaded功能例子
  • 4.21 spark和hadoop的区别与联系
  • 新能源汽车零部件功率级测试方案搭建研究
  • 【PCIE730】基于PCIe总线架构的4路10G光纤通道适配器
  • 基于XC7V690T的在轨抗单粒子翻转系统设计
  • lstc_server web api接口
  • LX3-初识是单片机
  • spark
  • 全景VR是什么?全景VR有什么热门用途?
  • K8s使用LIRA插件更新安全组交互流程
  • 适配器模式:化解接口不兼容的桥梁设计
  • 若依框架免登陆、页面全屏显示、打开新标签页(看板大屏)
  • TensorFlow深度学习实战(13)——循环神经网络详解
  • 【NLP 69、KG - BERT】
  • 如何以特殊工艺攻克超薄电路板制造难题?
  • Hibernate的组件映射
  • 管理杂谈——采石矶大捷的传奇与启示