安装cdh时启动spark一个坑

1、cdh在spark的conf中没有slaves文件
解决方法:在spark的conf目录下添加slaves文件,内容为worker节点名
2、yarn的端口和spark的worker端口冲突都是7337,导致worker进程不能正常工作
解决办法:在spark的conf目录下修改spark-default.conf文件,把里面的7337端口
改成其他的端口

原文地址:http://blog.51cto.com/quliren/2324417

时间: 2024-11-03 22:02:08

安装cdh时启动spark一个坑的相关文章

Linux下使用gem安装软件时遇到的一些坑

来谈谈最近我在安装ruby的gem时遇到的一些坑. 首先选择的是下载下来后手动编译安装,这个流程按照官方指示的操作都没什么问题,但安装完之后,当准备使用gem安装一些软件时,总是会遇到找不到源这种坑爹的问题. 明明已经改过了: $ gem source -r https://rubygems.org/ $ gem source -a https://ruby.taobao.org/ 尝试多次后,我决定卸掉后重新安装. 这次安装方法采用ruby官方的指示: 安装rvm $ curl -L http

【凯子哥带你夯实应用层】使用ActionProvider实现子菜单时遇到的一个坑

转载请注明出处:http://blog.csdn.net/zhaokaiqiang1992 最近在重温Android基础,在看到ActionProvider的时候遇到一个坑,分享到大家,避免入坑. 首先简单介绍下ActionProvider. ShareActionProvider你应该用过吧?就是使用系统自带的分享功能,其实ShareActionProvider就是ActionProvider的一个子类,可以在ActionBar上面显示为一个MenuItem,但是我们可以自定义事件行为,所以我

win10想说爱你不容易——安装.net3.5也是一个坑

换win10后装好vs2010打开之前的C#项目的sln文件,提示没有.net3.5问我是转换呀,还是去下载等等,选择下载,下一个项目又弹出来了...解决方案中一共十几个项目,只好再选最后一项全部unload,这体验真是无力吐槽了. 在.net下载页面一看,那个全包的dotnetfx35.exe我以前有一个,应该是xp或win7时用的,直接找到安装,实际好像没用那个exe的文件而是直接启动了win10的“功能”安装模块,装了许久,提示“另一个程序正在使用此文件,进程无法访问.(异常来自HRESU

安装 zabbix 时遇到的一个问题

安装 zabbix 2.0.3,到最后阶段,遇到一个问题: PHP bcmath extension missing,  php configuration parameter --enable-bcmath 解决方法: yum install *bcmath* --skip-broken 然后在 /etc/php.ini 文件里,添加: extension=bcmath.so 问题解决了!

C++标准库处理字符流时getline的一个坑

一.描述 如果字符流最后没有一个空白行,那么getline处理最后一行的数据时,seekg会失效 二.代码测试 #include <sstream> #include <iostream> using namespace std; int main(int argc, char** argv) { const char* cs = "line1\nline2\nline3"; stringstream ss(cs); for (int i = 0; i <

ubuntu上安装Eclipse时遇到的一个错误

A Java Runtime Environment (JRE) or Java Development Kit (JDK)must be available in order to run Eclipse Installer. No Java virtual machinewas found after searching the following locations:/opt/eclipse-installer/jre/bin/javajava in your current PATH 这

使用SpringBoot的yml文件配置时踩的一个坑

问题描述:使用SpringBoot整合redis进行yml配置的时候,启动工程报错,提示加载application.yml配置文件失败: 17:18:27.430 [main] ERROR org.springframework.boot.SpringApplication - Application startup failed java.lang.IllegalStateException: Failed to load property source from location 'clas

安装XAMPP时启动Apache失败解决方法 xampp

我现在的XAMP版本是xampp-win32-1.8.3-1-VC11-installer(下载) Apache启动提示 10:33:43  [Apache]Problem detected! 10:33:43  [Apache]Port 80 in use by "Unable to open process" with PID 4! 10:33:43  [Apache]Apache WILL NOT start without the configured ports free!

mysql授权新的用户时遇到的一个坑

其实自己就是没有搞懂 select * from mysql.db\G 和 select * from mysql.user\G 区别:后者是对所有库的权限,前者如果要查询单个库的权限可以使用前者! 下面贴两个图就能明白了: