cloudera vm 5.4.2 如何启动hadoop各项服务

cloudera vm 5.4.2  如何启动hadoop各项服务

1. 安装位置

/usr/lib

hadoop

spark

Hbase

hive

impala

mahout

2.自动启动

第一个进程 init , 读取 inittab ->runlevel 5

启动第六步--init进程执行rc.sysinit
在设定了运行等级后,Linux系统执行的第一个用户层文件就是/etc/rc.d/rc.sysinit脚本程序,它做的工作非常多,包括设定PATH、设定网络配置(/etc/sysconfig/network)、启动swap分区、设定/proc等等。
启动第七步--启动内核模块
具体是依据/etc/modules.conf文件或/etc/modules.d目录下的文件来装载内核模块。
启动第八步--执行不同运行级别的脚本程序
根据运行级别的不同,系统会运行rc0.d到rc6.d中的相应的脚本程序,来完成相应的初始化工作和启动相应的服务。
启动第九步--执行/etc/rc.d/rc.local
rc.local就是在一切初始化工作后,Linux留给用户进行个性化的地方。你可以把你想设置和启动的东西放到这里。

3. rc5.d  启动cloudera的各项服务

hadoop spark的各项服务都在这里,随机启动。

每个链接的名字都是以S或者K开头的,S开头的表示是系统启动是要随机启动的,K开头的是不随机启动的。

如果我要哪个服务随机启动,就把它名字第一个字母K改成S就可以了,当然,把S改成K后,这个服务就不能随机启动了。

参考:

1, Linux启动过程详解 , http://blog.chinaunix.net/uid-26495963-id-3066282.html

2, [原创]Linux系统启动过程分析 , http://blog.chinaunix.net/uid-23069658-id-3142047.html

3, Linux 的启动流程, http://www.ruanyifeng.com/blog/2013/08/linux_boot_process.html

时间: 2024-07-31 00:07:56

cloudera vm 5.4.2 如何启动hadoop各项服务的相关文章

【hadoop学习】--(2)安装和启动hadoop

9 安装hadoop <1>安装 tar -zvxf hadoop-1.1.2.tar.gz  mv hadoop-1.1.2 /usr/lib/hadoop <2>环境变量 执行gedit /etc/profile添加和修改后为: export JAVA_HOME=/usr/lib/jvm export HADOOP_HOME=/usr/lib/hadoop/ export PATH=.:$JAVA_HOME/bin:$HADOOP_HOME/bin:$PATH source /

启动Hadoop HA Hbase zookeeper spark

备注:我的公钥文件在/home/hxsyl/.ssh下不在/root/hxsyl下,通过 find / -name id_rsa 查找 1.分别在每个机器上运行命令zkServer.sh start或者在$ZOOKEEPER_HOME/bin目录下运行./zkServer.sh start命令.然后可以通过命令jps来查看Zookeeper启动的进程QuorumPeerMain. 可通过zkServer.sh status命令来查看Zookeeper状态.正常是机器中只有一个leader,其他的

shell启动hadoop集群

原创,转载请注明.谢谢 shell启动hadoop集群1:明确启动顺序 1)启动zookeeper集群(分别在centos 4-02,centos6-02,centos7-02) app/zookeeper-3.4.5/bin/zkServer.sh start //启动进程 app/zookeeper-3.4.5/bin/zkServer.sh status //查看状态 2)启动journalnode(分别在centos 4-02,centos6-02,centos7-02) app/had

启动hadoop的节点

1.启动hadoop的节点 start-dfs.sh

启动hadoop,没有启动namenode进程。log4j:ERROR setFile(null,true) call faild.

解决办法: cd /home/hadoop/hadoop-env/hadoop-1.0.1/log less hadoop-hadoop-namenode-localhost.localdomain.log  --查看该日志,发现是权限问题 chmod 777 hadoop-hadoop-namenode-localhost.localdomain.log --root用户下操作,赋权限 关闭hadoop后在启动hadoop,发现虽然没有报错,但还是没有启动namenode进程. 则还是进入ha

启动hadoop。start-all.sh 缺少datanode进程

1)修改每个Slave的namespaceID使其与Master的namespaceID一致. 或者 2)修改Master的namespaceID使其与Slave的namespaceID一致. 该"namespaceID"位于"/usr/hadoop/tmp/dfs/data/current/VERSION"文件中,前面蓝色的可能根据实际情况变化,但后面红色是不变的. 例如:查看"Master"下的"VERSION"文件 查看

Delphi启动/停止Windows服务,启动类型修改为&quot;自动&quot;

unit U_StartServices; interface uses Windows, Messages, SysUtils, Variants, Classes, Graphics, Controls, Forms, Dialogs, WinSVC, StdCtrls; type TForm1 = class(TForm) btn_StartServices: TButton; btn_StopServices: TButton; procedure btn_StartServicesCl

MongoDB服务无法启动,发生服务特定错误:100

问题:MongoDB服务无法启动,发生服务特定错误:100 原因:没有正常关闭mongod服务,导致mongod被锁 解决方案:进入db文件夹,删除mongod.lock文件,然后重新启动服务即可

SQL Server 2012实施与管理实战指南(笔记)——Ch5启动SQL Server服务和数据库

5.启动SQL Server服务和数据库 在数据库和服务启动过程中,经常会出现的问题: 1.SQL Server实例无法正常启动 2.系统数据库无法正常启动 3.网络配置失败 4.用户数据库无法启动 5.集群环境下SQL Server资源无法保持在线 目录 5.启动SQL Server服务和数据库... 1 5.1 SQL Server服务启动步骤... 1 5.1.1 从注册表中读取SQL Server启动信息... 1 5.1.2 检查硬件,配置内存和CPU.. 2 5.1.3 数据库启动.