hadoop配置远程客户端

独立出一台机器，作为客户端，可以连接远程集群，配置注意事项；

1、首先是hive，需要服务器启动一个服务 hive --service metastore

然后修改hive客户端 hive-site.xml,主要就是配置 metastore这个服务，注意端口，客户端需要首先telnet ip port ;检查是否可以通？

 <property>
          <name>hive.metastore.local</name>
                          <value>false</value>
                                            </property>

                    <property>
                           <name>hive.metastore.uris</name>
                                  <value>thrift://10.201.232.121:9083</value>
                                          <description>Thrift uri for the remote metastore. Used by metastore client to connect to remote metastore.</description>
                                            </property>

2 、然后是hdfs-site.xml 和 mapred-site.xml 很简单只需要将集群中的配置拷贝到本地就可以了

时间： 2024-11-01 22:12:30

hadoop配置远程客户端的相关文章

CentOS上配置rsyslog客户端用以远程记录日志

rsyslog是一个开源工具,被广泛用于Linux系统以通过TCP/UDP协议转发或接收日志消息.rsyslog守护进程可以被配置成两种环境,一种是配置成日志收集服务器,rsyslog进程可以从网络中收集其它主机上的日志数据,这些主机会将日志配置为发送到另外的远程服务器.rsyslog的另外一个用法,就是可以配置为客户端,用来过滤和发送内部日志消息到本地文件夹(如/var/log)或一台可以路由到的远程rsyslog服务器上. 假定你的网络中已经有一台已经配置好并启动的rsyslog服务器,本指

Hadoop配置过程!

1             Hadoop配置 注意事项:关闭所有防火墙 服务器 IP 系统 Master 10.0.0.9 Centos 6.0 X64 Slave1 10.0.0.11 Centos 6.0 X64 Slave2 10.0.0.12 Centos 6.0 X64 Hadoop版本:hadoop-0.20.2.tar.gz 1.1      在master:(在slave1和slave2上操作和以下相同) #vi /etc/hosts        三台机器相同配置 10.0.0

Ubuntu 配置PPTP客户端

本文介绍一下命令配置PPTP客户端的过程.   A.安装pptp客户端软件 sudo apt-get install pptp-linux B.查看网络配置 [email protected]:~# ifconfig eth0 Link encap:Ethernet HWaddr 00:0c:29:19:a7:0c inet addr:192.168.1.113 Bcast:255.255.255.255 Mask:255.255.255.0 inet6 addr: fe80::20c:29ff

hadoop云盘客户端的设计与实现（一）

最近在hadoop云盘客户端项目,在做这个项目以前对hadoop是一点都不了解呀,在网上查了好久,将客户端开发的是很少的,在做这个项目的过程中遇到很多奇葩的问题.而且试图换过好多方案,曾陷入深渊准备放弃,最后还是坚持下来了.在这里写篇博文,把我最近的遇到的困难和做客户端 的基本思路列出来,希望能够帮助哪些做类似项目的开发者们! 下面是hadoop客户端简单的需求: 1.能够实现基本的文件存储操作,上传.下载.删除.重命名.分类.创建文件夹.分享等功能. 2.能够运行在多操作系统下:Windows

Linux 安装MongoDB 并设置防火墙，使用远程客户端访问

1. 下载 MongoDB 提供了 linux 各发行版本 64 位的安装包  下载地址:https://www.mongodb.com/download-center#community 2. 安装 1 tar -zxvf mongodb-linux-x86_64-3.0.6.tgz # 解压 2 3 mv mongodb-linux-x86_64-3.0.6/ /usr/local/mongodb # 将解压包拷贝到指定目录 MongoDB 的可执行文件位于 bin 目录下,所以可以将其添加

Hadoop配置过程实践！

1             Hadoop配置 注意事项:关闭所有防火墙 服务器 IP 系统 Master 10.0.0.9 Centos 6.0 X64 Slave1 10.0.0.11 Centos 6.0 X64 Slave2 10.0.0.12 Centos 6.0 X64 Hadoop版本:hadoop-0.20.2.tar.gz 1.1      在master:(在slave1和slave2上操作和以下相同) #vi /etc/hosts        三台机器相同配置10.0.0.

Hadoop实现远程登录与调试

配置远程登录 1)         在自己的linux机上搭好hadoop,详细过程请参考:http://www.cnblogs.com/stardjyeah/p/4641554.html 2)         修改linux的hosts文件 # vim /etc/hosts 在hosts文件的最下面一行添加,格式为: 第一部份:网络IP地址. 第二部份:主机名.域名,注意主机名和域名之间有个半角的点. 第二部份:主机名(主机名别名) ,其实就是主机名. 比如:192.168.1.109 had

Direct Access技术之四：DA服务器的配置及客户端验证

下篇 前一篇我们构建了DA实验的基础环境,这一篇主要看下DA服务器的配置及客户端验证 DA服务器配置 首先看下CLIENT1在内网测试访问APP1服务器,结果如下: 访问正常. 配置DA服务器 DA服务器-服务器管理器-工具-点击"远程访问"组件 运行开始向导 选择"仅部署DirectAccess" 网络拓扑选择"边缘",向导自动检索远程访问服务器的公用名称,这里是"directaccess.sr.local",下一步 点击&

Hadoop配置参数

Hadoop的配置文件解释 hadoop-env.sh: 用于定义hadoop运行环境相关的配置信息,比如配置JAVA_HOME环境变量.为hadoop的JVM指定特定的选项.指定日志文件所在的目录路径以及master和slave文件的位置等: core-site.xml: 用于定义系统级别的参数,它作用于全部进程及客户端,如HDFS URL.Hadoop的临时目录以及用于rack-aware集群中的配置文件的配置等,此中的参数定义会覆盖core-default.xml文件中的默认配置: hdf