hadoop结构出现后format变态

14/07/10 18:50:47 FATAL conf.Configuration: error parsing conf file: com.sun.org                                                                                                                                                 .apache.xerces.internal.impl.io.MalformedByteSequenceException:
1 ???? UTF-8 ???е                                                                                                                                                 ???? 1 ??Ч??

14/07/10 18:50:47 ERROR namenode.NameNode: java.lang.RuntimeException: com.sun.o                                                                                                                                                 rg.apache.xerces.internal.impl.io.MalformedByteSequenceException:
1 ???? UTF-8 ??                                                                                                                                                 ?е???? 1 ??Ч??

at org.apache.hadoop.conf.Configuration.loadResource(Configuration.java:                                                                                                                                                 1243)

at org.apache.hadoop.conf.Configuration.loadResources(Configuration.java                                                                                                                                                 :1107)

at org.apache.hadoop.conf.Configuration.getProps(Configuration.java:1053                                                                                                                                                 )

at org.apache.hadoop.conf.Configuration.set(Configuration.java:420)

at org.apache.hadoop.hdfs.server.namenode.NameNode.setStartupOption(Name                                                                                                                                                 Node.java:1374)

at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNo                                                                                                                                                 de.java:1463)

at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:14                                                                                                                                                 88)

Caused by: com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceExcep                                                                                                                                                 tion: 1 ???? UTF-8 ???е???? 1 ??Ч??

at com.sun.org.apache.xerces.internal.impl.io.UTF8Reader.invalidByte(UTF                                                                                                                                                 8Reader.java:687)

at com.sun.org.apache.xerces.internal.impl.io.UTF8Reader.read(UTF8Reader                                                                                                                                                 .java:557)

at com.sun.org.apache.xerces.internal.impl.XMLEntityScanner.load(XMLEnti                                                                                                                                                 tyScanner.java:1750)

at com.sun.org.apache.xerces.internal.impl.XMLEntityScanner.scanContent(                                                                                                                                                 XMLEntityScanner.java:923)

at com.sun.org.apache.xerces.internal.impl.XMLDocumentFragmentScannerImp                                                                                                                                                 l$FragmentContentDriver.next(XMLDocumentFragmentScannerImpl.java:2748)

at com.sun.org.apache.xerces.internal.impl.XMLDocumentScannerImpl.next(X                                                                                                                                                 MLDocumentScannerImpl.java:607)

at com.sun.org.apache.xerces.internal.impl.XMLNSDocumentScannerImpl.next                                                                                                                                                 (XMLNSDocumentScannerImpl.java:116)

at com.sun.org.apache.xerces.internal.impl.XMLDocumentFragmentScannerImp                                                                                                                                                 l.scanDocument(XMLDocumentFragmentScannerImpl.java:488)

at com.sun.org.apache.xerces.internal.parsers.XML11Configuration.parse(X                                                                                                                                                 ML11Configuration.java:835)

at com.sun.org.apache.xerces.internal.parsers.XML11Configuration.parse(X                                                                                                                                                 ML11Configuration.java:764)

at com.sun.org.apache.xerces.internal.parsers.XMLParser.parse(XMLParser.                                                                                                                                                 java:123)

at com.sun.org.apache.xerces.internal.parsers.DOMParser.parse(DOMParser.                                                                                                                                                 java:240)

at com.sun.org.apache.xerces.internal.jaxp.DocumentBuilderImpl.parse(Doc                                                                                                                                                 umentBuilderImpl.java:300)

at javax.xml.parsers.DocumentBuilder.parse(DocumentBuilder.java:177)

at org.apache.hadoop.conf.Configuration.loadResource(Configuration.java:                                                                                                                                                 1156)

... 6 more

出现这样的问题的主要原因是由于配置文件出现了多余的配置项,或者出现因中国,见官hadoop构造。

版权声明:本文博主原创文章,博客,未经同意不得转载。

时间: 2024-10-24 18:53:31

hadoop结构出现后format变态的相关文章

表结构更改后或新增加数据后同步到表中

select 'insert into mtx_system_module(module_id,module_code,module_name,module_note,create_date,version)values('+cast(moduleid as varchar(10))+','''+ObjectID+''','''+Name+''','''+isnull(Note,'')+''',NOW(),1);' from AppModules where subsystem=1 and Pa

踏着前人的脚印学Hadoop——结构、重点

HDFS作为一个分布式文件系统,是所有这些项目的基础.分析好HDFS,有利于了解其他系统.由于Hadoop的HDFS和MapReduce是同一个项目,我们就把他们放在一块,进行分析. 如果把整个hadoop当做一个java中的类的话,那么HDFS就是这个类的静态变量,其他的项目是hadoop中的方法. hdfs HDFS,Hadoop的分布式文件系统实现 文件系统的抽象,可以理解为支持多种文件系统实现的统一文件访问接口 fs 文件系统的抽象,可以理解为支持多种文件系统实现的统一文件访问接口 ip

hadoop提交job后job僵住了,一直是undefined状态

今天在用hive进行查询练习,因为采用了条件查询,hive默认会把查询转变成mapreduce的job去执行,结果发现job一直僵在那里不动,找了好久都没发现问题,看hadoop的mast节点日志,也没有问题,最后查看node节点的日志发现了“INFO org.apache.hadoop.ipc.Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8031”这种日志,并且一直在打印,去yarn-site.xml看了一下8031端口,我在该端口配

表结构变更后出现的ERROR OGG-01161 Bad column index (88)

2014-07-31 09:38:31 ERROR OGG-01668 PROCESS ABENDING. 2014-07-31 09:38:31 ERROR OGG-01161 Bad column index (88) specified for table WIP.WIP_PARAMETERS, max columns = 88. 网上有说是表结构不一致的.可是我已经细致比对了每一个字段.是一致的. 那为什么初始化同步就出问题呢? 应该是打补丁导致源端表结构发生了变化,比方添加了字段. 此

hadoop做HA后,hbase修改

由于hadoop做了HA,namenode可能进行切换,hbase中的配置要做修改: hbase-site.xml中,rootdir改为和hadoop的dfs.nameservices一样, 并将hadoop的core-site.xml和hdfs-site.xml拷贝到hbase的conf下,然后重启hbase <name>hbase.rootdir</name> <value>hdfs://masters/hbase</value> 版权声明:本文为博主原

hadoop 结构的变化

http://hadoop.apache.org/docs/r2.4.1/ Apache Hadoop 2.4.1 Apache Hadoop 2.4.1 consists of significant improvements over the previous stable release (hadoop-1.x). Here is a short overview of the improvments to both HDFS and MapReduce. HDFS Federation

将源DC的OU结构导出后导入到新DC中

前言: 文章内容很简单,本来不想单独弄一篇文章的.不过想到此方法可以让大家举一反三,针对用户,组做类似的批量操作,故还是写出来了.顺便说一下,这些功能使用ADMT非常容易实现,所以具体的价值体现望大家自己衡量. 操作 1. 获取指定顶组组织单位的名字与路径(不知道为啥,属性里面没path这个属性,比较郁闷,但对比发现DistinguishedName这个值与path相比只是多了最前面的一个值,所以用以下命令去掉了第一个值) 2. 将csv中的旧的DC=xx,DC=com全部替换为新的 3. 将文

hadoop 多次格式化format namenode 导致节点不能启动解决

链接:https://blog.csdn.net/qq_41059374/article/details/80695581?depth_1-utm_source=distribute.pc_relevant.none-task&utm_source=distribute.pc_relevant.none-task 原文地址:https://www.cnblogs.com/hgc-bky/p/12616858.html

hadoop启动后jps查不到namenode的解决办法

最近由于项目需要开始接触hadoop,在配置伪分布式启动后,jps查询进程发现少了namenode,而DataNode却存在. 下面是我的core-site.xml和hdfs-site.xml配置: core-site.xml <configuration> <property> <name>hadoop.tmp.dir</name> <value>file:/usr/local/hadoop/tmp</value> <desc