Type mismatch in key from map: expected org.apache.hadoop.io.Text, received org.apache.hadoop.io.LongWritable

　　今天在写MapReduce时遇到了这个问题，这个问题的解释是：来自map的键类型不匹配:expected org.apache.hadoop.io文本,收到org.apache.hadoop.io.LongWritable，也就是说从map到reduce的输出格式装换错误，或者没有定义，即使在你的map的输出参数写的和reduce的参数一模一样还是会出现这个错误。

那么解决的办法就是既然他自己识别不了，我们就强制给他装换，给他设置类型参数，这样就可以了。

        //设置map输出的key类型
        job.setMapOutputKeyClass(LongWritable.class);
        //设置map输出的value类型
        job.setMapOutputValueClass(Text.class);
        //设置输出的key类型
        job.setOutputKeyClass(Text.class);
        //设置输出的value类型
        job.setOutputValueClass(NullWritable.class);

　　我们自己手动设定map的输出key 和 value 的类型。问题解决。

原文地址：https://www.cnblogs.com/zll20153246/p/9351167.html

时间： 2024-11-08 19:20:32

Type mismatch in key from map: expected org.apache.hadoop.io.Text, received org.apache.hadoop.io.LongWritable的相关文章

java.io.IOException: Type mismatch in key from map：解决方法

执行MR程序的时候发生异常:java.lang.Exception: java.io.IOException: Type mismatch in key from map: expected org.apache.hadoop.io.Text, received org.apache.hadoop.io.LongWritable 日志如下: 2016-05-09 21:33:28,871 INFO [org.apache.hadoop.conf.Configuration.deprecation

Hadoop on Mac with IntelliJ IDEA - 9 解决Type mismatch in value from map问题

修改陆喜恒. Hadoop实战(第2版)5.3排序的代码时遇到IO异常. 环境:Mac OS X 10.9.5, IntelliJ IDEA 13.1.5, Hadoop 1.2.1 异常具体信息如下 1 14/10/06 03:08:51 INFO mapred.JobClient: Task Id : attempt_201410021756_0043_m_000000_0, Status : FAILED 2 java.io.IOException: Type mismatch in va

jsp页面使用el 按key获取map中的对应值

jsp页面使用el 按key获取map中的对应值转自:<jsp页面使用el 按key获取map中的对应值>地址:http://blog.csdn.net/baple/article/details/18517359 jsp页面中的代码: <script type="text/javascript"> var msgTip = "${msgs['loginError']}"; alert(msgTip); </script> 注意

java.lang.Error: Unresolved compilation problems: Syntax error on token "return", delete this token Type mismatch: cannot convert from Init to String

java.lang.Error: Unresolved compilation problems: Syntax error on token "return", delete this token Type mismatch: cannot convert from Init to String Dubbo 在调用服务时候报的错误! 那么问题来了.这什么错? ? 英语不好. Type mismatch: cannot convert from Init to Strin

Type mismatch: cannot convert from Enumeration<String> to Enumeration<Object>

完整错误信息: Description Resource Path Location TypeType mismatch: cannot convert from Enumeration<String> to Enumeration<Object> ResponseHeaderFilter.java /dwz-java/src/dwz/common/util line 46 Java Problem 解决办法: Type mismatch: cannot convert from

解决"415 Cannot process the message because the content type 'application/x-www-form-urlencoded' was not the expected type 'text/xml; charset=utf-8'"

wcf basicHttpBinding content-type text/xml;charset=utf-8 wsHttpBinding 'application/soap+xml; charset=utf-8' webHttpBinding 'application/x-www-form-urlencoded' 对应网页中的post请求所以如果是post请求wcf服务,要使用webHttpBinding 解决"415 Cannot process the message be