问题描述
不知道大家有没有遇到过这个问题,我实现了BaseRichBolt,重载一个带参数的构造函数,new这个组件时传入一个参数作为该组件的成员变量,然后在declareOutputFields方法中调用该变量,local模式运行正常,分布式模式运行就抛NPE。后来过了半小时,再提交,又OK了。(PS:其间检查了很多遍代码,没有传入NULL变量)
我在开发trident程序时,继承mapState时也出现了这个问题
可能原因
1、跟storm本身的序列化机制有关系,storm本身对组件进行序列化和反序列化时,提供一个默认的无参构造函数,至于为什么会提供这个,请看可能原因2
2、猜想在分布式环境,storm要根据集群topology的工作来维护各个topology之间的状态以及一些细节state之类的,突然有些时候state变化,就导致了上面的问题
这两个可能原因目前还是自己的YY,没有找到具体原因,后续继续研究源码,找到再补上。
时间: 2024-12-29 06:39:55