Hadoop源码学习笔记(2) ——进入main函数打印包信息

Hadoop源码学习笔记(2)

——进入main函数打印包信息

找到了main函数,也建立了快速启动的方法,然后我们就进去看一看。

进入NameNode和DataNode的主函数后,发现形式差不多:

  1. public static void main(String args[]) {
  2.     try {
  3.       StringUtils.startupShutdownMessage(DataNode.class, args, LOG);
  4.       DataNode datanode = createDataNode(args, null); //NameNode中类型换成NameNode
  5.       if (datanode != null)
  6.         datanode.join();
  7.     } catch (Throwable e) {
  8.       LOG.error(StringUtils.stringifyException(e));
  9.       System.exit(-1);
  10.     }
  11.   }

进来后第一句是什么,当我们运行到这里时发现:

我们在运行每一个程序时,头上都会在控制台或日志文件中输出这一段话。信息内容主要是描述启动了哪个类,主机,参数,版本,以及编译信息。

跟踪进入StringUtils.startupShutdownMessage类中,

  1. public static void startupShutdownMessage(Class<?> clazz, String[] args,
  2.                                      final org.apache.commons.logging.Log LOG) {
  3.     final String hostname = getHostname();
  4.     final String classname = clazz.getSimpleName();
  5.     LOG.info(
  6.         toStartupShutdownString("STARTUP_MSG: ", new String[] {
  7.             "Starting " + classname,
  8.             " host = " + hostname,
  9.             " args = " + Arrays.asList(args),
  10.             " version = " + VersionInfo.getVersion(),
  11.             " build = " + VersionInfo.getUrl() + " -r "
  12.                          + VersionInfo.getRevision()
  13.                          + "; compiled by ‘" + VersionInfo.getUser()
  14.                          + "‘ on " + VersionInfo.getDate()}
  15.         )
  16.       );
  17.  
  18.     Runtime.getRuntime().addShutdownHook(new Thread() {
  19.       public void run() {
  20.         LOG.info(toStartupShutdownString("SHUTDOWN_MSG: ", new String[]{
  21.           "Shutting down " + classname + " at " + hostname}));
  22.       }
  23.     });
  24.   }

在第5行,通过log4j组件进行了输出(这里log4j是一个日志写入组件,对就.net中是log4net,详细就不描述了)。然后前几项类名(className)、主机(hostname)、参数(args)没什么问题,通过应函数取得即可。

其他信息稍后,先看一下第18行,这里是在进程上加了一个勾子,来捕获关闭事件,然后在关闭时,可以输出一下信息,我们可以试下,在控制台运行时,然后按下Ctrl+C终止时,可以看到以下信息:

这段信息,正是第20行代码进行输出的。

其它信息如版本和编译信息呢? 输入内容中是比较细的,它是如何知道的呢? 跟进去看:

  1.   private static HadoopVersionAnnotation version;
  2. static {
  3.     myPackage = HadoopVersionAnnotation.class.getPackage();
  4.     version = myPackage.getAnnotation(HadoopVersionAnnotation.class);
  5.   }
  6.  public static String getUser() {
  7.     return version != null ? version.user() : "Unknown";
  8.   }

这段代码发现getuser是通过一个HadoopVersionAnnotation类的user()函数,而这个HadoopVersionAnnotation发现是一个接口:

  1. @Retention(RetentionPolicy.RUNTIME)
  2. @Target(ElementType.PACKAGE)
  3. public @interface HadoopVersionAnnotation {...}

这个接口是一个比较特殊的接口,在1 2 行可以看到有一特殊标记。我们知道,在java中有些函数上是可以加一个特殊标记的,如@override。而这个override就是一个特殊的标记,它也是一个接口,可以附加在这个函数上,让其具有特殊意义。

而我们的这个HadoopVersionAnnotation就是这样的一个接口,并且它附加在Package上,即用于获取包的信息。

附件在包上的话,这又是在哪呢? 我们在build文件夹找到了:

发现,这里有一个java文件,然后里面定义了包,在包上加了一个@信息,这正是这个接口的定义,同时,在这里传入了版本,编译者,编译时间等信息。于是我们在程序里就可以获取到这里的值了。

但又在想了,这个build文件夹不是一开始没有的么,在运行ant后才创建的么,这个java文件是哪来的?

我们发现,在src文件夹下有saveVersion.sh这么一个文件:

基本可以看出,正是往package-info.java中写入相关信息。

而这个saveVersion.sh可以再追查,在build.xml中有调用。

这个@XXX 其实就是.net中的Attribute称之为特性(属性的属性)。

好的,这个main函数中的第一个砍就算过了。

时间: 2024-12-25 18:01:26

Hadoop源码学习笔记(2) ——进入main函数打印包信息的相关文章

Hadoop源码学习笔记(1) ——第二季开始——找到Main函数及读一读Configure类

Hadoop源码学习笔记(1) ——找到Main函数及读一读Configure类 前面在第一季中,我们简单地研究了下Hadoop是什么,怎么用.在这开源的大牛作品的诱惑下,接下来我们要研究一下它是如何实现的. 提前申明,本人是一直搞.net的,对java略为生疏,所以在学习该作品时,会时不时插入对java的学习,到时也会摆一些上来,包括一下设计模式之类的.欢迎高手指正. 整个学习过程,我们主要通过eclipse来学习,之前已经讲过如何在eclipse中搭建调试环境,这里就不多述了. 在之前源码初

Hadoop源码学习笔记(4) ——Socket到RPC调用

Hadoop源码学习笔记(4) ——Socket到RPC调用 Hadoop是一个分布式程序,分布在多台机器上运行,事必会涉及到网络编程.那这里如何让网络编程变得简单.透明的呢? 网络编程中,首先我们要学的就是Socket编程,这是网络编程中最底层的程序接口,分为服务器端和客户端,服务器负责监听某个端口,客户端负责连接服务器上的某个端口,一旦连接通过后,服务器和客户端就可以双向通讯了,我们看下示例代码: ServerSocket server = new ServerSocket(8111); S

Hadoop源码学习笔记(3) ——初览DataNode及学习线程

Hadoop源码学习笔记(3) ——初览DataNode及学习线程 进入了main函数,我们走出了第一步,接下来看看再怎么走: public class DataNode extends Configured implements InterDatanodeProtocol,       ClientDatanodeProtocol, FSConstants, Runnable {      public static DataNode createDataNode(String args[],

Hadoop源码学习笔记(6)——从ls命令一路解剖

Hadoop源码学习笔记(6) ——从ls命令一路解剖 Hadoop几个模块的程序我们大致有了点了解,现在我们得细看一下这个程序是如何处理命令的. 我们就从原头开始,然后一步步追查. 我们先选中ls命令,这是一个列出分面式文件系统中的目录结构.传入一个查阅地址,如果没有则是根目录.启动NameNode和DataNode服务.然后在命令行中输入ls : 换成程序,如果写呢,我们新建一个ClientEnter类.之前章节中,我们就知道,在命令行中输入的dfs命令,指向到org.apache.hado

Hadoop源码学习笔记(5) ——回顾DataNode和NameNode的类结构

Hadoop源码学习笔记(5) ——回顾DataNode和NameNode的类结构 之前我们简要的看过了DataNode的main函数以及整个类的大至,现在结合前面我们研究的线程和RPC,则可以进一步看看几个对象的大至结构以及调用关系. 我们知道,三个结构(客户端,NameNode,DataNode)是能过网络调用的,走的是RPC.那在底层通讯时谁做服务器谁做客户端呢?我们先回顾一下这三者关系: 这样看,看不出,我们进入源码,看一下夹在中间的NameNode: 在这个initialize函数中,

jQuery源码学习笔记:扩展工具函数

// 扩展工具函数 jQuery.extend({ // http://www.w3school.com.cn/jquery/core_noconflict.asp // 释放$的 jQuery 控制权 // 许多 JavaScript 库使用 $ 作为函数或变量名,jQuery 也一样. // 在 jQuery 中,$ 仅仅是 jQuery 的别名,因此即使不使用 $ 也能保证所有功能性. // 假如我们需要使用 jQuery 之外的另一 JavaScript 库,我们可以通过调用 $.noC

Java集合源码学习笔记(二)ArrayList分析

Java集合源码学习笔记(二)ArrayList分析 >>关于ArrayList ArrayList直接继承AbstractList,实现了List. RandomAccess.Cloneable.Serializable接口,为什么叫"ArrayList",因为ArrayList内部是用一个数组存储元素值,相当于一个可变大小的数组,也就是动态数组. (1)继承和实现继承了AbstractList,实现了List:ArrayList是一个数组队列,提供了相关的添加.删除.修

Java多线程之JUC包:ReentrantLock源码学习笔记

若有不正之处请多多谅解,并欢迎批评指正. 请尊重作者劳动成果,转载请标明原文链接: http://www.cnblogs.com/go2sea/p/5627539.html ReentrantLock是JUC包提供的一种可重入独占锁,它实现了Lock接口.与Semaphore类似,ReentrantLock也提供了两种工作模式:公平模式&非公平模式,也是通过自定义两种同步器FairSync&NonfairSync来实现的. 源代码: /* * ORACLE PROPRIETARY/CONF

Spring源码学习笔记(6)

Spring源码学习笔记(六) 前言-- 最近花了些时间看了<Spring源码深度解析>这本书,算是入门了Spring的源码吧.打算写下系列文章,回忆一下书的内容,总结代码的运行流程.推荐那些和我一样没接触过SSH框架源码又想学习的,阅读郝佳编著的<Spring源码深度解析>这本书,会是个很好的入门. 上一篇中我们梳理到 Spring 加载 XML 配置文件, 完成 XML 的解析工作,接下来我们将进入 Spring 加载 bean 的逻辑. 我们使用 Spring 获取 XML