本文以AIX系统中的nmon文件为例,说明spark针对数据分析的典型用法。希望能帮助大家用spark的方式来思考问题。
任务1:从aix数据文件中获取数据的起始时间
实现代码片段:
任务2:从aix数据文件中取出所有CPU行
实现代码片段:
任务3:从CPU行中取出首行(变量定义)
实现代码片段:
任务4:从CPU行中取出所有数据行
实现代码片段:
任务5:转换一行CPU数据为多条KPI记录
实现代码片段:
任务6:分钟级数据聚合为小时级数据
实现代码片段:
时间: 2024-11-06 22:18:33