NC文件的处理【netcdf】

NC是气象领域数据的标准格式之一。

能够更好的存储格点数据。

下面为测试NC文件的读写。

git:https://git.oschina.net/ipnunu/nctest

pom.xml

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>nc</groupId>
    <artifactId>nctest</artifactId>
    <version>0.0.1-SNAPSHOT</version>
    <packaging>jar</packaging>

    <name>nctest</name>
    <url>http://maven.apache.org</url>

    <properties>
        <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
    </properties>

    <!-- 设定主仓库,按设定顺序进行查找。 -->
    <repositories>
        <repository>
            <id>jeesite-repos</id>
            <name>Jeesite Repository</name>
            <url>http://maven.aliyun.com/nexus/content/groups/public</url>
        </repository>
    </repositories>

    <dependencies>
        <dependency>
            <groupId>edu.ucar</groupId>
            <artifactId>netcdf</artifactId>
            <version>4.2.20</version>
        </dependency>
        <!--
        <dependency>
            <groupId>edu.ucar</groupId>
            <artifactId>netcdf4</artifactId>
            <version>4.5.5</version>
        </dependency>
         -->
        <dependency>
            <groupId>org.apache.commons</groupId>
            <artifactId>com.springsource.org.apache.commons.lang</artifactId>
            <version>2.6.0</version>
        </dependency>
        <dependency>
            <groupId>org.apache.directory.studio</groupId>
            <artifactId>org.apache.commons.io</artifactId>
            <version>2.4</version>
        </dependency>
        <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>4.11</version>
            <scope>test</scope>
        </dependency>
    </dependencies>
</project>
package nc.test.netCDF3;

import java.io.IOException;
import ucar.ma2.Array;
import ucar.nc2.NCdumpW;
import ucar.nc2.NetcdfFile;
import ucar.nc2.Variable;

public class Read3DNetCDF {
    public static void main(String[] args) {
        String filename = "c:\\nunu\\nc\\HNDW1KM-north-2016090204-70m.nc";
        NetcdfFile ncfile = null;
        try {
            ncfile = NetcdfFile.open(filename);
            String variable = "wd70";
            Variable varBean = ncfile.findVariable(variable);
            // read all data
            if (null != varBean) {
                Array all = varBean.read();
                System.out.println(all.getSize());
                //System.out.println("读取所有:\n" + NCdumpW.printArray(all, variable, null));
            }
            if (null != varBean) {
                int[] origin = new int[] { 2, 1, 1 };
                int[] size = new int[] { 50, 50, 50 };
                Array data2D = varBean.read(origin, size);
                System.out.println(
                        "读取从第一维的0开始,第二维从1开始,第三维从1开始,数量分别为2,2,2:\n" + NCdumpW.printArray(data2D, variable, null));
            }
            // invoke reduce trans 3D to 2D
            if (null != varBean) {
                int[] origin = new int[] { 12, 1, 1 };
                int[] size = new int[] { 1, 2, 2 };
                Array data2D = varBean.read(origin, size).reduce().reduce();
                System.out.println(
                        "读取从第一维的0开始,第二维从1开始,第三维从1开始,数量分别为1,2,2并转为二维:\n" + NCdumpW.printArray(data2D, variable, null));
            }
        } catch (Exception ioe) {
            ioe.printStackTrace();
        } finally {
            if (null != ncfile)
                try {
                    ncfile.close();
                } catch (IOException ioe) {
                }
        }
    }
}
package nc.test.netCDF3;

import java.io.IOException;
import java.util.ArrayList;
import ucar.ma2.Array;
import ucar.ma2.DataType;
import ucar.nc2.Dimension;
import ucar.nc2.NetcdfFileWriteable;

public class Create3DNetCDF {

    public static void main(String[] args) throws Exception {
        String filename = "c:\\nunu\\nc\\test3D.nc";
        NetcdfFileWriteable ncfile = NetcdfFileWriteable.createNew(filename, true); // add
        Dimension timeDim = ncfile.addDimension("time", 2);
        Dimension latDim = ncfile.addDimension("lat", 3);
        Dimension lonDim = ncfile.addDimension("lon", 3); // define
        ArrayList dims = new ArrayList();
        dims.add(timeDim);
        dims.add(latDim);
        dims.add(lonDim);
        ncfile.addVariable("temperature", DataType.DOUBLE, dims);
        ncfile.addVariableAttribute("temperature", "units", "K"); // add a
        Array data = Array.factory(int.class, new int[] { 3 }, new int[] { 1, 2, 3 });
        ncfile.addVariableAttribute("temperature", "scale", data);
        try {
            ncfile.create();
        } catch (IOException e) {
            System.err.println("ERROR creating file " + ncfile.getLocation() + "\n" + e);
        }
    }
}
package nc.test.netCDF3;

import java.io.IOException;
import ucar.ma2.ArrayDouble;
import ucar.ma2.Index;
import ucar.ma2.InvalidRangeException;
import ucar.nc2.Dimension;
import ucar.nc2.NetcdfFileWriteable;

public class Write3DNetCDF {
    public static void main(String[] args) throws IOException {
        NetcdfFileWriteable ncfile = NetcdfFileWriteable.openExisting("c:\\nunu\\nc\\test3D.nc", true);
        Dimension timeDim = ncfile.getDimensions().get(0);
        Dimension latDim = ncfile.getDimensions().get(1);
        Dimension lonDim = ncfile.getDimensions().get(2);
        ArrayDouble A = new ArrayDouble.D3(timeDim.getLength(), latDim.getLength(), lonDim.getLength());
        int k, i, j;
        Index ima = A.getIndex();
        for (k = 0; k < timeDim.getLength(); k++) {
            for (i = 0; i < latDim.getLength(); i++) {
                for (j = 0; j < lonDim.getLength(); j++) {
                    A.setDouble(ima.set(k, i, j), (double) (k + i + j));
                }
            }
        }
        int[] origin = new int[3];
        try {
            ncfile.write("temperature", origin, A);
            ncfile.close();
        } catch (IOException e) {
            System.err.println("ERROR writing file");
        } catch (InvalidRangeException e) {
            e.printStackTrace();
        }
    }
}

联系方式

QQ:398269786

个人微信公共号:pnunu

时间: 2024-12-29 01:16:04

NC文件的处理【netcdf】的相关文章

python之工作举例:通过复制NC文件来造数据

1 # 通过对NC文件复制来造数据 2 import os, shutil 3 4 # 遍历的根目录 5 root_dir = "D:\\test_data\\DISASTER\\" 6 # 获取NC文件的时间 7 time_source = '20161228080000' 8 # 生成NC文件的时间 9 time_new = '20181228080000' 10 11 12 def get_dir_path(dir_name, time_str): 13 ''' 14 组装目录结

Windows下nc文件传输

起初用的一下命令: 接收端:nc –n –l –p port –vv > xxx 发送端:nc –n ip port < yyy 但是发现数据传输完成后,不会自动断开连接,要手动的断开,这里也容易出错因为不知道到底传输完成没有,很不好. 看了下help,发现了下面的参数: 修改使用的命令如下: 接收端:nc –n –l –p port –vv –w 3 > xxx 发送端:nc –n ip port < yyy 顺利传输文件 当然也可以使用: 接收端:nc –n ip port &

读取NC文件

1. ArcGIS Multidimention tools, Make NetCDF Raster Layer Note:仅通过arcgis很难知道, 显示的图像和真实的图像存在线性关系 通过matlab可查看文件结构: blh Size: 561x401x12 Dimensions: longitude,latitude,time Datatype: int16 Attributes: scale_factor = 0.0326 add_offset = 1.09e+03 _FillValu

使用nc文件传输

1 先建立要发送的文件连接 使用: nc -l 端口号 < 文件路径 2 接收方接收文件 使用: nc 发送方IP 端口 > 文件名 原文地址:http://blog.51cto.com/antivirusjo/2119426

Matlab简单快速读取nc文件

2012以上版本的Matlab都内含nc阅读组件 命令非常简单. 例如 nc的文件名是filename,其中有多个变量,其中data_001是你想要的数据标签. 第一步,查看nc内的所有信息 ncdisp('filename','/', 'full'); 第二步,调出来你想要的变量或者数据, ncread('filename','data_001'). 就是这么简单. 第一步可以用软件hdfexplore软件代替,看起来更舒服方便. ncdisp 得到的结果直接显示了command window

Python提取netCDF数据并转换为csv文件

netCDF全称是network Common Data Format(网络通用数据格式),是由美国大学大气研究协会(University Corporation for Atmospheric Research,UCAR)的Unidata项目科学家针对科学数据的特点开发的,是一种面向数组型并适于网络共享的数据的描述和编码标准.目前,NetCDF广泛应用于大气科学.水文.海洋学.环境模拟.地球物理等诸多领域. 我们使用python对数据进行分析处理,首先我们需要下载安装netCDF4包,可使用p

grads读取nc格式文件

一.通常: 1.grads读取grd和ctl:open  ****.ctl 2.执行gs脚本:run   ****.gs d命令,display展示数据,常用来显示变量,比如rh,rain等 q命令,显示数据内容,常用来显示数据,比如时间dim,ctlinfo等 二.grads也可以读取nc文件 1  打开数据 命令:sdfopen +数据存放路径 2  查看nc数据的ctl 命令:q ctlinfo  (注意查看缺省值,变量名等.不同的nc数据缺省值通常不同,这点容易忽略) 3  用fwrit

netcdf造数据(转)

netcdf造数据 #include "netcdfcpp.h" #include<math.h> #include <iostream> using namespace std; #define lon 1442 #define lat 281 #define lat2 562 int main() { //读取现有矢量场.nc文件,长.宽 NcFile dataReadFile1("global10.nc",NcFile::Replace

NetCDF 入门

一.概述  NetCDF全称为network Common Data Format,中文译法为“网络通用数据格式”,对程序员来说,它和zip.jpeg.bmp文件格式类似,都是一种文件格式的标准.netcdf文件开始的目的是用于存储气象科学中的数据,现在已经成为许多数据采集软件的生成文件的格式.   从数学上来说,netcdf存储的数据就是一个多自变量的单值函数.用公式来说就是f(x,y,z,...)=value, 函数的自变量x,y,z等在netcdf中叫做维(dimension)或坐标轴(a