GDAL:重投影netCDF文件

10

我正在尝试使用GDAL将netCDF文件转换为EPSG:3857以便与Mapbox一起使用,这将是.nc到.nc的转换,而不是栅格化。我可以使用GDAL或其他方法来完成此操作。在将此数据发送到控制台应用程序之前,必须重新投影此数据,而这个过程需要几周时间来找到解决方案 - 我认为这很简单。

我正在处理着色卫星数据。当组合和处理三个.nc文件(蓝色、红色和红外线)时,会创建彩色图像。在下载这3个文件(从Amazon AWS)后,一个Python控制台应用程序进行处理,并将.jpg倒入同一文件夹中。该应用程序的源代码位于这里,以验证数据。(由于文件分辨率超高,因此速度很慢)。

我尝试的代码是:

gdalwarp -t_srs EPSG:3857 test.nc test-projected.nc

然而,已经尝试了其他几种变化,但都无效。

我不是专业人士,但我是否应该使用gdalwarp来做到这一点?我只想更改投影 - 仅此而已,以便Python应用程序仍然可以使用数据。它必须能够使用重新投影的文件创建.jpg。

以下链接是需要转换的数据样本:

AWS上的 .nc 文件 > 色彩通道 1(蓝色 1km 分辨率)

AWS上的 .nc 文件 > 色彩通道 2(红色,0.5km 分辨率更高且文件大小更大)

AWS上的 .nc 文件 > 色彩通道 3(红外线 - 用作绿色)

此外,其他人使用类似的投影通过pyproj模块在https://github.com/blaylockbk/pyBKB_v2/tree/master/BB_GOES16中完成了这项工作。(我的必须是EPSG:3857,以便与Mapbox一起使用)。如果Python代码被修改为一次完成所有操作,那就太好了。我正在发放赏金,这是最后的希望。

expected result

我不懂Python,所以大部分时间都在尝试GDAL - 然而,将可行的Python代码添加到我的源代码中以实现预期结果(或有效的GDAL脚本)将赢得赏金。


1
很遗憾,Github链接已失效。 - user8408080
现在应该已经被纠正了。 - David
2个回答

6

这是我的解决方案:

# -*- coding: utf-8 -*-
"""
Created on Mon Mar  4 17:39:45 2019

@author: Guy Serbin
"""

import os, sys, glob, argparse
from osgeo import gdal, osr
from scipy.misc import imresize

parser = argparse.ArgumentParser(description = 'Script to create CONUS true color image from GOES 16 L1b data.')
parser.add_argument('-i', '--indir', type = str, default = r'C:\Data\Freelancer\DavidHolcomb', help = 'Input directory name.')
parser.add_argument('-o', '--outdir', type = str, default = None, help = 'Output directory name.')
parser.add_argument('-p', '--proj', type = int, default = 3857, help = 'Output projection, must be EPSG number.')
args = parser.parse_args()

if not args.indir:
    print('ERROR: --indir not set. exiting.')
    sys.exit()
elif not os.path.isdir(args.indir):
    print('ERROR: --indir not set to a valid directory path. exiting.')
    sys.exit()

if not args.outdir:
    print('WARNING: --outdir not set. Output will be written to --indir.')
    args.outdir = args.indir

o_srs = osr.SpatialReference()
o_srs.ImportFromEPSG(args.proj)


# based upon code ripped from https://riptutorial.com/gdal/example/25859/read-a-netcdf-file---nc--with-python-gdal

# Path of netCDF file
netcdf_red = glob.glob(os.path.join(args.indir, 'OR_ABI-L1b-RadC-M3C02_G16_s*.nc'))[0]
netcdf_green = glob.glob(os.path.join(args.indir, 'OR_ABI-L1b-RadC-M3C03_G16_s*.nc'))[0]
netcdf_blue = glob.glob(os.path.join(args.indir, 'OR_ABI-L1b-RadC-M3C01_G16_s*.nc'))[0]
baselist = os.path.basename(netcdf_blue).split('_')

outputfilename = os.path.join(args.outdir, 'OR_ABI-L1b-RadC-M3TrueColor_1_G16_{}.tif'.format(baselist[3]))
print('Output file will be: {}'.format(outputfilename))
tempfile = os.path.join(args.outdir, 'temp.tif')

# Specify the layer name to read
layer_name = "Rad"

# Open netcdf file.nc with gdal
print('Opening red band file: {}'.format(netcdf_red))
dsR = gdal.Open("NETCDF:{0}:{1}".format(netcdf_red, layer_name))
print('Opening green band file: {}'.format(netcdf_green))
dsG = gdal.Open("NETCDF:{0}:{1}".format(netcdf_green, layer_name))
print('Opening blue band file: {}'.format(netcdf_blue))
dsB = gdal.Open("NETCDF:{0}:{1}".format(netcdf_blue, layer_name))
red_srs = osr.SpatialReference()
red_srs.ImportFromWkt(dsR.GetProjectionRef())
i_srs = osr.SpatialReference()
i_srs.ImportFromWkt(dsG.GetProjectionRef())
GeoT = dsG.GetGeoTransform()
print(i_srs.ExportToWkt())
red_transform = osr.CoordinateTransformation(red_srs, o_srs)
transform = osr.CoordinateTransformation(i_srs, o_srs)

# Read full data from netcdf

print('Reading red band into memory.')
red = dsR.ReadAsArray(0, 0, dsR.RasterXSize, dsR.RasterYSize)
print('Resizing red band to match green and blue bands.')
red = imresize(red, 50, interp = 'bicubic')
print('Reading green band into memory.')
green = dsG.ReadAsArray(0, 0, dsG.RasterXSize, dsG.RasterYSize)
print('Reading blue band into memory.')
blue = dsB.ReadAsArray(0, 0, dsB.RasterXSize, dsB.RasterYSize)
red[red < 0] = 0
green[green < 0] = 0
blue[blue < 0] = 0

# Stack data and output
print('Stacking data.')
driver = gdal.GetDriverByName('GTiff')
stack = driver.Create('/vsimem/stack.tif', dsB.RasterXSize, dsB.RasterYSize, 3, gdal.GDT_Int16)
stack.SetProjection(i_srs.ExportToWkt())
stack.SetGeoTransform(GeoT)
stack.GetRasterBand(1).WriteArray(red)
stack.GetRasterBand(2).WriteArray(green)
stack.GetRasterBand(3).WriteArray(blue)
print('Warping data to new projection.')
warped = gdal.Warp('/vsimem/warped.tif', stack, dstSRS = o_srs, outputType = gdal.GDT_Int16)

print('Writing output to disk.')

outRaster = gdal.Translate(outputfilename, '/vsimem/warped.tif')

outRaster = None
red = None
green = None
blue = None
tmp_ds = None
dsR = None
dsG = None
dsB = None

print('Processing complete.')

亲爱的Guy Serbin,感谢您提供这个好的解决方案。有一件事让我想知道的是如何在这个WARPING转换中管理其他维度。例如,有几种情况下NETCDF文件具有像时间这样的维度,甚至可能还有其他维度(比如离地高度)。目前,上面的脚本将会错误处理NETCDF中的这些其他维度。您是否知道一个好的方法来处理NETCDF中的所有维度,在进行空间重投影时? - Philipe Riskalla Leal

6
您可以使用rioxarray来实现此操作。这里有一个示例:https://corteva.github.io/rioxarray/html/examples/reproject.html。下面是一个针对您的用例的示例:
import rioxarray

xds = rioxarray.open_rasterio("OR_ABI-L1b-RadC-M3C01_G16_s20190621802131_e20190621804504_c20190621804546.nc")

<xarray.Dataset>
Dimensions:      (band: 1, x: 5000, y: 3000)
Coordinates:
  * y            (y) float64 1.584e+06 1.585e+06 ... 4.588e+06 4.589e+06
  * x            (x) float64 -3.627e+06 -3.626e+06 ... 1.381e+06 1.382e+06
  * band         (band) int64 1
    spatial_ref  int64 0
Data variables:
    Rad          (band, y, x) int16 ...
    DQF          (band, y, x) int8 ...

xds.rio.crs

CRS.from_wkt('PROJCS["unnamed",GEOGCS["unknown",DATUM["unnamed",SPHEROID["Spheroid",6378137,298.2572221]],PRIMEM["Greenwich",0],UNIT["degree",0.0174532925199433,AUTHORITY["EPSG","9122"]]],PROJECTION["Geostationary_Satellite"],PARAMETER["central_meridian",-75],PARAMETER["satellite_height",35786023],PARAMETER["false_easting",0],PARAMETER["false_northing",0],UNIT["metre",1,AUTHORITY["EPSG","9001"]],AXIS["Easting",EAST],AXIS["Northing",NORTH],EXTENSION["PROJ4","+proj=geos +lon_0=-75 +h=35786023 +x_0=0 +y_0=0 +ellps=GRS80 +units=m +no_defs +sweep=x"]]')

然后,重新投影:

xds_3857 = xds.rio.reproject("epsg:3857")

<xarray.Dataset>
Dimensions:      (band: 1, x: 7693, y: 4242)
Coordinates:
  * x            (x) float64 -1.691e+07 -1.691e+07 ... -5.892e+06 -5.891e+06
  * y            (y) float64 7.714e+06 7.712e+06 ... 1.641e+06 1.64e+06
  * band         (band) int64 1
    spatial_ref  int64 0
Data variables:
    Rad          (band, y, x) int16 1023 1023 1023 1023 ... 1023 1023 1023 1023
    DQF          (band, y, x) int8 0 0 0 0 0 0 0 0 0 0 0 ... 0 0 0 0 0 0 0 0 0 0
Attributes:
    creation_date:  2019-09-25 01:02:54.590053

xds_3857.rio.crs

CRS.from_epsg(3857)

写入netcdf:

xds_3857.to_netcdf("epsg3857.nc")

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接