본문 바로가기

자료분석 및 코딩35

[기타 - CDO] NetCDF 분석 가공 - 1. 수치 모델 및 예측 데이터 처리 프로그램 CDO 개요 최근 가장 자주 활용하는 분석 툴인 CDO에 대해 소개해보려 한다. CDO는 Climate Data Operators의 약자로, 기후 및 수치 기상 예측 데이터를 분석하고 처리하는 명령 연산자 모음이다. NetCDF3, 4와 Grib 형식 및 기타 형식의 데이터 처리 및 가공을 할 수 있는 툴이다. 공식 매뉴얼을 보면, 매우 방대한 기능이 설명되어 있고 페이지도 길지만 나는 주로 netCDF 파일을 처리할 때 활용한다. 따라서, 내가 자주 사용하는, netCDF 파일을 분석할 때 자주 사용하는 큼직큼직한 기능들 위주로 설명을 해보려 한다. 1. 다운로드 및 설치 아래의 공식 페이지에서 다운로드가 가능하다. 버전별로 다운로드가 가능하며 메뉴얼 및 공식 문서들도 모두 확인이 가능하다. https://code.. 2023. 8. 17.
[기타 - 쉘] 해양수치모델 하이컴 다운로드 3 - 과거 자료 다운로드 자동화 지난글에서는 하이컴 모델 예측자료를 자동으로 다운로드할 수 있는 방법에 대해 설명하고 스크립트를 작성해보았다(아래 링크). 하지만 실질적으로 예측정보를 사용하는 일은 많지 않고, 업무적으로나 연구적으로나 과거정보를 활용하는 경우가 더 많다. 따라서 오늘은 과거자료를 수집하는 스크립트에 대해 작성해보려 한다. https://ihatenumber.tistory.com/97 [기타 - 쉘] 해양수치모델 하이컴 다운로드 2 - 스크립트를 활용한 자동 다운로드. 쉘, wget, crontab 이번에는 지난글에 이어, 스크립트를 통해 하이컴 정보를 수집하는 방법에 대해 소개해보도록 하겠다. 웹페이지에서 바로 다운로드 받는 방법은 짧은 자료나 단기적으로 자료를 활용할 때는 편 ihatenumber.tistory.co.. 2023. 8. 16.
[기타 - 쉘] 해양수치모델 하이컴 다운로드 2 - 스크립트를 활용한 자동 다운로드. 쉘, wget, crontab 이번에는 지난글에 이어, 스크립트를 통해 하이컴 정보를 수집하는 방법에 대해 소개해보도록 하겠다. 웹페이지에서 바로 다운로드 받는 방법은 짧은 자료나 단기적으로 자료를 활용할 때는 편할수도 있지만, 정기적으로 수집하거나 광범위한 기간을 수집해야 할 경우에는 매우 번거로운 작업이다. 따라서, 이번에는 스크립트를 작성하여 일괄적으로 정보를 수집하는 방법에 대해 알아보도록 하겠다. 1. wget 활용 보통 장기 정보를 수집하거나 정기적으로 정보를 수집할 때는 자료의 크기가 매우 커지게 된다. 또한 이런 경우는 보통 연구 또는 실무적으로 활용하기 위한 경우가 많아 서버에 자료를 수집해두는 경우가 많다. 따라서, 리눅스 운영체제에서 웹페이지의 자료를 다운로드 받는 프로그램인 wget을 활용한다. wget은 web.. 2023. 7. 31.
[기타 - 쉘] 해양수치모델 하이컴 다운로드 1 - 데이터 개요 및 웹 다운로드 이번에는 가장 널리 활용되는 해양수치모델 중 하나인 하이컴을 다운로드 받는 방법에 대해 알아보겠다. 하이컴에 대한 정보는 다들 잘 알테니 생략하고, 실시간 예측정보는 +7일까지, 해수면 높이, 수온, 염분, 해수유동 등 해양정보에 대한 예측 정보를 제공한다. 오늘은 하이컴에서 제공하는 수치모델의 개요와 웹에서 다운로드 받는 방법에 대해 설명해보도록 하겠다. 나는 주로 과거정보를 자주 활용하지만 실시간 예측이든, 과거 정보든 수집 방법에는 큰 차이가 없으니, 굳이 구분하지 않도록 하겠다. 1. 하이컴 홈페이지 접속 글로벌 영역 GOFS 3.1, NCSS로 다운로드 먼저, 아래 링크의 하이컴 홈페이지에 접속한다. 메인페이지에는 간략한 개요 및 설명들이 있고 좌측 메뉴에 데이터 버전, 영역, 모델별로 메뉴가 .. 2023. 7. 12.

티스토리툴바