NEDOによる。
http://app10.infoc.nedo.go.jp/Nedo_Webgis/top.html
・沿岸から30㎞以内:気象庁GPVからWRFで500mメッシュ。
・沿岸から30㎞以遠:ASCAT
・より広範な海域での長期シミュレーション:過去20年間で10㎞メッシュ
日本周辺海域の洋上風況マップに関する研究(神戸大、大澤輝夫ほか、2009年)
https://www.jstage.jst.go.jp/article/jwea/33/2/33_92/_pdf
QuickSCAT衛星/SeaWindsと、従来のSSM/I, MANAL、LAWEPSを用いた洋上風況マップを比較。
Tuesday, March 13, 2018
水稲栽培管理警戒情報システム
Googleマップによる気象予測データを用いた水稲栽培管理警戒情報システム
http://www.naro.affrc.go.jp/project/results/laboratory/tarc/2010/tohoku10-03.html
http://www.naro.affrc.go.jp/project/results/laboratory/tarc/2010/tohoku10-03.html
OpenWeatherMap
https://openweathermap.org/
https://openweathermap.org/api
プログラムから天気予報をとるために、無料で開発者用APIを提供している。
16日予測 無料天気予報APIのOpenWeatherMapを使ってみる
https://qiita.com/nownabe/items/aeac1ce0977be963a740
https://openweathermap.org/api
プログラムから天気予報をとるために、無料で開発者用APIを提供している。
16日予測 無料天気予報APIのOpenWeatherMapを使ってみる
https://qiita.com/nownabe/items/aeac1ce0977be963a740
Tuesday, March 6, 2018
合成開口レーダ(SAR)
●Xバンド
TerraSAR-X衛星のTSX-SAR(独)2007年~
TanDEM-X衛星(独)2010年~
COSMO-SkyMed-1衛星のSAR-2000(伊)2007年~
COSMO-SkyMed-2衛星のSAR-2000(伊)2007年~
COSMO-SkyMed-3衛星のSAR-2000(伊)2008年~
COSMO-SkyMed-4衛星のSAR-2000(伊)2010年~
KOMPSAT-5衛星のCOSI(韓)2013年~
スペースシャトルのX-SAR 運用停止
●Cバンド(海上風推定手法が確立CMOD?)
ERS-1衛星のAMI(欧州)(1991年~2000年)
ERS-2衛星のAMI(欧州)(1995年~2011年)
RADARSAT-1衛星のSAR(加)(1995年~2013年)
ENVISAT衛星のASAR(欧州)(2002年~2012年)
RADARSAT-2衛星のSAR(加)2007年~
●Lバンド
JERS-1衛星のSAR(経産省/NASDA)(1992年~1998年)
ALOS(だいち)のPALSAR(経産省/JAXA)(2006年~2011年)
ALOS-2(だいち)のPALSAR-2(経産省/JAXA)2014年~
TerraSAR-X衛星のTSX-SAR(独)2007年~
TanDEM-X衛星(独)2010年~
COSMO-SkyMed-1衛星のSAR-2000(伊)2007年~
COSMO-SkyMed-2衛星のSAR-2000(伊)2007年~
COSMO-SkyMed-3衛星のSAR-2000(伊)2008年~
COSMO-SkyMed-4衛星のSAR-2000(伊)2010年~
KOMPSAT-5衛星のCOSI(韓)2013年~
スペースシャトルのX-SAR 運用停止
●Cバンド(海上風推定手法が確立CMOD?)
ERS-1衛星のAMI(欧州)(1991年~2000年)
ERS-2衛星のAMI(欧州)(1995年~2011年)
RADARSAT-1衛星のSAR(加)(1995年~2013年)
ENVISAT衛星のASAR(欧州)(2002年~2012年)
RADARSAT-2衛星のSAR(加)2007年~
Sentinel-1A衛星のC-SAR(欧州)2014年(安い?)
Sentinel-1B衛星のC-SAR(欧州)2016年(安い?)
Sentinel-1B衛星のC-SAR(欧州)2016年(安い?)
スペースシャトルのSRTM1とSRTM3(スキャンSAR)
スペースシャトルのSIR-C 運用停止
JERS-1衛星のSAR(経産省/NASDA)(1992年~1998年)
ALOS(だいち)のPALSAR(経産省/JAXA)(2006年~2011年)
ALOS-2(だいち)のPALSAR-2(経産省/JAXA)2014年~
Thursday, March 1, 2018
Resource Description Framework(RDF)
共通データ形式とグローバルな・・・
RDF入門(W3C 勧告 2004年2月10日)
http://www.asahi-net.or.jp/~ax2s-kmtn/internet/rdf/rdf-primer.html
RDFのデータモデルは、リソース情報を主語(Subject)、述語(Predicate)、目的語(Object)の3つの要素(トリプル)で表します。主語には、リソースを同定するための識別子(Uniform Resource Identifier:URI)を使用します。述語には、主語と目的語の関係を同定するためのURIを使用します。目的語には、数値や文字列、日付などのリテラルか、リソースを表すURIを使用します。
RDF入門(W3C 勧告 2004年2月10日)
http://www.asahi-net.or.jp/~ax2s-kmtn/internet/rdf/rdf-primer.html
RDFのデータモデルは、リソース情報を主語(Subject)、述語(Predicate)、目的語(Object)の3つの要素(トリプル)で表します。主語には、リソースを同定するための識別子(Uniform Resource Identifier:URI)を使用します。述語には、主語と目的語の関係を同定するためのURIを使用します。目的語には、数値や文字列、日付などのリテラルか、リソースを表すURIを使用します。
Wednesday, February 28, 2018
JSON
JSON (JavaScript Object Notation)
JavaScriptのオブジェクト表記構文のサブセットとなっており、XMLと比べると簡潔に構造化されたデータを記述することができる。JavaScriptだけでなく、Java, PHP, Ruby, Python など、様々な言語間のデータ交換、特に Ajax や REST API などで使用されている。
JSONの紹介
https://www.json.org/json-ja.html
ウィキペディア
【初心者必見!】PythonでJSONを扱う方法をわかりやすく解説!
https://www.sejuku.net/blog/41293
【JavaScript入門】JSONの作成とparse() / stringify()の使い方! 2018
https://www.sejuku.net/blog/47716
JSON入門:データ交換のもう一つのアプローチ 2008
https://builder.japan.zdnet.com/script/20365028/
https://builder.japan.zdnet.com/script/20365028/2/
https://builder.japan.zdnet.com/script/20365028/3/
戯れ言++>入門 JSON 2006
http://www.baldanders.info/spiegel/remark/archives/000171.shtml
GeoJSON
JavaScript Object Notation (JSON) を用いて空間データをエンコードし非空間属性を関連付けるファイルフォーマット
ウィキペディア
TopoJSON
https://qiita.com/cieloazul310/items/6dfd73952304ab61cd20
https://qiita.com/cieloazul310/items/9d0e3f67f60d791726dc
https://qiita.com/sand/items/e8c82f1d61ca4e7bdfb7
http://blog.qaramell.com/hunzy/8661
http://visualizing.jp/d3-topojson/
http://blog.node.ws/?p=1206
http://deep-blend.com/jp/2014/06/d3-js-map-japanese-map/
https://shimz.me/blog/d3-js/4131
GeoJSONファイルを拡張した地理情報データの規格。基本的にはD3.jsのみで使われている。
shpファイルやGeoJSONファイルはTopoJSONに変換できる。
JavaScriptのオブジェクト表記構文のサブセットとなっており、XMLと比べると簡潔に構造化されたデータを記述することができる。JavaScriptだけでなく、Java, PHP, Ruby, Python など、様々な言語間のデータ交換、特に Ajax や REST API などで使用されている。
JSONの紹介
https://www.json.org/json-ja.html
ウィキペディア
【初心者必見!】PythonでJSONを扱う方法をわかりやすく解説!
https://www.sejuku.net/blog/41293
【JavaScript入門】JSONの作成とparse() / stringify()の使い方! 2018
https://www.sejuku.net/blog/47716
JSON入門:データ交換のもう一つのアプローチ 2008
https://builder.japan.zdnet.com/script/20365028/
https://builder.japan.zdnet.com/script/20365028/2/
https://builder.japan.zdnet.com/script/20365028/3/
戯れ言++>入門 JSON 2006
http://www.baldanders.info/spiegel/remark/archives/000171.shtml
GeoJSON
JavaScript Object Notation (JSON) を用いて空間データをエンコードし非空間属性を関連付けるファイルフォーマット
ウィキペディア
TopoJSON
https://qiita.com/cieloazul310/items/6dfd73952304ab61cd20
https://qiita.com/cieloazul310/items/9d0e3f67f60d791726dc
https://qiita.com/sand/items/e8c82f1d61ca4e7bdfb7
http://blog.qaramell.com/hunzy/8661
http://visualizing.jp/d3-topojson/
http://blog.node.ws/?p=1206
http://deep-blend.com/jp/2014/06/d3-js-map-japanese-map/
https://shimz.me/blog/d3-js/4131
GeoJSONファイルを拡張した地理情報データの規格。基本的にはD3.jsのみで使われている。
shpファイルやGeoJSONファイルはTopoJSONに変換できる。
Tuesday, February 20, 2018
分類法
コロン分類法:ファセット分類法のひとつ
Wikipedia:https://ja.wikipedia.org/wiki/%E3%82%B3%E3%83%AD%E3%83%B3%E5%88%86%E9%A1%9E%E6%B3%95
ファセット
, パーソナリティー(personality) Who
; マター(matter or property) What
: エネルギー(energy) How
. 空間(space) Where
' 時間(time) When
創始者の講演
Wikipedia:https://ja.wikipedia.org/wiki/%E3%82%B3%E3%83%AD%E3%83%B3%E5%88%86%E9%A1%9E%E6%B3%95
ファセット
図書館分類法
学術分野
Tuesday, February 13, 2018
匿名加工情報
個人情報保護法ガイドライン(匿名加工情報編)
https://www.ppc.go.jp/files/pdf/guidelines04.pdf
「匿名データの作成・提供に係るガイドライン」(平成28年1月22日更新、総務省政策統括官(統計基準担当)決定)
http://www.soumu.go.jp/main_content/000398971.pdf
「匿名加工情報の加工基準について」(平成29年1月31日 個人情報保護委員会事務局)
http://www.soumu.go.jp/main_content/000462276.pdf
「事業者が匿名加工情報の具体的な作成方法を検討するにあたっての参考資料(「匿名加工情報作成マニュアル」)」(平成28年8月8日、経済産業省) http://www.meti.go.jp/press/2016/08/20160808002/20160808002.html
https://www.ppc.go.jp/files/pdf/guidelines04.pdf
「匿名データの作成・提供に係るガイドライン」(平成28年1月22日更新、総務省政策統括官(統計基準担当)決定)
http://www.soumu.go.jp/main_content/000398971.pdf
「匿名加工情報の加工基準について」(平成29年1月31日 個人情報保護委員会事務局)
http://www.soumu.go.jp/main_content/000462276.pdf
「事業者が匿名加工情報の具体的な作成方法を検討するにあたっての参考資料(「匿名加工情報作成マニュアル」)」(平成28年8月8日、経済産業省) http://www.meti.go.jp/press/2016/08/20160808002/20160808002.html
Monday, February 12, 2018
非静力学モデル
○NICAM
本ブログ内:https://earthsimulation.blogspot.com/2017/10/nicam.html
○JMA-NHM
○CReSS
○WRF(研究用MM5, RAMS, ARPSはWRFへの移行・統合が進んでいる?)
本ブログ内:http://earthsimulation.blogspot.jp/search/label/WRF
○MSSG
本ブログ内:http://earthsimulation.blogspot.jp/search/label/MSSG
○asuca
http://www.jma.go.jp/jma/kishou/books/nwpreport/60/No60_all.pdf(2014.3)
○NCEP MSM
NCEP RSMに最小限の変更を加えて非静力学化したもの
○MM5:PSU/NCAR Mesoscale Model Ver.5(WRFの一世代前?)
http://www.mmm.ucar.edu/mm5/
○MRI/NPD-NHM
公式サイト:http://www.mri-jma.go.jp/Project/mrinpd/INDEXJ.htm
・メソスケール気象モデルにより再現された台風0418号の強風場(京大防災研、丸山敬ほか、5km, 1km、2008年)
https://www.jstage.jst.go.jp/article/kazekosymp/20/0/20_0_7/_pdf/-char/ja
次世代非静力学モデルによる高解像度台風予測実験(DFS、MSSG、NICAM、GSMを比較)
http://w3.u-ryukyu.ac.jp/met_rq/notice/201512_NHM-WS/abstract/1201PM08_Wada1.pdf
https://www.jamstec.go.jp/es/jp/output/research/fy2015/A06_Takeuchi.pdf
本ブログ内:https://earthsimulation.blogspot.com/2017/10/nicam.html
○JMA-NHM
○CReSS
○WRF(研究用MM5, RAMS, ARPSはWRFへの移行・統合が進んでいる?)
本ブログ内:http://earthsimulation.blogspot.jp/search/label/WRF
○MSSG
本ブログ内:http://earthsimulation.blogspot.jp/search/label/MSSG
○asuca
http://www.jma.go.jp/jma/kishou/books/nwpreport/60/No60_all.pdf(2014.3)
○NCEP MSM
NCEP RSMに最小限の変更を加えて非静力学化したもの
○MM5:PSU/NCAR Mesoscale Model Ver.5(WRFの一世代前?)
http://www.mmm.ucar.edu/mm5/
○MRI/NPD-NHM
公式サイト:http://www.mri-jma.go.jp/Project/mrinpd/INDEXJ.htm
・メソスケール気象モデルにより再現された台風0418号の強風場(京大防災研、丸山敬ほか、5km, 1km、2008年)
https://www.jstage.jst.go.jp/article/kazekosymp/20/0/20_0_7/_pdf/-char/ja
次世代非静力学モデルによる高解像度台風予測実験(DFS、MSSG、NICAM、GSMを比較)
http://w3.u-ryukyu.ac.jp/met_rq/notice/201512_NHM-WS/abstract/1201PM08_Wada1.pdf
https://www.jamstec.go.jp/es/jp/output/research/fy2015/A06_Takeuchi.pdf
Monday, February 5, 2018
Apache Zeppelin
公式サイト
Sparkを実行できるWebユーザインタフェースのひとつで、Webベースの分析向けノートブック。
インタプリター:Scala, Python, Spark SQL, JDBC, Markdown, Shellなど.
https://zeppelin.apache.org/supported_interpreters.html
Apache SparkのWebUI、いろいろ比較してみた
Apache Zeppelinと Sparkでデータの集計と可視化をお手軽に実現する
”Spark/Hadoop といった分散処理システムに対してコードを実行し,実行結果をグラフとして描画することができます。インタプリタが豊富で,シェル/SQL/scala/python … と分析で必要とされるインタフェースが揃っており,自分でインタプリタを作成することも可能です。
記録されたコードと実行結果を共有できるため,複数人による共同作業に活用しやすいと言えるでしょう。”
Sparkを実行できるWebユーザインタフェースのひとつで、Webベースの分析向けノートブック。
インタプリター:Scala, Python, Spark SQL, JDBC, Markdown, Shellなど.
https://zeppelin.apache.org/supported_interpreters.html
Apache SparkのWebUI、いろいろ比較してみた
Apache Zeppelinと Sparkでデータの集計と可視化をお手軽に実現する
”Spark/Hadoop といった分散処理システムに対してコードを実行し,実行結果をグラフとして描画することができます。インタプリタが豊富で,シェル/SQL/scala/python … と分析で必要とされるインタフェースが揃っており,自分でインタプリタを作成することも可能です。
記録されたコードと実行結果を共有できるため,複数人による共同作業に活用しやすいと言えるでしょう。”
Apache Spark
公式サイト
ウィキペディア
カリフォルニア大学バークレー校のAMPLabで開発され、Apacheソフトウェア財団で管理されている。クラスタコンピューティングに対応した開発環境。
アプリケーションプログラミングインターフェイス(Java、Python、Scala、R)を介して公開される分散タスクディスパッチ、スケジューリング、および基本I/O機能を実装している。
ビッグデータ処理「Spark」、深層学習対応進む
Apache Spark で分散処理入門
ウィキペディア
カリフォルニア大学バークレー校のAMPLabで開発され、Apacheソフトウェア財団で管理されている。クラスタコンピューティングに対応した開発環境。
アプリケーションプログラミングインターフェイス(Java、Python、Scala、R)を介して公開される分散タスクディスパッチ、スケジューリング、および基本I/O機能を実装している。
ビッグデータ処理「Spark」、深層学習対応進む
Apache Spark で分散処理入門
Tuesday, January 30, 2018
GitHub
バージョン管理のためのツールGitを利用したリモートリポジトリ(共有リポジトリ)を提供しているwebサービス。ソフトウェア開発プロジェクトのためのソースコードが管理できる。公開の場合は利用料金が無料。
Wikipedia
参考
GitHub入門:https://qiita.com/ay3/items/8d758ebde41d256a32dc
今さら聞けない!GitHubの使い方【超初心者向け】
https://techacademy.jp/magazine/6235
ある種のデータ(GeoJsonほか)はアップロードすると可視化されるツールがGiHubにあるらしく、オープンデータのプラットフォームに使おうとする動きが進んでいるらしい。
GitHub help:https://help.github.com/categories/working-with-non-code-files/
参考
「とりあえずオープンデータ」から真の情報活用へ。GitHubは日本のオープンガバメントを進化させるか?(前後編)
https://wirelesswire.jp/2015/07/32475/
地方団体のオープンデータ改良版パッケージはオープンソースとしてGitHubで公開 〜これからのオープンデータの進め方
http://blogs.itmedia.co.jp/business20/2017/06/github.html
Wikipedia
参考
GitHub入門:https://qiita.com/ay3/items/8d758ebde41d256a32dc
今さら聞けない!GitHubの使い方【超初心者向け】
https://techacademy.jp/magazine/6235
ある種のデータ(GeoJsonほか)はアップロードすると可視化されるツールがGiHubにあるらしく、オープンデータのプラットフォームに使おうとする動きが進んでいるらしい。
GitHub help:https://help.github.com/categories/working-with-non-code-files/
参考
「とりあえずオープンデータ」から真の情報活用へ。GitHubは日本のオープンガバメントを進化させるか?(前後編)
https://wirelesswire.jp/2015/07/32475/
地方団体のオープンデータ改良版パッケージはオープンソースとしてGitHubで公開 〜これからのオープンデータの進め方
http://blogs.itmedia.co.jp/business20/2017/06/github.html
Kaggle
データ解析のSkillを競うCompetitionサイト。賞金が付くいものもある。
Wikipedia
参考
https://qiita.com/taki_tflare/items/8850ac5ba8b504a171aa
Wikipedia
参考
https://qiita.com/taki_tflare/items/8850ac5ba8b504a171aa
CKANとDKAN
CKANは、オープンデータのWebサイトを作るためのオープンソースソフトウェア。
データカタログの機能も提供する。
CKANについて – data.go.jp
https://fumi.me/2013/12/22/ckan/
DATA.GO.JP:総務省行政管理局が運用するオープンデータに係るデータカタログサイト(CKANを使ってる? 未確認)
http://www.data.go.jp/
CKANを使った自治体オープンデータサイト(福岡県)
https://www.open-governmentdata.org/
CKANのユーザーズマニュアル
https://opendatastack.jp/document/ckan_user_manual/
CKANを使ったサービスのひとつとして、(株)スタイルズのOpenData Stackという自治体向けオープンデータの作成・公開支援サービス がある。
DKAN Open Data Platform
https://getdkan.org/
CKANをCMS化したもの?
DKAN オープンデータ公開支援ソリューションとは?(ANNAI((株))
https://landing.dkan.annai.co.jp/
Comparing DKAN and CKAN
http://dkan.readthedocs.io/en/latest/introduction/dkan-ckan.html
Tomcat:JavaでWebアプリケーションを作成する時の主流ソフトウェア。CKANもDKANもTomcatを使っている。
データカタログの機能も提供する。
CKANについて – data.go.jp
https://fumi.me/2013/12/22/ckan/
DATA.GO.JP:総務省行政管理局が運用するオープンデータに係るデータカタログサイト(CKANを使ってる? 未確認)
http://www.data.go.jp/
CKANを使った自治体オープンデータサイト(福岡県)
https://www.open-governmentdata.org/
CKANのユーザーズマニュアル
https://opendatastack.jp/document/ckan_user_manual/
CKANを使ったサービスのひとつとして、(株)スタイルズのOpenData Stackという自治体向けオープンデータの作成・公開支援サービス がある。
DKAN Open Data Platform
https://getdkan.org/
CKANをCMS化したもの?
DKAN オープンデータ公開支援ソリューションとは?(ANNAI((株))
https://landing.dkan.annai.co.jp/
- ・CSVデータの内容やPDFファイルの内容まで全文検索
- ・プレビュー:表形式(csv、excel)、地図形式(緯度経度情報を含むcsv、kml、shp)、グラフ形式(横・縦軸となるデータを含むcsv)、画像(jpg、jpeg、gif、png)、ドキュメント(pdf)、HTML・JSON
- ・データセットやデータリソースに関する情報をまとめたCSVをシステムで読み込むことで、一括で登録
- ・CSVデータの内容をXML・JSON・JSONP形式のAPIで取得
- ・APIでデータを公開する際に、CSVデータのヘッダ項目を経済産業省が策定している共通語彙基盤(英語)に変換して公開する機能
- ・利用しやすい形式(LOD形式)によるデータ公開を自動的に行う
Comparing DKAN and CKAN
http://dkan.readthedocs.io/en/latest/introduction/dkan-ckan.html
Tomcat:JavaでWebアプリケーションを作成する時の主流ソフトウェア。CKANもDKANもTomcatを使っている。
Thursday, January 18, 2018
Friday, January 12, 2018
OSGeo-Live
https://live.osgeo.org/ja/index.html
幅広く多様なオープンソースの地理空間ソフトウェアを、インストールなどの必要無しに試すことができるブート可能なDVD/USBメディア。
幅広く多様なオープンソースの地理空間ソフトウェアを、インストールなどの必要無しに試すことができるブート可能なDVD/USBメディア。
Thursday, January 4, 2018
GCOM-W1「しずく」/AMSR2
GCOM-W1「しずく」
データ利用ハンドブック(ゲストでログイン)
http://gcom-w1.jaxa.jp/contents/GCOM-W1_SHIZUKU_Data_Users_Handbook_JP.pdf
ADEOS-II/AMSR→Aqua/AMSR-E→GCOM-W1/AMSR2
・水蒸気、雲水量、降水量、海面水温、海上風速は分解能15㎞
・積雪深は30㎞
・海氷密接度と土壌水分は50㎞
データ利用ハンドブック(ゲストでログイン)
http://gcom-w1.jaxa.jp/contents/GCOM-W1_SHIZUKU_Data_Users_Handbook_JP.pdf
ADEOS-II/AMSR→Aqua/AMSR-E→GCOM-W1/AMSR2
・水蒸気、雲水量、降水量、海面水温、海上風速は分解能15㎞
・積雪深は30㎞
・海氷密接度と土壌水分は50㎞
Subscribe to:
Posts (Atom)