Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
地理空間情報・文化財のためのAWS
Search
nokonoko1203
October 08, 2022
Programming
0
2.1k
地理空間情報・文化財のためのAWS
nokonoko1203
October 08, 2022
Tweet
Share
More Decks by nokonoko1203
See All by nokonoko1203
日本全国・都市3D化プロジェクト「PLATEAU」とデータ変換OSS「PLATEAU GIS Converter」の公開
nokonoko1203
4
4k
Hono・Prisma・AWSでGeoなAPI開発
nokonoko1203
5
960
日本全国の都市3D化プロジェクト「PLATEAU」の紹介
nokonoko1203
0
81
PLATEAU Hands-on 11 PLATEAUデータの高さや位置合わせについて理解する
nokonoko1203
0
370
20240626_PLATEAU_AWARD説明会
nokonoko1203
0
350
Rustで「プリズモイダル法」を利用して「土量計算」をガチでやる
nokonoko1203
1
660
RustでGISなOSS
nokonoko1203
1
570
20230705_PLATEAU_AWARD説明会
nokonoko1203
0
560
MIERUNE_GIS利用における課題
nokonoko1203
1
950
Other Decks in Programming
See All in Programming
定理証明プラットフォーム lapisla.net
abap34
1
1.7k
[JAWS-UG横浜 #79] re:Invent 2024 の DB アップデートは Multi-Region!
maroon1st
1
140
データの整合性を保つ非同期処理アーキテクチャパターン / Async Architecture Patterns
mokuo
41
15k
一休.com のログイン体験を支える技術 〜Web Components x Vue.js 活用事例と最適化について〜
atsumim
0
110
JavaScriptツール群「UnJS」を5分で一気に駆け巡る!
k1tikurisu
10
1.8k
『GO』アプリ データ基盤のログ収集システムコスト削減
mot_techtalk
0
110
法律の脱レガシーに学ぶフロントエンド刷新
oguemon
5
730
第3回 Snowflake 中部ユーザ会- dbt × Snowflake ハンズオン
hoto17296
4
360
TokyoR116_BeginnersSession1_環境構築
kotatyamtema
0
110
CNCF Project の作者が考えている OSS の運営
utam0k
5
690
知られざるDMMデータエンジニアの生態 〜かつてツチノコと呼ばれし者〜
takaha4k
4
1.3k
ISUCON14公式反省会LT: 社内ISUCONの話
astj
PRO
0
180
Featured
See All Featured
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
132
33k
Being A Developer After 40
akosma
89
590k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
33
2.1k
Rails Girls Zürich Keynote
gr2m
94
13k
How to Ace a Technical Interview
jacobian
276
23k
Fireside Chat
paigeccino
34
3.2k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
31
2.1k
Dealing with People You Can't Stand - Big Design 2015
cassininazir
366
25k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
8
270
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
45
2.3k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
Transcript
©OpenStreetMap contributors 地理空間情報・文化財のためのAWS 西尾 悟
©Project PLATEAU / MLIT Japan 西尾 悟 NISHIO Satoru ・前職:
建設コンサルタントとして河川構造物の設計に従事 ・現職: Web/GISアプリケーションの開発およびクラウド基 盤の構築等を行うエンジニア ・趣味: 点群データの機械学習・3DCGの作成・大規模GIS データのGPUを利用した高速処理など https://twitter.com/nokonoko_1203 https://qiita.com/nokonoko_1203 WebGISエンジニア 自己紹介
© 地理院地図 全国最新写真(シームレス) MIERUNEはこんな会社です MIERUNEは位置情報に関する 豊富な技術や実績を持つ ソリューションカンパニーです み え る ね
© 地理院地図 全国最新写真(シームレス) 位置情報は身近なところで使われています インフラ 防災 交通 ナビ ゲーム 環境
マーケティ ング 位置情報 データ (GIS)
©Project PLATEAU / MLIT Japan 事業紹介 ⚫商用ソフトより使いやすく、 多機能 ⚫プラグイン開発や講習会を 実施中
QGIS 世界的なOSS-GISソフトウェア
©Project PLATEAU / MLIT Japan 事業紹介 ⚫自由で美しいウェブ地図 ⚫低廉なコストで導入可能 ⚫カスタマイズや開発も可能 MapTiler
Google MapsやMapBox から乗り換えませんか
©Project PLATEAU / MLIT Japan 事業紹介 ⚫組織内に散らばっている データを一括で共有 ⚫最新データが明白に ⚫ソフトを入れずに閲覧可能
MIERUNE BASE GISデータ共有サービス
©OpenStreetMap contributors Python MIERUNEのソリューション QGIS DEM 点群 3D MapTiler PLATEAU
オープンソース 位置情報 可視化 標高断面図 住所検索 ルート検索 気象データ GTFS LiDAR FOSS4G OSGeo OpenStreetMap MapLible deck.gl Cesium Mapbox OpenLayers Turf.js Geoserver OpenMapTiles GeoDjango Amazon Location Service AWS Leaflet
© 地理院地図 全国最新写真(シームレス) 仲間を募集中 We are hiring! MIERUNE 検索 未来に挑戦する仲間を
募集しています
©OpenStreetMap contributors 01 全国遺跡報告総覧 02 WebGISとは 03 システム構築・データ配信 目次
©OpenStreetMap contributors 全国遺跡報告総覧 01
©Project PLATEAU / MLIT Japan 文化財とは 文化財はたくさんある https://bunkazai.pref.fukui.lg.jp/child-whatis/ • 建造物(けんぞうぶつ)
• 美術工芸品(びじゅつこうげいひん) • 無形文化財(むけいぶんかざい) • 民俗文化財(みんぞくぶんかざい) • 記念物(きねんぶつ) • 文化的景観(ぶんかてきけいかん) • 伝統的建造物群保存地区(でんとうてきけんぞうぶつぐんほぞんちく) • 選定保存技術(せんていほぞんぎじゅつ) • 埋蔵文化財(まいぞうぶんかざい)
©Project PLATEAU / MLIT Japan 文化財とは 文化財はたくさんある https://bunkazai.pref.fukui.lg.jp/child-whatis/ • 建造物(けんぞうぶつ)
• 美術工芸品(びじゅつこうげいひん) • 無形文化財(むけいぶんかざい) • 民俗文化財(みんぞくぶんかざい) • 記念物(きねんぶつ) • 文化的景観(ぶんかてきけいかん) • 伝統的建造物群保存地区(でんとうてきけんぞうぶつぐんほぞんちく) • 選定保存技術(せんていほぞんぎじゅつ) • 埋蔵文化財(まいぞうぶんかざい)
©Project PLATEAU / MLIT Japan 全国遺跡報告総覧とは 遺跡報告総覧=埋蔵文化財の発掘調査報告書 https://sitereports.nabunken.go.jp/ja/abouts/guide • 埋蔵文化財の発掘調査報
告書等を全文電子化 • 全文検索・閲覧が可能 • 報告書は軽量化して配布
©Project PLATEAU / MLIT Japan 全国遺跡報告総覧とは 遺跡の位置や発掘された遺物の詳細が記載 https://sitereports.nabunken.go.jp/ja
©Project PLATEAU / MLIT Japan 文化財総覧WebGISとは 遺跡情報を地図上に可視化 https://heritagemap.nabunken.go.jp/
©OpenStreetMap contributors WebGISとは 02
©Project PLATEAU / MLIT Japan WebGISとは GISデータがWebで簡単に見れるもの
©Project PLATEAU / MLIT Japan MapLibre GL JS OSSの地理データライブラリ •
AWSもスポンサーをしている • Amazon Location Serviceのチュートリアルにも利用 https://maplibre.org/
©OpenStreetMap contributors システム構築・データ配信 03
©Project PLATEAU / MLIT Japan システム構築 システム構築のポイント • 遺跡データ60万件超を地図上に表示可能 •
データの高速な検索が可能 • データは定期的に更新される • 利用者数は予測できない
©Project PLATEAU / MLIT Japan システム構築 • ポリゴン→1レコードのサイズが一般的なDBの10倍程度まで膨れ上がる
©Project PLATEAU / MLIT Japan システム構築 GeoJSONを静的に配信?(JSON) • 100MBをゆうに超える •
描画に最適化されたMapLibre GL JSでも重たい • 表示・検索に難あり • タイル生成が24時間以上かかるのでデータ更新に難あり • 地物が分割されるので検索に難あり ベクタータイル配信?(Protocol Buffers)
©Project PLATEAU / MLIT Japan システム構築 APIで配信?(JSON) • 検索に全件ヒットした場合は静的に配信するのと変わらない •
画面範囲の検索でもズームアウトすると全件ヒット • 表示に難あり 地物を全て地図上に配置することは望ましくない →クラスター表示を行う
©Project PLATEAU / MLIT Japan システム構築 クラスター表示って? • 一定範囲をまとめて表示 •
少なければ小さく表示 • 多ければ大きく表示 • 範囲内の地物数は円の中に表示
©Project PLATEAU / MLIT Japan システム構築 技術的な課題と解決法 • 高速地図描画 ◦
クラスター表示 ◦ 画面表示範囲で検索結果をフィルタリング • 検索性 ◦ 全文検索の導入
©Project PLATEAU / MLIT Japan システム構築 OpenSearchがとても便利 • 全文検索の導入 ◦
OpenSearch • クラスター表示 ◦ OpenSearch • 画面表示範囲で検索結果をフィルタリング ◦ OpenSearch
©Project PLATEAU / MLIT Japan システム構築 フロントエンド WebAPI OpenSearch 検索キーワード
BBOX ズームレベル キーワードのパース・ クラスタリング可否指定 ヒットしたドキュメントを返却 GeoJSONでレスポンス
©Project PLATEAU / MLIT Japan システム構築 大量のリクエストが発生するがAWSで解決 • ロードバランサー ◦
CloudFront・ALB CloudFront ALB target group OpenSearch
© 地理院地図 全国最新写真(シームレス) MapLibre GL JSでWebGISの作成を簡略化 OpenSearchはGIS・文化財にとって強力な選択肢 WebGISにおいても、AWSは大活躍 まとめ