MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料

Copyright © 2018, Oracle and/or its affiliates. All rights reserved. |
MySQL 8.0で強化されたGIS機能のご紹介
＋α
Yoshiaki Yamasaki / 山﨑由章
MySQL Global Business Unit
MySQL Senior Sales Consultant
updated: 2018/09/09

Copyright © 2018, Oracle and/or its affiliates. All rights reserved.
Safe Harbor Statement
以下の事項は、弊社の一般的な製品の方向性に関する概要を説明するものです。
また、情報提供を唯一の目的とするものであり、いかなる契約にも組み込むことはでき
ません。以下の事項は、マテリアルやコード、機能を提供することをコミットメントするも
のではない為、購買決定を行う際の判断材料になさらないで下さい。
オラクル製品に関して記載されている機能の開発、リリースおよび時期については、
弊社の裁量により決定されます。
2

はじめに
3

今日伝えたいこと
• MySQLにもGIS機能があります！積極的に開発しています！！
• ご意見下さい！
– 本日は終日会場にいます
– 懇親会も参加します
• 試してみて気づいた点があれば、是非フィードバック下さい！
– フィードバックできるページ
• MySQL Bugs
https://bugs.mysql.com/
– バグ報告だけでなく、機能追加リクエストも受け付けています
4

今日伝えたいこと
• FOSS4G Hokkaido 2018で発表いただいた
「MySQL 8.0.11使ってみた」に対する補足
– MySQL8.0.11使ってみた SRIDが実装されたと聞いて
https://foss4g.hokkaido.jp/2018/data/mysql8011tukattemita.pdf
[発表後に追記]
• GDAL 2.3.2がリリースされれば、ogr2ogrを使用してMySQL 8.0へ
シェープファイルをインポートできるようになりそうです！！
5

MySQLのGIS機能の歴史
6

Copyright © 2018, Oracle and/or its affiliates. All rights reserved. 7
MySQLの歴史
4.0
全文検索 (MyISAM)
複数テーブルUPDATE/DELETE
組み込みライブラリ型サーバ
OracleMySQL Sun
3.23
MyISAM
InnoDB
レプリケーション
5.1
プラグガブル・
ストレージエンジン・
アーキテクチャ
パーティショニング
タスクスケジューラ
5.6
全文検索(InnoDB)
memcached API
UNDO表領域
Global Transaction ID
マルチスレッドスレーブ
オンラインALTER TABLE
トランスポータブル表領域
5.5
InnoDBがデフォルトに
準同期型レプリケーション
PERFORMANCE_SCHEMA
1.0-3.22以前
ストレージエンジン (ISAM, HEAP)
マルチスレッド
Windows対応/64bit対応
日本語文字コード (SJIS/UJIS)
5.0
ストアドプロシージャ
ストアドファンクション
カーソル/トリガ/ビュー
XAトランザクション
INFORMATION_SCHEMA
4.1
GIS(MyISAM)
Unicode対応
サブクエリ
CSV, ARCHIVE
ndbcluster
1995 2000 2005 2010 2015
5.7
2015年10月21日 GA
全文検索CJK対応/GIS (InnoDB)
新コストモデルオプティマイザ
ロスレスレプリケーション
マルチソースレプリケーション
グループレプリケーション
セキュリティ強化
データディクショナリ
NoSQLオプション
・ 1995年：スウェーデンにてMySQL AB設立
・(2005年：オラクルがInnobase Oyを買収)
・ 2008年：Sun MicrosystemsがMySQL ABを買収
・ 2010年：オラクルがSun Microsystemsを買収
8.0
2018年4月19日 GA
トランザクショナルDD
MySQLドキュメントストア
Unicode 9.0サポート
国ごとの照合順序を追加
CTE、Window関数
GIS機能の拡張 (InnoDB)

GIS機能の歴史
• MySQL 4.1
– MyISAMでのみGIS機能が使えるようになった
• geometryデータ型
• Spatialインデックス
• Spatial関数
• MySQL 5.0
– InnoDBでもgeometryデータ型、Spatial関数を扱えるようになった
• Spatialインデックスは使用できず
※地理情報システムに関するオープンな規格であるOpenGISに基づいた実装が
されていたが、MySQL開発チームによる独自実装であった
8

GIS機能の歴史
• MySQL 5.7
– Boost.GeometryというC++のオープンソースライブラリを採用して独自実装をやめ、
InnoDBでGIS関連機能を再実装した
• geometryデータ型
• Spatialインデックス
• Spatial関数（使える関数の種類も増加）
• GeoHashサポート
• GeoJSONサポート
※Boost.Geometryコミュニティとも活発に交流し、MySQLチームから
Boost.Geometryへのコントリビュートも行っている
9

GIS機能の歴史
• MySQL 5.7
– 挙動が不明確で分かり難いSpatial関数は非推奨となった
• 例：Contains()は、以下のどちらの関数と同じ動きをするか分かり難いので廃止予定となった
– MBRContains
– ST_Contains()
10

GIS機能の歴史
• MySQL 8.0
– OpenGIS標準準拠
– 演算、データ変換に役立つ各種のSpatial関数の追加
• st_x(geom, x)
• st_y(geom, y)
• st_srid(geom, srid)
– MySQL 5.7で非推奨になった関数の廃止
–Geography サポート
• st_distance() 関数
–Spatial Data、Spatial Index、Spatial関数のSRIDサポート
11

GIS機能の歴史
• MySQL 8.0
– OpenGIS標準準拠
– 演算、データ変換に役立つ各種のSpatial関数の追加
• st_x(geom, x)
• st_y(geom, y)
• st_srid(geom, srid)
– MySQL 5.7で非推奨になった関数の廃止
–Geography サポート
• st_distance() 関数
–Spatial Data、Spatial Index、Spatial関数のSRIDサポート
12

MySQLは積極的に
GIS機能を開発しています！！
13

GIS機能の紹介
14

geometryデータ型
• OpenGISジオメトリモデルに基づいた以下のデータが使用可能
– GEOMETRY、GEOMETRYCOLLECTION
– 点：POINT、MULTIPOINT
– 線：LINESTRING、MULTILINESTRING
– 多角形：POLYGON、MULTIPOLYGON
※GEOMETRYには、POINT、LINESTRING、POLYGONを格納可能
※GEOMETRYCOLLECTIONには、MULTIPOINT、MULTILINESTRING、MULTIPOLYGONを
格納可能
15

Spatial関数
• ジオメトリデータを扱える各種の関数
• 例
– ST_Distance()
• 2つのジオメトリを入力し、2地点間の距離を出力
– ST_Distance_Sphere()
• 2つのジオメトリを入力し、2地点間の最小球面距離を出力
– ST_Contains()
• あるジオメトリに別のジオメトリが含まれているかどうかを判定する
• MySQL 8.0で使えるSpatial関数一覧
– MySQL 8.0 Reference Manual / ... / 12.15.1 Spatial Function Reference
https://dev.mysql.com/doc/refman/8.0/en/spatial-function-reference.html
16

GeoHash
• 経緯度の情報を文字列化したもの
– 例：愛知大学名古屋キャンパス講義棟（経度：136.884242、緯度：35.161329）の
GeoHash
⇒ xn324bujd4<<後略>>
• 特徴
– 文字列なので、データベースで扱いやすい
（インデックスも活用可能）
– GeoHashの情報は点ではなく範囲（矩形のエリア）を表す
– 文字列の桁数で精度を変えることができる
• 10桁を超えると矩形の一辺が1m以下になるので、経緯度の変わりとしても十分利用可能
• 近接エリアの判定等に利用可能
17

GeoHash
• MySQL 5.7以降では、GeoHashを扱うための関数が使用できる
– ST_GeoHash()：経度、緯度(POINT型のデータでも可)を入力し、GeoHashを出力
– ST_LatFromGeoHash()：GeoHashを入力し、経度を出力
– ST_LongFromGeoHash()：GeoHashを入力し、緯度を出力
– ST_PointFromGeoHash()：GeoHashを入力し、POINT型のデータを出力
18
※詳細を解説しているマニュアル
MySQL 8.0 Reference Manual / ... / 12.15.10 Spatial Geohash Functions
https://dev.mysql.com/doc/refman/8.0/en/spatial-geohash-functions.html

GeoJSON
• 空間データを扱うためのフォーマットの一つ
• JSONによる表現で空間データを扱える
– 例：愛知大学名古屋キャンパス講義棟（経度：136.884242、緯度：35.161329）の
GeoJSONによる表現
⇒ {"type": "Point", "coordinates": [136.884242, 35.161329]}
19

GeoJSON
• MySQL 5.7以降では、GeoJSONを扱うための関数が使用できる
– ST_AsGeoJSON()：ジオメトリ型のデータを入力し、GeoJSONデータを出力
– ST_GeomFromGeoJSON()：GeoJSONデータを入力し、ジオメトリ型のデータを出力
20
※詳細を解説しているマニュアル
MySQL 8.0 Reference Manual / ... / 12.15.11 Spatial GeoJSON Functions
https://dev.mysql.com/doc/refman/8.0/en/spatial-geojson-functions.html

MySQL Workbenchの活用
21

MySQL Workbench
• 管理ツール
• SQLエディタ
• Performance Dashboard
• Visual Explain
• GIS Viewer
• ER図作成、フォワード/
リバースエンジニアリング、
など豊富な機能
22
データベースアーキテクト、開発者、DBA のための統合ビジュアルツール
商用版のみの機能：
DBドキュメント出力、データモデルの検証、
MySQL Enterprise Backup GUI、MySQL Enterprise Audit GUI

"Spatial Viewer" and "Geometry Viewer"
• ジオメトリ型のデータを図示可能
23

24

• FOSS4G Hokkaido 2018で、以下の発表をして頂きました
– MySQL8.0.11使ってみた SRIDが実装されたと聞いて
https://foss4g.hokkaido.jp/2018/data/mysql8011tukattemita.pdf
• シェープファイルの取り込み、POINTデータのインサートに以下4つの
方法を試して頂きましたが、いずれもエラーになっています
– MySQL Workbench 8.0.11
– QGIS 2.18.20、3.0.1
– SQL実行（MySQL Workbenchから）
– org2ogr
25

「MySQL使えない！」、
とならないように、補足します
26

エラーの原因
• MySQL Workbench 8.0.11
– ログまで確認できていないため厳密に
判断できませんが、エラー発生時の
画面から判断すると、おそらく環境設定に
依存した問題と思われます
27
おざきさんの発表資料13ページより引用
※MySQL Server 8.0.11はGA（製品版）ですが、
MySQL Workbench 8.0.11はRC（リリース候補版）です。
FOSS4G Hokkaido 2018 以降にMySQL Workbench 8.0.12 GAが
リリースされています。

エラーの原因
• QGIS 2.18.20、3.0.1
– GeometryFromText関数は、MySQL 5.7で非推奨になり、MySQL 8.0で廃止されました
– MySQL 8.0では、ST_GeometryFromText関数が使用できます
28

エラーの原因
• QGIS 2.18.20、3.0.1
– SRIDが-2になっている点については原因まで判断出来ていませんが、
QGIS側（GDAL）の問題と思われます
29

備考：MySQL 5.7と8.0で使用できるSpatial関数
• MySQL 5.7 Reference Manual / 12.15.1 Spatial Function Reference
• MySQL 8.0 Reference Manual / 12.15.1 Spatial Function Reference
30

備考：MySQL 5.7と8.0で使用できるSpatial関数
• MySQL 5.7のマニュアルで、 GeometryFromText関数は非推奨になったので、
ST_GeometryFromText関数を使用するように案内されています
31

エラーの原因
• SQL実行（MySQL Workbenchから）
– 緯度、経度の指定がMySQLの仕様と逆になっていることが原因です
– 緯度、経度の指定を逆にすれば、SQLが実行できます（次ページ参照）
32

エラーの原因
• SQL実行例
33
mysql> INSERT INTO `test_pt` (`the_geom` , `gid` , `point_name`) VALUES(ST_GeometryFromText('POINT
(35.1703251460096 136.88184188928)',4326) ,1, 'nagoya_station');
Query OK, 1 row affected (0.00 sec)
mysql>
mysql> SELECT point_name,ST_AsWKT(the_geom) FROM test_pt;
+----------------+-----------------------------------------+
| point_name | ST_AsWKT(the_geom) |
+----------------+-----------------------------------------+
| nagoya_station | POINT(35.1703251460096 136.88184188928) |
+----------------+-----------------------------------------+
1 row in set (0.00 sec)

補足
• 経度、緯度の指定順番に関して、以下のQiitaの記事が参考になります
– MySQLの空間拡張機能のaxis orderについて
https://qiita.com/yellow_73/items/e15c5414c33874a4f94e
– MySQLのaxis orderは「バグってる」わけではない
https://qiita.com/yellow_73/items/eea0c7fd21e40140b491
– MySQLの空間拡張機能の内部表現のaxis orderについての「チラシの裏」
https://qiita.com/yellow_73/items/0a953c157ff6c603ef7a
34

エラーの原因
• org2ogr
– QGISと同様です（GDALに依存しているため、同様の問題が発生しています）
35

GDALに依存した問題の整理
• GDALを利用して生成されたSQL文を修正すれば、SQLが実行できた
– MySQL 8.0がエラーの原因ではなく、GDALがMySQL 8.0に合わせた
SQLを正しく生成できていないことが原因
• 修正点は以下の3点
– 1．廃止された関数を使用していた
⇒MySQL 8.0で使用できる関数名に修正すれば解決
– 2．SRIDの指定が間違っていた
⇒SRIDを正しく指定すれば解決
– 3．経度、緯度の指定順番が逆になっていた
⇒MySQLの仕様に合わせた順番に修正すれば解決
36

GDALコミュニティに
この状況を伝えたい！
37

GDALコミュニティに
どうアプローチすればいいか、
是非アドバイスください！！
38

39
アドバイスを下さった方々、
私の検証を支援して下さったおざきさん、
ありがとうございます！

• 「廃止された関数名を使用していた問題」については
GDAL 2.3.2で修正されそうです
– ogr2ogr with MySQL 8 #782
https://github.com/OSGeo/gdal/issues/782
– Issue with Mysql import #899
40

• 「SRIDの指定が間違っていた問題」については以下のIssueを登録しました
– ogr2ogr with MySQL 8 (Wrong SRID) #905
• こちらもGDAL 2.3.2で修正されそうです
41

• 「経度、緯度の指定順番が逆になっていた問題」については以下の
Issueを登録しました
– ogr2ogr with MySQL 8 (Wrong Axis Order) #906
• こちらもGDAL 2.3.2で修正されそうです
42

• GDAL 2.3.2がリリースされれば、ogr2ogrを使用してMySQL 8.0へ
シェープファイルをインポートできるようになりそうです！！
• GDAL 2.3.2リリース後、みなさん是非お試し下さい！！
※GDAL 2.3.2を利用したQGISやMySQL Workbenchがリリースされれば、それぞれのツールからも
MySQL 8.0へシェープファイルをインポートできるようになりそうです
43

参考情報
44

参考情報
• マニュアル
– https://dev.mysql.com/doc/refman/8.0/en/
• コミュニティフォーラム
– http://forums.mysql.com/list.php?23
• Boost.Geometry
– http://www.boost.org/libs/geometry
• バグ報告＆機能追加リクエスト
– http://bugs.mysql.com/
45

参考情報
• MySQL開発チームのブログ記事（GIS機能開発者の投稿記事）
https://mysqlserverteam.com/author/nryeng/
– 例）
• Spatial Reference Systems in MySQL 8.0
• Geography in MySQL 8.0
• Axis Order in Spatial Reference Systems
• Geographic Indexes in InnoDB
• Geographic Spatial Reference Systems in MySQL 8.0
• Projected Spatial Reference Systems in MySQL 8.0
• Upgrading Spatial Indexes to MySQL 8.0
• Creating Your Own Spatial Reference Systems in MySQL 8.0
46

参考情報
• MySLQ 8.0 GIS Demos
https://github.com/nryeng/mysql-8.0-gis-demos
– OpenLayers、OpenStreetMap、ProxySimplePHPのタイルキャッシュを使用したデモ
（MySQL 8.0がGA（製品版）になる前に作成されたデモ）
47

その他
48

フィードバック協力者募集中！！
49

MySQL Bugsでのフィードバック
• MySQL Bugs
– https://bugs.mysql.com/
• バグ報告だけでなく、機能追加リクエストも受け付けています
– 特に、日本固有のGIS事情に合わせた機能追加リクエストを登録頂けると助かります
• 「Affect me」ボタンを押すことで、
– 他の人が登録したバグと同じバグに遭遇した
– その機能追加を私も望んでいる
ということを伝えることができます
50

MySQL Bugsでのフィードバック
• 私が登録している機能追加リクエスト
– Bug#88871 ： Add ST_Transform() function to transform geometry data to different SRID
https://bugs.mysql.com/bug.php?id=88871
– Bug#90023 ： [Feature request] Shape File import/export tool
https://bugs.mysql.com/bug.php?id=90023
51

MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料

MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料

Similar to MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料 (20)

More from yoyamasaki

More from yoyamasaki (20)

MySQL 8.0で強化されたGIS機能のご紹介＋α：「FOSS4G Tokai 2018 」での発表資料