Postgre sqlから見るnosql

1. PostgreSQLから見るNoSQL MyNA・JPUG 合同DB勉強会 in 東京

2. What is it? RDBの限界を感じた事ありませんか？

3. What is it? PostgreSQLは新しい選択肢を用意します

4. What is it? 外部データラッパ (Foreign Data Wrapper)

5. What is it? PostgreSQLはRDBの外の世界と繋がる

6. What is it? FDWの使い方と作り方をご紹介します

7. What is it? 内部実装や細かい仕様の話は今日はしません

8. あじぇんだ１自己紹介２外部データラッパーとは３外部データラッパーを使う４外部データラッパーを作る５まとめ

10. 自己紹介名前：曽根壮大（そねたけとも）年齢：３０歳（三人の子供がいます）職業：Webエンジニア所属：日本PostgreSQLユーザ会中国支部支部長技術的にはLL系言語とかRDBが好きです

12. FDWとは外部テーブルを作成するための機能（外部のデータをtableにする）

13. FDWとは外部データにテーブルと同様に SQL文でアクセスできる

14. FDWとは • WHEREやORDER BYが使える • GROUP BYなどの集合関数も使える • JOINなど、他tableと関連付け出来る • 更新や削除も出来る（ただし9.3から）

15. FDWとは外部データ ↓ DB、CSV、JSON、WebAPIなんでも良い

16. FDWとは PostgreSQL to PostgreSQL

17. FDWとは MySQL to PostgreSQL

18. FDWとは MongoDB to PostgreSQL

19. FDWとは Git to PostgreSQL

20. SQL Databases Wrappers • postgres_fdw • oracle_fdw • mysql_fdw • odbc_fdw • jdbc_fdw

21. NoSQL Databases Wrappers • couchdb_fdw • MonetDB FDW • mongo_fdw • redis_fdw • Neo4j fdw • Tycoon FDW

22. Others • git_fdw • ldap_fdw • IMAP_fdw • s3_fdw • www_fdw • OS_fdw

23. FDWとはその他に既に多くの実装がある

25. SQL Databases Wrappers • postgres_fdw • oracle_fdw • mysql_fdw • odbc_fdw • jdbc_fdw

26. FDWを使う MySQLPostgreSQL

27. FDWを使う MySQLPostgreSQL TABLE

28. FDWを使う EXTENSION MySQLPostgreSQL TABLE

29. FDWを使う EXTENSION MySQLPostgreSQL TABLE mysql_fdwをインストールする

30. FDWを使う server EXTENSION USER MAPPING MySQLPostgreSQL TABLE

31. FDWを使う server EXTENSION USER MAPPING MySQLPostgreSQL TABLE MySQLの接続先を設定する MySQLの接続ユーザを設定する

32. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE

33. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE PostgreSQLの外部tableを作成する

34. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client

35. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client SQLで問い合わせ

36. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client SQLで問い合わせ外部tableにアクセス

37. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client アクセス先を確認

38. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client MySQLにクエリを投げる

39. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client 実行結果を取得

40. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client 実行結果を表示

41. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client

42. FDWを使う百聞は一見（デモ）し如かず

44. FDWを使う server FOREIGN TABLE EXTENSION USER MAPPING MySQLPostgreSQL TABLE Client ここを作る

45. FDWを作る現時点ではほんの少しの元気と勇気と PostgreSQLの内部構造に関する知識がある程度必要です。 FDW超詳しい人

46. FDWを作るなんか出来そう！！

47. FDWを作る 1週間後…

48. FDWを作る圧倒的挫折…

49. FDWを作る出来る人の簡単

50. FDWを作る出来る人の簡単 ↓ 凡人の超えられない壁

51. FDWを作るそれなりの覚悟とちゃんとした PostgreSQLとCの知識が必要

52. FDWを作るでも大丈夫

53. FDWを作る簡単にPythonで作る方法がある

54. FDWを作る Multicorn

55. Multicorn FDWを Pythonで実装するためのLibrary

56. Multicorn 案ずるより産むが易し（作ってみたのでデモ）

58. まとめ PostgreSQLから外の世界に繋げる

59. まとめ他DBと結合、集約関数が使える

60. まとめ外部tableはRDB、NoSQL問わない

61. まとめ FDWは既に多くの実装がある（車輪の再発明が要らない）

62. まとめしかし速くは無い（オーバヘッドはそれなりにある）

63. まとめ FDWは作れる ↓ ガッツリ作る場合はC サクッと作る場合はPython

64. まとめ多様性は善

65. まとめ PostgreSQLは多様性を受け入れる

66. まとめ PostgreSQLは多様性を受け入れる

67. 参考資料・公式PostgreSQL Wiki https://wiki.postgresql.org/wiki/Foreign_data_wrappers ・PGXN（PostgreSQL Extension Network) http://pgxn.org/ ・公式ドキュメント(日本語) https://www.postgresql.jp/document/9.4/html/postgres-fdw.html

68. FDWにおける銀の弾丸花田さん(@s87)をWatchする

69. FDWにおける銀の弾丸花田さん(@s87)をWatchする ↓ 今日の会場に潜んでるらしい

70. ご静聴ありがとうございました。

Postgre sqlから見るnosql

Soudai Sone

Transcript