point cloud - erfahrungen mit postgresql und big data 8 ... · pdf filepoint cloud -...
TRANSCRIPT
![Page 1: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/1.jpg)
Point Cloud - Erfahrungen mit PostgreSQL und Big Data
8. November 2013
Prof. Stefan Keller
![Page 2: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/2.jpg)
PointCloud - Postgres Extension! (1.11.13 Zoo Rapperswil)
Pointcloud... - Prof. Stefan Keller, Geometa Lab HSR PGConf.DE 8.11.13 2
![Page 3: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/3.jpg)
Pointcloud Extension
●PostgreSQL extension for storing point cloud data
●https://github.com/pramsey/pointcloud
●Datentypen und Funktionen
●Hintergrund
●Von Paul Ramsey 2013, boundlessgeo.com
●>5 Monate Entwicklungszeit
●Finanziert von Natural Resources Canada
![Page 4: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/4.jpg)
Was ist Point Cloud?
![Page 5: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/5.jpg)
Point Cloud = LIDAR-Daten
●Mehrdim. Daten von LIDAR-Sensoren
●LIDAR: „Light Detection and Ranging“
●Grosse Datenmengen innert kürzester Zeit
●z.B. 500 GB in 15 min. (LAS-Format)
Credits: http://resources.arcgis.com/
![Page 6: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/6.jpg)
LIDAR ff.
![Page 7: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/7.jpg)
The LIDAR Elephant
Pointcloud... - Prof. Stefan Keller, Geometa Lab HSR PGConf.DE 8.11.13 7
![Page 8: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/8.jpg)
LIDAR Daten
(X, Y, Z, Intensity,
ReturnNumber,
NumberOfReturns,
Classification,
ScanAngleRank, Red,
Green, Blue)
![Page 9: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/9.jpg)
Warum ein eigener Datentyp?
![Page 10: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/10.jpg)
PcPoint(pcid)PcPatch(pcid)
![Page 11: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/11.jpg)
Pointcloud Extension
● PcPatch ist eine Collection von
● ... PcPoint
● ... beschrieben in einem XML Schema
● ... gespeichert in Tabelle pointcloud_formats (und View pointcloud_columns)
● ... verknüpft mit pcid
![Page 12: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/12.jpg)
pointcloud Extension
![Page 13: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/13.jpg)
pointcloud Extension
![Page 14: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/14.jpg)
pointcloud Extension
![Page 15: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/15.jpg)
pointcloud Extension
![Page 16: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/16.jpg)
pointcloud Extension
![Page 17: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/17.jpg)
Benchmark it!
● Load
– No compression, compression● Query BBox
– Bbox size: 200m x 200m, 400m x, 600m x, 800m x, 1000m x
● Query BBox w/Filter
– BBox as above– WHERE elevation ('Z') > 1800
![Page 18: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/18.jpg)
Benchmark Load
1 2 3 4 5 6 70
50
100
150
200
250
Compression: None
Column E
Patch size
Time (sec)
![Page 19: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/19.jpg)
Benchmark Query BBox
1 2 3 4 50
5
10
15
20
25
30
Query time - bounding box
Column E
Query size (metres)
Time (sec)
![Page 20: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/20.jpg)
Benchmark Query BBox w/Filter
1 2 3 4 50
5
10
15
20
25
30
35
40
45
Query time - bounding box w/ filter
Column E
Query size (metres)
Time (sec)
![Page 21: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/21.jpg)
Zusammenfassung
● ...
?
![Page 22: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/22.jpg)
Kontakt
Prof. Stefan KellerGeometa Lab at Institute for SoftwareUniversity of Applied Sciences Rapperswil Oberseestrasse 10 CH-8640 Rapperswil (Switzerland)
Web www.gis.hsr.chE-Mail sfkeller(at)hsr.chTwitter @sfkeller
Pointcloud... - Prof. Stefan Keller, Geometa Lab HSR PGConf.DE 8.11.13 22
![Page 23: Point Cloud - Erfahrungen mit PostgreSQL und Big Data 8 ... · PDF filePoint Cloud - Erfahrungen mit PostgreSQL und Big Data 8. November 2013 Prof. Stefan Keller](https://reader033.vdocument.in/reader033/viewer/2022052313/5a751f3f7f8b9a4b538c3a89/html5/thumbnails/23.jpg)
xxx
●xxx