Free Software and the Future of Database Technology

17,878 views
17,779 views

Published on

Published in: Technology, News & Politics
0 Comments
1 Like
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total views
17,878
On SlideShare
0
From Embeds
0
Number of Embeds
15,963
Actions
Shares
0
Downloads
29
Comments
0
Likes
1
Embeds 0
No embeds

No notes for slide

Free Software and the Future of Database Technology

  1. 1. Free Software  and the  Future of Database Technology Josh Berkus PostgreSQL Core Team     November 14, 2008
  2. 2. Who is Josh? ● PostgreSQL Core Team – a leader of 30,000 participant international  community ● Free software advocate – Since 2000 – OpenOffice, SuSE Linux, PostgreSQL, SPI, OSI ... ● Database Engineer & Application Developer   – PostgreSQL, MySQL, Drizzle, MS SQL, Oracle  
  3. 3. Database Past    
  4. 4. 1998 1. Oracle 2. Informix 3. Sybase 4. Microsoft SQL Server 5. IBM DB2    
  5. 5. 1998 1. Oracle 2. Informix 3. Sybase 4. Microsoft SQL Server 5. IBM DB2 100% Proprietary Databases    
  6. 6. 1998 1. Oracle 2. Informix 3. Sybase 4. Microsoft SQL Server 5. IBM DB2 100% Proprietary Databases   except ...  
  7. 7. 1998 1. Oracle 2. Informix Illustra 3. Sybase 4. Microsoft SQL Server 5. IBM DB2 100% Proprietary Databases   except ...  
  8. 8. 1998 1. Oracle 2. Informix Illustra POSTGRES 3. Sybase 4. Microsoft SQL Server 5. IBM DB2 100% Proprietary Databases   except ...  
  9. 9. 1998 1. Oracle ? 2. Informix Illustra POSTGRES 3. Sybase 4. Microsoft SQL Server 5. IBM DB2 100% Proprietary Databases   except ...  
  10. 10. PostgreSQL: History • 1986: POSTGRES at the University of  California, Berkeley > Michael Stonebraker project > Successor to INGRES • 1994: first commecialized > as Illustra (later merged into Informix) • 1995: open­sourced > Ported to SQL > PostgreSQL Global Development Group    formed  
  11. 11. MySQL: History ● MySQL Server development started in 1994,  marketed by TCX DataKonsult AB ● MySQL AB founded in 1995 by Michael “Monty”  Widenius, David Axmark and Allan Larsson ● Server development based on requirements for  practical production use: few features, but fast  and stable ● Frequent releases with small changes     ● Easy to install and use (15­minute rule)
  12. 12. 2004 1. MySQL 2. Microsoft SQL Server 3. Oracle 4. IBM DB2 5. PostgreSQL    
  13. 13. 2004 1. MySQL 2. Microsoft SQL Server 3. Oracle 4. IBM DB2 5. PostgreSQL 6. Sybase    
  14. 14. Database Present    
  15. 15. 2008 1. MySQL 2. Microsoft SQL Server 3. Oracle 4. IBM DB2 5. PostgreSQL 6. Sybase    
  16. 16. Adoption Momentum     Source: Forrester 2006
  17. 17.    ● Europe's largest online hotel booking site – 20 million visitors a month – 30,000 listed hotels – 100% growth 2005 ­> 2006 ● Built site using MySQL – Dozens of servers – Used Linux­based DRBD replication for high    availability  
  18. 18.   ● Runs .ORG, .INFO domains – 3.8 million domain names – 100% transactional workload ● Built using PostgreSQL – custom replication solution for dozens of servers – free software, low cost let them win the .ORG  hosting bid    
  19. 19. Database Future    
  20. 20. 2009 1. SQLite 2. MySQL  3. Microsoft SQL Server 4. Oracle 5. PostgreSQL 6. IBM DB2    
  21. 21. 2009 1. SQLite What? 2. MySQL  3. Microsoft SQL Server 4. Oracle 5. PostgreSQL 6. IBM DB2    
  22. 22.    ● Embedded SQL database – Tiny memory footprint – Full SQL parser – Transactions, foreign keys ● Designed by Dr. Richard Hipp – In United Kingdom – Released under a public domain license   – 100+ million installations  
  23. 23.    
  24. 24.    
  25. 25. ZopeDB memcached Skytools MySQL NDB BerkeleyDB XML StreamBase Kickfire     Yahoo! Data Warehouse
  26. 26. Scalable Embedded Specialty ZopeDB memcached Skytools MySQL NDB BerkeleyDB XML Business Intelligence Streaming StreamBase Kickfire     Yahoo! Data Warehouse
  27. 27. 1998: Database server    
  28. 28. 2008: Database servers    
  29. 29. 2008: Database servers 1. Large RAM 2. Large Disk 3. Multi­core CPU 4. Solid­state drives     5. Virtualization
  30. 30.    ● Geographic Information Database – stores spatial and positional data ● points, lines, polygons – based on PostgreSQL – power your own Google Maps! ● #1 open source solution – database for all OpenGeo tools   – works with all GIS applications: MapServer, ESRI,    Ka­Map, deCarta
  31. 31. European Fisheries MapServer Interface Positions Position Statuses Status Map Data    
  32. 32. European Fisheries    
  33. 33. Repertorio Nazionale dei Dati  Territoriali ● Public service of Italy – operated by CNIPA – supply national map data for all Italian users – similar to USGS in United States – critical for developing Italian geo service industry ● All free software stack – PostGIS   – Mapserver  
  34. 34. 2010: What is a database server?    
  35. 35. 2010: What is a database server?    
  36. 36. "Cloud" Hosting Large­scale, managed anonymous hosting    
  37. 37. "Cloud" Hosting ● Large numbers of servers – rapid deployment of cloned virtual machines – rapid expansion of capacity ● Needs: – no per­installation licensing fees – low­administration databases – Free Software    
  38. 38.    ● "A Microkernel DBMS for High Performance  Scale­Out Applications" – designed for cloud hosting – small footprint, simple database, limited features – easy to administer in large numbers ● A fork of MySQL – developed by lead MySQL developers   – not released yet  
  39. 39.    PHP / Perl / Python / Ruby memcached    
  40. 40.    ● A "web scale" clustered database – based on concept of Google's BigTable – designed to scale to 1000's of servers – like Memcached, but with persistence – uses Hadoop distributed filesystem ● Non­relational – only stores key­value pairs     – all operations are single­key
  41. 41.    
  42. 42.    
  43. 43.    ● #1 Voice­over­IP service – 350 million users – 5 million SkypeOut calls per day – 6% of worldwide international calling ● SkyTools/PostgreSQL platform – PostgreSQL allowed them to build custom  clustering framework   – 200 servers  
  44. 44.    
  45. 45. Free Software ZopeDB memcached Skytools MySQL NDB BerkeleyDB XML Built with Free Software StreamBase Kickfire     Yahoo! Data Warehouse
  46. 46. New 100% Non­Free Databases    
  47. 47. "Building a new software is like  scaling a mountian.  Using open  source to build on means that I get  to start 80% of the way to the top."   ­Julian Hyde, Chief Architect, SQLStream    
  48. 48. Where are we going? ● More diversity ● More free software databases – some free databases – some built on free software databases ● More innovation ● More free software    
  49. 49. Questions? ● Josh Berkus – josh@postgresql.org ● PostgreSQL project – www.postgresql.org ● Links – EU Fisheries: http://fish.jrc.cec.eu.int/ Booking.com:  http://www.mysql.com/why­mysql/scaleout/booking.html Skytools: https://developer.skype.com/SkypeGarage/DbProjects/SkyTools PostGIS: http://postgis.refractions.net/        Drizzle: http://drizzleproject.org/ Afilias: www.afilias.info         Hypertable: http://hypertable.org/ This talk is copyright 2008 Josh Berkus, and is licensed under the creative commons attribution license All trademarks belong to their respective owners and are used according to principles of fair use here.     Other uses of these trademarks must be authorized by the trademark owner. Josh Berkus speaks only for himself, and not for any of the companies or open source projects

×