@julioviegas
Engenheiro de Software
Palestrante
  ~15 anos trabalhando com tecnologia

  Instrutor, arquiteto, mentor e engenheiro de software e
  eletronica
...
Agenda
 NoSQL?

 Redis

 MongoDB

 CouchDB

 Memcached

 Cassandra
NoSQL?
 !SQL

 !ACID

 Distribuido

 Cloud

 Performance

 Persistencia variada

 Consistencia

 Sem schema/tipo
NoSQL?
 Persistencia ou RAM

 Objeto

 Tabular

 Tupla

 Documento

 Imagem

 Chave/Valor

 Hierarquico/Estruturado
NoSQL?
 Geracao web

 RDBMS nao eh arquitetura padrao

 Centralizar?

 Consistencia?

 Fail-over?

 Backup/recovery?

 Uso...
NoSQL?
 CAP

    Consistencia: nem sempre o dado visualizado eh o mais
    atual

    Disponibilidade: sempre no ar, rapid...
Redis
 Em memoria e persistencia

 Tipos de dados: Strings, Lists, Sets e SortedSets

 Atomico

 Clientes para varias ling...
Redis
 Instalacao: download, unpack, make

 Servidor: ./redis-server

 Cliente(teste): ./redis-cli set key value; ./redis-...
MongoDB
 Muitas funcionalidades, grandes cases

 Orientado a documentos estilo JSON

 Indexacao de atributos

 Auto Shardi...
MongoDB
 Online shell e tutorial em http://www.mongodb.org/#
MongoDB
 Instalacao: binarios ou via compilacao de fontes

 Servidor: ./mongod

 Cliente(teste): ./mongo

 Salvando dados:...
CouchDB
 JSON

 Javascript

 RESTful API

 Escrito em Erlang

 Indexavel

 Suporte a consultas

 Distribuido e replicavel
CouchDB
 Views

 Schema free

 Javascript Map/Reduce

 Versionamento

 BLOB
CouchDB
 Instalacao: unpack; ./configure; make; sudo make install

 Servidor: sudo -u couchdb ./couchdb

 Teste: http://lo...
CouchDB
     Requisicao HTTP RESTful PUT

PUT /example/some_doc_id HTTP/1.0
Content-Length: 29
Content-Type: application/j...
CouchDB
   Requisicao HTTP RESTful GET(via browser)

http://localhost:5984/example/some_doc_id

   Resposta HTTP(via brows...
Memcached
 Em memoria apenas

 Chave/valor

 Suporte a timeout

 Reciclavel usando LRU

 Toda a logica de hashing, shardin...
Memcached
 Valores de ateh 1Mb

 stats

 atomico

 sem: autenticacao, failover, replicacao
Memcached
   Instalacao: unpack; ./configure; make; sudo make install

   Necessita de libevent

   Servidor: ./memcached ...
Cassandra
 Criado pelo Facebook, e usado em parte dele

 Baseado no Amazon Dynamo

 Usuarios: Digg, Reddit, Cisco Webex, R...
Cassandra
 MySQL: muito IO imprevisivel!

 Solucoes baseadas em arquivos precisam de lock!

 Armazenamento descentralizado...
Cassandra
 Disponibilidade e tolerancia a perda de particoes sobre
 consistencia(CAP)

 Consistencia configuravel

 Tradeo...
Cassandra
 Administracao minima

 Sem ponto unico de falha

 Particionador configuravel

 Replicacao configuravel: quantid...
Cassandra
 Escritas: quorum(maioria) ou assincronas(1), sem leituras,
 posicionamento, rapida(0.12ms vs 300ms do MySQL),
 ...
Cassandra
 Keyspace: grupo de chaves ou banco/schema

 Column: chave e valor ou tabela de uma coluna e linha
Cassandra
 SuperColumn: mapa ou tabela de n colunas e uma linha
 apenas
Cassandra
 ColumnFamily: lista de mapas ou tabela
Cassandra
 SuperColumnFamily: grupos de SuperColumn usando
 chave
Cassandra
 Configuravel em storage-conf.xml

 Ordenacao eh feita na insercao, usando o nome da coluna

 ColumnFamily Compa...
Cassandra
 $CASSANDRA_HOME/conf/storage-conf.xml

 ClusterName

 AutoBootstrap

 Keyspace

    ColumnFamily

    ReplicaPl...
Cassandra
 Autenticador

 Particionador: Random por padrao ou ordenado

 InitialToken: armazena chaves com token similar

...
Cassandra
 Apache Thrift

 ConsistencyLevel: ZERO, ANY, ONE, QUORUM, ALL

 ColumnOrSuperColumn

 Column

 SuperColumn

 Co...
Cassandra
 SlicePredicate

 SliceRange

 KeyRange

 KeySlice


 Mutation

 Deletion
Cassandra
 DEMO
???
Obrigado! :)

        @julioviegas
Engenheiro de Software
Upcoming SlideShare
Loading in...5
×

NoSQL Livre

3,750

Published on

0 Comments
2 Likes
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total Views
3,750
On Slideshare
0
From Embeds
0
Number of Embeds
0
Actions
Shares
0
Downloads
98
Comments
0
Likes
2
Embeds 0
No embeds

No notes for slide

NoSQL Livre

  1. 1. @julioviegas Engenheiro de Software
  2. 2. Palestrante ~15 anos trabalhando com tecnologia Instrutor, arquiteto, mentor e engenheiro de software e eletronica Participa de comunidades de usuarios: RSJUG, XP-RS, CEJUG, Open4Education, NoSQLBr... Sun Certified Trainer, SCEA 1 e 5, SCDJWS 1.4 e 5, SCWCD 1.4, SCBCD 5, SCJP 5, SCJA 1 Engenheiro de Software da Summa Technologies e Instrutor Globalcode
  3. 3. Agenda NoSQL? Redis MongoDB CouchDB Memcached Cassandra
  4. 4. NoSQL? !SQL !ACID Distribuido Cloud Performance Persistencia variada Consistencia Sem schema/tipo
  5. 5. NoSQL? Persistencia ou RAM Objeto Tabular Tupla Documento Imagem Chave/Valor Hierarquico/Estruturado
  6. 6. NoSQL? Geracao web RDBMS nao eh arquitetura padrao Centralizar? Consistencia? Fail-over? Backup/recovery? Uso como cache: mais disco, mais memoria
  7. 7. NoSQL? CAP Consistencia: nem sempre o dado visualizado eh o mais atual Disponibilidade: sempre no ar, rapido e otima resposta Particionamento: o sistema opera mesmo perdendo dados Disponibilidade versus consistencia Latencia versus consistencia Centralizacao versus particionamento
  8. 8. Redis Em memoria e persistencia Tipos de dados: Strings, Lists, Sets e SortedSets Atomico Clientes para varias linguagens Master/Slave Sharding manual Configuracao, gerenciamento e instalacao simples
  9. 9. Redis Instalacao: download, unpack, make Servidor: ./redis-server Cliente(teste): ./redis-cli set key value; ./redis-cli get key
  10. 10. MongoDB Muitas funcionalidades, grandes cases Orientado a documentos estilo JSON Indexacao de atributos Auto Sharding, Resharding, Replicacao, Alta Disponibilidade Muitas facilidades para consulta Atualizacoes de documentos ou dados pontuais internos Map Reduce
  11. 11. MongoDB Online shell e tutorial em http://www.mongodb.org/#
  12. 12. MongoDB Instalacao: binarios ou via compilacao de fontes Servidor: ./mongod Cliente(teste): ./mongo Salvando dados: db.foo.save( { a : 1 } ) Lendo dados: db.foo.find() Consultas: db.foo.find( { $or : [ { a : 1 } , { b : 2 } ] } )
  13. 13. CouchDB JSON Javascript RESTful API Escrito em Erlang Indexavel Suporte a consultas Distribuido e replicavel
  14. 14. CouchDB Views Schema free Javascript Map/Reduce Versionamento BLOB
  15. 15. CouchDB Instalacao: unpack; ./configure; make; sudo make install Servidor: sudo -u couchdb ./couchdb Teste: http://localhost:5984/_utils Cliente: curl http://localhost:5984 # {"couchdb":"Welcome"}
  16. 16. CouchDB Requisicao HTTP RESTful PUT PUT /example/some_doc_id HTTP/1.0 Content-Length: 29 Content-Type: application/json {"greetings":"Hello, World!"} Resposta HTTP HTTP/1.0 201 Created Server: CouchDB/0.9.0 (Erlang OTP/R12B) Etag: "1-518824332" Date: Wed, 24 Jun 2009 13:33:11 GMT Content-Type: text/plain;charset=utf-8 Content-Length: 51 Cache-Control: must-revalidate {"ok":true,"id":"some_doc_id","rev":"1-518824332"}
  17. 17. CouchDB Requisicao HTTP RESTful GET(via browser) http://localhost:5984/example/some_doc_id Resposta HTTP(via browser) {"_id":"some_doc_id","_rev":"1-518824332","greetings":"Hello, World!"}
  18. 18. Memcached Em memoria apenas Chave/valor Suporte a timeout Reciclavel usando LRU Toda a logica de hashing, sharding e particionamento no cliente Protocolo binario ou texto. Em texto vc pode usar comandos via telnet.
  19. 19. Memcached Valores de ateh 1Mb stats atomico sem: autenticacao, failover, replicacao
  20. 20. Memcached Instalacao: unpack; ./configure; make; sudo make install Necessita de libevent Servidor: ./memcached -d -m 4096 -p 11212 Cliente: function get_foo(foo_id) foo = memcached_get("foo:" . foo_id) return foo if defined foo foo = fetch_foo_from_database(foo_id) memcached_set("foo:" . foo_id, foo) return foo end
  21. 21. Cassandra Criado pelo Facebook, e usado em parte dele Baseado no Amazon Dynamo Usuarios: Digg, Reddit, Cisco Webex, Rackspace, Twitter Chave+valor Tipos dinamicos versionados com timestamp Atomicidade por chave Configuracao simples
  22. 22. Cassandra MySQL: muito IO imprevisivel! Solucoes baseadas em arquivos precisam de lock! Armazenamento descentralizado Tolerante a falhas Elastico: adicione mais servidores a quente Escala horizontalmente
  23. 23. Cassandra Disponibilidade e tolerancia a perda de particoes sobre consistencia(CAP) Consistencia configuravel Tradeoff: Consistencia versus Latencia Particionamento e replicacao baseado no Dynamo (Amazon) e modelo de dados estruturado(ColumnFamily) baseado no Bigtable(Google)
  24. 24. Cassandra Administracao minima Sem ponto unico de falha Particionador configuravel Replicacao configuravel: quantidade, rack e site “aware” Gossip, messaging, bootstrap, compaction Memtable Monitoracao e ferramentas de administracao Commit log
  25. 25. Cassandra Escritas: quorum(maioria) ou assincronas(1), sem leituras, posicionamento, rapida(0.12ms vs 300ms do MySQL), atomica, sempre garantida Leitura: memtable e +RAM, mais lenta que a escrita(15ms vs 350ms do MySQL), escala a bilhoes de linhas Consistencia: 1, quorum, all. Cuidado com a latencia!
  26. 26. Cassandra Keyspace: grupo de chaves ou banco/schema Column: chave e valor ou tabela de uma coluna e linha
  27. 27. Cassandra SuperColumn: mapa ou tabela de n colunas e uma linha apenas
  28. 28. Cassandra ColumnFamily: lista de mapas ou tabela
  29. 29. Cassandra SuperColumnFamily: grupos de SuperColumn usando chave
  30. 30. Cassandra Configuravel em storage-conf.xml Ordenacao eh feita na insercao, usando o nome da coluna ColumnFamily CompareWith SuperColumn CompareSubcolumnsWith Tipos: BytesType, UTF8Type, LexicalUUIDType, TimeUUIDType, AsciiType, LongType
  31. 31. Cassandra $CASSANDRA_HOME/conf/storage-conf.xml ClusterName AutoBootstrap Keyspace ColumnFamily ReplicaPlacementStrategy & EndPointSnitch: Unaware, Rack ou Datacenter ReplicationFactor
  32. 32. Cassandra Autenticador Particionador: Random por padrao ou ordenado InitialToken: armazena chaves com token similar CommitLogDirectory DataFileDirectory Seed ListenAddress/StoragePort ThriftAddress/ThriftPort
  33. 33. Cassandra Apache Thrift ConsistencyLevel: ZERO, ANY, ONE, QUORUM, ALL ColumnOrSuperColumn Column SuperColumn ColumnPath ColumnParent
  34. 34. Cassandra SlicePredicate SliceRange KeyRange KeySlice Mutation Deletion
  35. 35. Cassandra DEMO
  36. 36. ??? Obrigado! :) @julioviegas Engenheiro de Software
  1. A particular slide catching your eye?

    Clipping is a handy way to collect important slides you want to go back to later.

×