Node.JS - Campus Party Brasil 2011

Capus Party 2011 Emerson Macedo @emerleite http://nodecasts.org http://codiﬁcando.com http://groups.google.com/group/nodebr

#performance

360 milhões deusuários de internet em todo mundo

9,8 milhões de usuários

9,8 milhões de usuários4,8 milhões são ativos

~ 2 bilhões deusuários de internet em todo mundo

68 milhões de usuários

68 milhões de usuários37 milhões são ativos

~ 70% dos adultos serão usuários regulares de redes sociais

Tecnologias atuais

Todas essas tecnologias tem algo em comum

PHP 1995

PHP 1995Java EE 1998

PHP 1995Java EE 1998ASP.Net 2001

PHP 1995 Java EE 1998 ASP.Net 2001Ruby on Rails 2004

PHP 1995 Java EE 1998 ASP.Net 2001Ruby on Rails 2004 Django 2006

Por que então mais uma tecnologia ?

Usuários de Internet no Mundo (em milhões) 2.000 milhões200015001000 500 360 milhões 0 2000 2010

Usuários de Internet no Brasil (em milhões) 70 milhões 7052,5 3517,5 10 milhões 0 2000 2010

Mas já escalamos muito bem nossos sites

Estrutura física deservidores para escalar

Escalando na vertical

Escalando na horizontal

Escalando DB na horizontal re ad ad re write write write

Escalando DB na horizontal Shard Shard Shard Shard Shard ShardDatabase Database Database Database Database Database

Arquitetura pra fazer o software escalar

Pattern para atender muitos requests

Pattern para atender muitos requestsFinalize a requisição o mais rápido possível

HTTP GET

HTTP POST

Por que então mais uma tecnologia ?

Escalando na horizontal

Evented, non-blocking I/O Google V8 Engine

Qual é o problemadas tecnologias atuais ?

Como manterconectados 10, 20 ou 30 mil usuários simultâneos ?

Nosso código costuma ser escrito assim

Nosso código costuma ser escrito assimO que o software está fazendo enquanto a querie executa ?

Na maioria dos casosestá travado esperando a resposta

Rails ou Django HTTPD Database

Rails ou Django RUNTIME PROCESS HTTPD Database

Rails ou Django RUNTIME BLOCK PROCESS HTTPD Database

Rails ou Django RUNTIME BLOCK PROCESS RUNTIME BLOCK PROCESS HTTPD Database RUNTIME BLOCK PROCESS RUNTIME PROCESS BLOCK

Java Servlet ContainerHTTPD Servlet Database

Java Servlet Container ThreadHTTPD Servlet Database

Java Servlet Container Thread BLOCKHTTPD Servlet Database

Java Servlet Container Thread BLOCK Thread BLOCK Thread BLOCKHTTPD Servlet Database Thread BLOCK Thread BLOCK Thread BLOCK Thread BLOCK

Apenas um processoabrindo uma thread para cada request

Produtividade doprogramador mais que performance da tecnologia

Apenas um processoabrindo uma thread para cada request

Parece bom mas ...

Como manterconectados 10, 20 ou 30 mil usuários simultâneos ? 30 mil threads ?

concurrency × reqs/sec Apache vs NGINX concurrency × reqs/sec http://blog.webfaction.com/a-little-holiday-presenthttp://blog.webfaction.com/a-little-holiday-present

concurrency × reqs/sec Apache vs NGINX concurrency × memory http://blog.webfaction.com/a-little-holiday-presenthttp://blog.webfaction.com/a-little-holiday-present

Apache cria umathread por request

Troca de contextoentre theads tem um custo

Cada OS Threadcria uma pilha de execução nova

Pense bem antes deusar uma thread por request quandoprecisar suportar alta concorrência

Pattern para atender muitos requestsFinalize a requisição o mais rápido possível

Pattern para atender alta concorrência

Pattern para atender alta concorrência Evite threads

Pattern para atender alta concorrência Evite threadsUse um Event Loop

Performance !=Escalabilidade

Performance !=Escalabilidade mas ...

Uma performancemelhor ajuda a escalarcom menos recursos

Precisamos fazer I/O de outra maneira

Latência de I/O

Latência de I/OL1 3 ciclos

Latência de I/OL1 3 ciclosL2 14 ciclos

Latência de I/O L1 3 ciclos L2 14 ciclosRAM 250 ciclos

Latência de I/O L1 3 ciclos L2 14 ciclosRAM 250 ciclosDisco 41.000.000 ciclos

Latência de I/O L1 3 ciclos L2 14 ciclosRAM 250 ciclosDisco 41.000.000 ciclosRede 240.000.000 ciclos

I/O não bloqueante

I/O não bloqueante L1 3 ciclos L2 14 ciclosRAM 250 ciclos

I/O não bloqueante L1 3 ciclos L2 14 ciclosRAM 250 ciclos I/O bloqueante

I/O não bloqueante L1 3 ciclos L2 14 ciclosRAM 250 ciclos I/O bloqueanteDisco 41.000.000 ciclosRede 240.000.000 ciclos

Infraestrutura não bloqueante, puramente baseada em eventos, para desenvolver software de alta concorrência

Servidor TCP simples em NodeJSO código acima faz com que a execução retorne imediatamente ao event loop

Por que já nãofaziamos dessa forma ?

POSIX Assync I/O não suportado por todos os S.Os

POSIX Assync I/O não suportado por todos os S.Os libmysql_client nãopermite query async

Filosoﬁa do NodeJS

Filosoﬁa do NodeJSTodo I/O deveria ser feito desta forma

Para qualqueroperação que acesse o disco ou a rede deve existir um callback

ArquiteturaJavascript Node standard library C Node Bindings thread event pool loop V8 (libeio) (libev)

Pilha de execução ev_loop() I/O em disco (bloqueante)

Pilha de execução socket_readdable(1) ev_loop() I/O em disco (bloqueante)

Pilha de execução http_parse(1) socket_readdable(1) ev_loop() I/O em disco (bloqueante)

Pilha de execução load(“index.html”) http_parse(1) socket_readdable(1) ev_loop() I/O em disco (bloqueante)

Pilha de execução http_parse(1) socket_readdable(1) ev_loop() I/O em disco (bloqueante)

Pilha de execução socket_readdable(1) ev_loop() I/O em disco (bloqueante)

Pilha de execução ev_loop() I/O em disco (bloqueante)

Pilha de execução ev_loop() I/O em RAM (não bloqueante)

Pilha de execução socket_readdable(2) ev_loop() I/O em RAM (não bloqueante)

Pilha de execução http_parse(2) socket_readdable(2) ev_loop() I/O em RAM (não bloqueante)

Pilha de execução http_respond(2) http_parse(2) socket_readdable(2) ev_loop() I/O em RAM (não bloqueante)

Pilha de execução http_parse(2) socket_readdable(2) ev_loop() I/O em RAM (não bloqueante)

Pilha de execução socket_readdable(2) ev_loop() I/O em RAM (não bloqueante)

Pilha de execução ev_loop() I/O em RAM (não bloqueante)

Pilha de execução ev_loop() Arquivo carregou do disco

Pilha de execução file_loaded() ev_loop() Arquivo carregou do disco

Pilha de execução http_respond(1) file_loaded() ev_loop() Arquivo carregou do disco

Pilha de execução file_loaded() ev_loop() Arquivo carregou do disco

Pilha de execução ev_loop() Arquivo carregou do disco

Arquitetura Web

Arquitetura Web Nginx

Arquitetura Web Nginx Ruby Ruby Ruby Ruby Ruby or or or or orPython Python Python Python Python

Arquitetura Web Nginx Ruby Ruby Ruby Ruby Ruby or or or or or NodeJSPython Python Python Python Python

Arquitetura Web Nginx

Arquitetura Web Nginx NodeJS

Arquitetura Web NodeJS

Arquitetura Web NodeJSQuando NodeJS estiver bem maduro, aidéia de Ryan é que ele seja a porta de entrada. Será ?

#simplicidade

Produtividade doprogramador mais que performance da tecnologia

Don’t Repeat Yourself

Conﬁgurações PropertiesXML YAML

Conﬁgurações PropertiesXML YAML JSON Transporte

Conﬁgurações JSON

Conﬁgurações JSON Transporte

ConﬁguraçõesJavascript Object Notation Transporte

Server SideJava Ruby Python PHP

Server SideJava Ruby Python PHP Client Side JavaScript

Server Side JavaScript

Server Side JavaScriptClient Side

#ecossistema

Sinatra detected !

Test driven development#vows - http://vowsjs.org/

Test driven development

Test driven development#http://github.com/visionmedia/expresso/

Obrigado !!! Emerson Macedo @emerleite http://nodecasts.org http://codiﬁcando.com

Referênciashttp://www.internetworldstats.com/emarketing.htmhttp://en.wikipedia.org/wiki/Event_loophttp://lse.sourceforge.net/io/aio.htmlhttp://code.google.com/p/v8/http://opengroup.org/onlinepubs/007908775/xsh/select.htmlhttp://en.wikipedia.org/wiki/Thread_pool_patternhttp://www.commonjs.org/specs/modules/1.0/http://en.wikipedia.org/wiki/File_descriptorhttp://en.wikipedia.org/wiki/Reactor_pattern

http://templariodatecnologia.wordpress.com	735
http://codificando.com	378
http://friendstechday.wordpress.com	59
http://blog.glesio.com	17
http://paper.li	3
https://si0.twimg.com	1
http://coderwall.com	1
http://webcache.googleusercontent.com	1
http://codificando.com.	1
http://static.slidesharecdn.com	1
http://twitter.com	1

Node.JS - Campus Party Brasil 2011

by Emerson Macedo

Accessibility

Categories

Upload Details

Usage Rights

11 Embeds 1,198

Statistics

Node.JS - Campus Party Brasil 2011 Presentation Transcript