Open source na Globo.com

Começaremos já...

Friday, October 19, 12

open source na globo.com


Francisco Souza@franciscosouza

• desenvolvedor @ globo.com

• #cobrateam member

• open source fanboy

• (temporariamente) procurador senior de apartamentos


tsuru.ioFriday, October 19, 12

12 anos de estrada


500+ mil assinantes


27 times multidisciplinares


https://secure.flickr.com/photos/royskeane/413103429/




Publicação de conteúdo


https://secure.flickr.com/photos/peterkaminski/3772015/


Nova plataforma de publicação


Nova plataforma de publicação

...Friday, October 19, 12

http://www.oracle.com/us/corporate/customers/customersearch/globo-1-mysql-ss-406120.html




https://secure.flickr.com/photos/eurritimia/381962013/


Software livre na Globo.com


https://secure.flickr.com/photos/pleeker/146575856/





• Aplicação• Banco de dados• Cache• ...




Servidores de aplicação• nginx

• Apache (PHP)

• Tomcat (Java)

• gunicorn (Python)

• mod_wsgi (Python)

• passenger/unicorn (Ruby)

• etc...


Cache

• Varnish (CachOS)

• memcached


Bancos de dados

• MySQL

• MongoDB

• Redis

• Virtuoso

• Oracle :-(


Linguagens e plataformas

• Python

• Ruby/JRuby

• Java

• JavaScript/node.js

• C

• Perl

• Go

• PHP (platb - Wordpress)


E mais...• ElasticSearch

• Capistrano

• Fabric

• VirtualBox OSE

• Nagios

• ActiveMQ

• RabbitMQ

• Django

• Tornado

• Ruby on Rails

• Sinatra

• VRaptor

• ...


Um exemplo: G1

• Como desenvolvemos e colocamos código do G1 em produção?

• Quem entrega o conteúdo para o usuário?


Desenvolvendo

• Quero implementar uma nova feature no G1! Trata-se de um widget que vai obter informações de trânsito e armazená-las no banco de dados;

• Preciso de uma tabela no banco de dados, e um pouco de código pra isso;

• Como isso é feito no G1?


Banco de dados

• O G1 utiliza o MySQL como único banco de dados relacional;

• Mudanças no banco de dados são feitas através de migrations. Para as migrations, utilizamos o simple-db-migrate, um projeto open source que nasceu na Globo.com.


O código

• O código é feito em Python, linguagem de programação open source;

• Para tornar o desenvolvimento ainda mais simples e produtivo, utilizamos o framework web Django;

• E no lado do cliente, um pouco de jQuery e JavaScript puro :)


O deploy• Utilizamos o Capistrano para enviar o

código da máquina do desenvolvedor para o servidor de aplicação;

• Também utilizamos o Capistrano para executar as migrations no servidor de banco de dados;

• Tanto as máquinas de aplicação quanto de banco de dados utilizam Linux como sistema operacional.


Quem serve a aplicação?

• Todo conteúdo estático do G1 é servido pelo nginx;

• Em caso de conteúdo dinâmico, o nginx repassa as requisições para o gunicorn, um servidor para aplicações web Python;

• Todo conteúdo editorial da Globo.com é gerado estaticamente em disco, para garantir melhor desempenho. Para geração de conteúdo estático é utilizado o staticgenerator.


E muito mais!• Diversas bibliotecas open source para

desenvolvimento e testes;

• Monitoração das máquinas utilizando Nagios;

• Provisionamento e configuração versionada das máquinas com Puppet;

• etc.


“Kinda-open source”


libby

• Colaboração entre times;

• Reutilização de componentes comuns em diversos produtos.


“github” interno

• Todos os desenvolvedores da empresa têm acesso ao código de todos os times;

• Patches são bem vindos :-)


Fedex Day


opensource.globo.com


salve a web, por favor!✴ Navegadores velhos e desatualizados não evoluem

junto com os padrões web e são cheios de bugs, afetando a qualidade dos sites e fazendo com que os desenvolvedores gastem mais tempo para adaptar os sites a esses browsers obsoletos.

✴ "Salve a web, por favor" é um esforço para eliminar esses navegadores.

✴ https://github.com/globocom/sawpf


https://github.com/globocom/sawpf

https://github.com/globocom/sawpf

thumbor

✴ thumbor is a smart imaging service. It enables on-demand crop, resizing and flipping of images.

✴ https://github.com/globocom/thumbor


https://github.com/globocom/thumbor

https://github.com/globocom/thumbor

Globo Bootstrap

• Fork to Twitter Bootstrap;

• Em português;

• Com componentes utilizados em produtos da Globo.com.


oauth2u

✴ This project aims to implement the complete OAuth 2.0 Authorization Protocol Specification.

✴ It provides the endpoints specified by OAuth 2.0 specification with possibilities to plug code to customize specific behaviors.

✴ https://github.com/globocom/oauth2u


http://tools.ietf.org/html/draft-ietf-oauth-v2-22

http://tools.ietf.org/html/draft-ietf-oauth-v2-22

https://github.com/globocom/oauth2u

https://github.com/globocom/oauth2u

nginx-push-stream-module

✴ A pure stream http push technology for your Nginx setup.

✴ Comet made easy and really scalable.✴ Supports EventSource, WebSocket, Long Polling, and

Forever Iframe.✴ https://github.com/wandenberg/nginx-push-stream-module


http://en.wikipedia.org/wiki/Comet_%28programming%29

http://en.wikipedia.org/wiki/Comet_%28programming%29

http://dev.w3.org/html5/eventsource/

http://dev.w3.org/html5/eventsource/

http://dev.w3.org/html5/websockets/

http://dev.w3.org/html5/websockets/

https://github.com/wandenberg/nginx-push-stream-module

https://github.com/wandenberg/nginx-push-stream-module

tsuru

✴ Tsuru is an open platform-as-a-service (PaaS)

✴ https://github.com/globocom/tsuru


https://github.com/globocom/tsuru

https://github.com/globocom/tsuru

gandalf

• HTTP API for git projects and users management;

• https://github.com/globocom/gandalf


https://github.com/globocom/gandalf

https://github.com/globocom/gandalf

hlsclient

• Python HLS (HTTP Live Streaming) client;

• https://github.com/globocom/hlsclient


https://github.com/globocom/hlsclient

https://github.com/globocom/hlsclient

E tem mais!• Django

• Python

• Go Programming Language

• magic2d

• Django static generator

• Splinter

• Django Brasil

• Pyccuracy

• Lettuce

• wxPython

• InVersalius

• molecular-view

• Sure

• Bolacha

• PhantomJS

• Guake Terminal

• Homebrew

• Freshen


...Friday, October 19, 12

Mais de 40 projetos open source nasceram na globo.com devido às necessidades da empresa



Mais de 100 projetos open source já receberam contribuições de

funcionários da globo.com



Mais de 100 projetos open source já receberam contribuições de

funcionários da globo.com

Grande parte das tecnologias utilizadas pela Globo.com já recebeu contribuições de desenvolvedores da empresa, incluindo linguagens de programação e frameworks


... dos nossos desenvolvedoresparticipam ou já participaram do movimento open source

30%Mais de ...


Queremos aumentar esse número!

• globo.com/talentos

• [email protected]


mailto:[email protected]


Dúvidas?


Muito [email protected]

@franciscosouza




Open source na Globo.com

Technology

Transcript of Open source na Globo.com