Cloudwalker - processamento distribuído em nuvem

Cloudwalker processamento distribuído em

nuvemPalestrante: Flávio Gomes da Silva Lisboa

Curriculum

Flávio Gomes da Silva LisboaBacharel em Ciência da Computação com pós-graduação em Aplicações Corporativas usando Orientação a Objetos e Tecnologia Java pela Universidade Tecnológica Federal do Paraná. Já atuou como programador em empresas privadas de informática e foi funcionário de carreira do Banco do Brasil, onde chegou a analista na diretoria internacional. Atualmente é consultor tecnológico da Coordenação Estratégica de Tecnologia do Serviço Federal de Processamento de Dados (Serpro). Foi professor na pós-graduação da UNICID e é instrutor de cursos técnicos na Tempo Real Eventos e conteudista da TreinaWeb. Foi membro do time oficial de tradução do Zend Framework e é autor dos livros: Zend Framework Desenvolvendo em PHP 5 Orientado a Objetos com MVC, Zend Framework Componentes Poderosos para PHP e Criando Aplicações PHP com Zend e Dojo. É Zend Framework Certified Engineer e contribuidor oficial do projeto Tine 2.0, suíte livre de comunicação em PHP. Tem experiência na área de Ciência da Computação, com ênfase em Software Livre, atuando principalmente nos seguintes temas: Java, PHP, Python, padrões, frameworks, MVC, DCI e objetos.

Cloudwalker processamento distribuído em nuvem

Curriculum

http://romocavaleirodoespaco.blogspot.com.br


Projeto Nuvem Livre do SerproA operação do SERPRO hoje comporta uma grande variedade de hardware de servidores, storage, sistemas operacionais e tecnologia de virtualização. A gestão de cada parte destes componentes é feita manualmente ou de forma semiautomática, na melhor das hipóteses. Da instalação de sistema operacional das máquinas, instalação de serviços nesses sistemas, criação de máquinas virtuais, gestão dos recursos computacionais até a instalação de servidores web, servidores de portais, banco de dados, a maioria precisa de um grande esforço manual, passível de erros e vinculado à capacidade de pessoal de cada área.Esse tipo de estrutura não escala facilmente: um técnico que faz a monitoração e gestão de 30 servidores com 10 serviços sendo executadas nessas máquinas não necessariamente tem tempo para gerir 1000 servidores.

A proposta é fornecer serviço de gestão de nuvem, seja para IaaS (Infrastructure as a Service) como também toda a pilha de um PaaS (Plataform as a Service) ou SaaS (Software as a Service)

Cenário


Objetivos do projeto Nuvem Livre

Cenário

1.Criar a maior nuvem dentro do Governo Federal com uma solução livre.

2. Criar um núcleo de desenvolvimento (devops) com especialização no atendimento das demandas dos serviços de nuvem

3. Criar uma comunidade junto ao portal de software público criando um modelo de infraestrutura de nuvem para o Governo


Projetos de Software Livre - PSSL

Belo Horizonte / Curitiba

Entendimento da necessidade


Hoje o Serpro investe em tecnologias de computação em nuvem, para otimizar o uso dos seus recursos computacionais e prover elasticidade à demanda dos usuários e clientes. Essa elasticidade é provida pelo compartilhamento de memória, processadores e capacidade de armazenamento.



A questão que se coloca é a seguinte: as aplicações farão uso dos recursos providos pelo ambiente de nuvem? Hoje temos computadores pessoais com processadores de múltiplos núcleos, ou unidades de processamento. Mas a maximização do uso dos recursos providos por eles requer ajustes tanto dos sistemas operacionais quanto das aplicações.



Uma aplicação que não foi desenvolvida para fazer uso de processamento distribuído não irá usufruir plenamente da capacidade computacional do ambiente de nuvem. O Serpro até utiliza tecnologias que tem suporte a processamento distribuído, mas essa característica não é explorada de modo pleno.

O projeto


O projeto


O objetivo do projeto Cloudwalker é prospectar e integrar soluções para processamento distribuído, e prover um conjunto de ferramentas que seja disponibilizado em um ambiente de desenvolvimento (que pode ser em nuvem), para gerar aplicações que façam proveito dos recursos da infraestrutura de nuvem, e que inclusive tornem-se serviços disponíveis pela nuvem.

O projeto


Profº. Marins

O projeto


O escopo do projeto envolve o estudo e integração das soluções Cassandra, MongoDB, VoltDB, Hadoop, Hive, Gearman e Openstack. Toda a pilha de softwares contempla soluções livres, já mantidas em comunidade. A ideia é aderir às comunidades e uni-las em torno dos objetivos comuns, reduzindo o custo de manutenção do Serpro e de outros parceiros e colaboradores.

O projeto


Objetivos gerais


Criar, adaptar e integrar ferramentas de processamento distribuído para ambiente de nuvem, de modo que as aplicações tirem o máximo proveito da capacidade computacional disponível.

Objetivos específicos (versão 1.0)


Criar uma camada de abstração do Expresso 3 para o MongoDB.

Criar um adaptador MongoDB para o Tine 2.0

Criar um paper sobre o suporte MongoDB ao Tine 2.0

Criar um modelo tecnológico para o MongoDB no Expresso 3

Premissas


Premissas

O projeto será desenvolvido de forma aberta: todo código-fonte estará disponível desde o início para download.


Premissas

O projeto aceitará desde o início colaborações externas, que podem ser propostas de melhoria, de novas funcionalidades, identificação ou correção de bugs.


Premissas

De acordo com o critério da meritocracia, onde quem contribui mais e tem responsabilidade conquista mais direitos, será concedida permissão de gravação no repositório do projeto para aqueles que submeterem contribuições que agreguem valor ao projeto e se responsabilizarem por elas.


Premissas

O projeto fará reuso de soluções existentes.


Premissas

O projeto será integrado com as comunidades de software livre: modificações das soluções utilizadas serão devolvidas como contribuições.


Premissas

Será utilizado o Git para o controle de versão do projeto.

Para gestão e armazenamento do código-fonte do projeto será usado o Github (github.com). O endereço do projeto é http://sourceforge.net/projects/cloudwalker.


http://sourceforge.net/projects/cloudwalker

Estudo de caso: Expresso 3

Versão 2



Versão 2

+ 500.000 usuários



Versão 2



Versão 2eGroupWare

Expresso 1

Expresso 2 eGroupWare





3



3



Postfix SMTPIMAP PostgreSQL

ClienteServidor






Application/Backend/Application/Controller/Application/css/Application/Frontend/Application/js/Application/Model/Application/Setup/Application/translations/


Versão 2

Expresso 3

Tine 2.0




Estrutura Analítica


Proposta Arquitetural


Cobaia










Ambiente colaborativo


Obrigado

https://github.com/fgsl/cloudwalker

[email protected]

@fgsl


https://github.com/fgsl/cloudwalker

mailto:[email protected]

Technology

Cloudwalker - processamento distribuído em nuvem