avelino.us

Chromium as the default browser

2013-03-02T01:18:00+01:00

The code of Google Chrome is based on Chromium, all the feature implemented in Chromium comes in Google Chrome.

What do you think of being one of the first to test new feature of Google Chrome? Interesting huh!

Download a bleeding-edge build of Chromium for Mac!

Chromium does not update automatically, for this reason I wrote a shell script which updates the Chromium on Mac:

#!/bin/sh
#
# Note, this will remove /Applications/Chromium.app
#

echo '..'
rm -f chrome-mac.zip chrome-mac
export CHROME_VERSION=`curl http://commondatastorage.googleapis.com/chromium-browser-continuous/Mac/LAST_CHANGE`
echo "   latest version: $CHROME_VERSION"
echo '..'
export CHROME_OLD_VERSION=`cat ~/dotfile/CHROME_VERSION`
if [ $CHROME_VERSION == $CHROME_OLD_VERSION ]; then
  echo '   latest version!'
  echo '..'
  exit 2
fi
echo $CHROME_VERSION > ~/doestfile/CHROME_VERSION
echo "   save latest version: $CHROME_VERSION"
echo '..'
echo "   get latest version: $CHROME_VERSION"
echo '..'
wget http://commondatastorage.googleapis.com/chromium-browser-continuous/Mac/$CHROME_VERSION/chrome-mac.zip
echo "   compile latest version: $CHROME_VERSION"
echo '..'
unzip chrome-mac.zip
rm -rf /Applications/Chromium.app
echo "   install latest version: $CHROME_VERSION"
echo '..'
mv chrome-mac/Chromium.app /Applications/Chromium.app
rm -rf chrome-mac chrome-mac.zip
killall -9 Chromium
open /Applications/Chromium.app
echo 'DONE'

base source: https://github.com/avelino/dotfile/blob/master/chromium_update.sh

Riak, alta performance NoSQL para seu projeto

2012-12-23T10:00:00+01:00

Esse ano de 2012 ajudei a comunidade Riak que a cada dia esse banco de dados vem me surpreendendo. Estou para escrever um blogpost desde fevereiro, mas como vida de programador (pelo menos para mim esse ano) é agitada.

Resolvi falar sobre a performance nesse primeiro blogpost sobre Riak e colocar na mesa um teste (relativamente simples) para compara o tempo de inserção, realmente é um teste simples se tratando de NoSQL.

Antes de mostrar a comparação acho importante deixar claro as vantagens que temos em utilizar Riak:

Disponibilidade: sistema de recuperação de dados onde trabalha de forma inteligente para que esteja disponível para ler e escrever operações, mesmo em ambiente com falha, assim garantindo a integridade dos dados;
Tolerância a falhas: pode perder o acesso aos nós (Servidores Riak), devido à falha de rede ou partição de hardware e nunca perder de dados;
Simplicidade de utilização: facil adição de máquinas em um cluster Riak, sem ocorrer uma carga nos servidores - isso em um pequeno grupo de servidores como uma grande quantidade de servidores Riak;
Escalabilidade: Riak distribui automaticamente os dados ao redor do cluster e produz um aumento de desempenho quase linear quando você adicionar dados.

Depois de deixar claro os itens acima podemos colocar na messa o Riak e o grande MongoDB, lembrando que esse blogpost não é para falar qual NoSQL é melhor ou para você parar de utilizar um ou outro banco, Riak e MongoDB tem algumas características semelhantes, esse foi o motivo de colocar em teste os dois.

O teste foi simples preciso inserir 1 milhão (1000000) de registro no meu banco de dados, qual banco de dados entrega isso mais rápido para mim?

Código Python usando drive nativo do Riak:

#!/usr/bin/env python
# -*- coding: utf-8 -*-

import riak



client = riak.RiakClient()
bucket = client.bucket('test')

for i in range(0, 1000000):
    person = bucket.new('riak_developer_%d' % i, data={'name': 'Thiago Avelino %d' % i,
                                                       'age': 18+i,
                                                       'language': ['python'],})

Código Python usando drive nativo do MongoDB:

#!/usr/bin/env python
# -*- coding: utf-8 -*-

from pymongo import MongoClient



connection = MongoClient()
db = connection.test
persons = db.persons

for i in range(0, 1000000):
    person = persons.insert({'name': 'Thiago Avelino %d' % i,
                             'age': 18+i,
                             'language': ['python'],})

Um código simples onde faço um loop que vai de 0 a 1000000 (estou fazendo 1000001 inserção), e dentro de cada interação do loop estou gerando um registro no banco de dados. Veja abaixo o resultado:

(riak-test) ~/Sites/riak-test$ time python riak.py
python riak.py  15.60s user 0.14s system 99% cpu 15.850 total

(riak-test) ~/Sites/riak-test$ time python mongodb.py
python mongodb.py  144.14s user 35.47s system 55% cpu 5:25.85 total

Realmente o tempo de execução do Riak é muito mas muito rápido, o que me deixou mais surpreso foi o tempo do MongoDB, o MongoDB demorou 9 vezes mais comparado com o Riak.

Não estou falando que o MongoDB é ruim, ate mesmo que tenho projetos grande em produção usando ele e dependendo do projeto/infra recomendo usar MongoDB.

Palestra sobre London Framework na PyCon Argentina

2012-11-20T15:05:00+01:00

` |Universidad Nacional de Quilmes, local onde foi organizado a PyCon Argentina|`_

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/palestra-sobre-london-framework-na-pycon-argentina.rst, line 9); backlink

Inline substitution_reference start-string without end-string.

No começo de junho o Mariano (organizador do evento `PyCon Argentina 2012`_, me fez um convite para ir palestra sobre `London Framework`_ (Framework criado por `Marinho Brandão`_).

Nada melhor do que conhecer pessoas e principalmente culturas novas, entender o que os Argentinos estão desenvolvendo e o que anda estudando, ou seja, fazer network (como falamos na área de tecnologia). Dava para ver no rosto dos argentinos a vontade de aprender e de consumir o maximo de informação possível, na PyCon Argentina de 2012 teve uma ótima seleção de palestra, onde foi abordado temas como asynchrony (twisted), Plone (com Erico Andrei - Brasileiro), web2py (com Massimo Di Pierro - criador do framework), Python 3.3 (com Brett Cannon - Desenvolvedor Google) e muito mais.

Tive grande privilegio de palestra sobre London Framework, foi apresentado o motivo de criar um novo framework (Python) e hoje temos funcionando dentro do London. A repercussão foi muito positiva, recebi muitos tweets e e-mails de desenvolvedores querendo saber mais sobre London Framework, o que mostra grande aceitação e necessidade (semelhantes) do framework dentro da comunidade Argentina. Veja abaixo os slide da palestra de London Framework:

A pedidos da organização, fiz minha palestra em portunhol (tinha planejado apresentá-la em inglês, já que não sou fluente em espanhol). Pelas conversas de corredor, acredito que o público entendeu bem o meu portunhol!

No final do primeiro dia de evento tivemos uma confraternização, onde a organização da PyCon Argentina chamou uma pizzaria conhecida de Buenos Aires para fazer algumas pizza. A forma dos argentino preparar a pizza é bem diferente de nos Brasileiros, não querendo puxar sardinha para os Argentinos, é muito gostosa a pizza Argentina.

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/palestra-sobre-london-framework-na-pycon-argentina.rst, line 51)

Explicit markup ends without a blank line; unexpected unindent.

: http://avelino.us/wp-content/uploads/2012/11/2012-11-16-13.24.48.jpg .. _PyCon Argentina 2012: http://ar.pycon.org .. _London Framework: http://londonframework.org/docs/ .. _Marinho Brandão: http://www.marinhobrandao.com/

Docutils System Messages

System Message: ERROR/3 (/Users/avelino/workspace/avelino.github.io/content/old/palestra-sobre-london-framework-na-pycon-argentina.rst, line 13); backlink

Unknown target name: "pycon argentina 2012".

System Message: ERROR/3 (/Users/avelino/workspace/avelino.github.io/content/old/palestra-sobre-london-framework-na-pycon-argentina.rst, line 13); backlink

Unknown target name: "london framework".

System Message: ERROR/3 (/Users/avelino/workspace/avelino.github.io/content/old/palestra-sobre-london-framework-na-pycon-argentina.rst, line 13); backlink

Unknown target name: "marinho brandão".

Plone, por onde começar?

2012-11-06T18:22:00+01:00

Plone é um CMS (Content management system, ou seja, sistema de gestão de conteúdo), no Brasil muito usado no Governo (saiba mais porque o Governo Brasileiro selecionou Plone como sistema de gestão de conteúdo, palestra do Giuseppe Romagnolli na Plone Symposium).

Por onde começa?

Como estou usando uma maquina Linux vou explicar como subir o Plone em ambiente Unix.

Iremos usar versão 4.2.2 (estável) do Plone, para começa precisamos baixar o source do Plone e descompactar:

$ cd /tmp/
$ wget --no-check-certificate https://launchpad.net/plone/4.2/4.2.2/+download/Plone-4.2.2-UnifiedInstaller.tgz
$ tar -vxf Plone-4.2.2-UnifiedInstaller.tgz
$ cd Plone-4.2.2-UnifiedInstaller

Antes de instalar o Plone precisamos instalar alguns pacote no Linux, como:

python-distribute
python-dev
build-essential
libssl-dev
libxml2-dev
libxslt1-dev
libbz2-dev
subversion
git

Como o Plone trabalha com a biblioteca PIL precisamos instalar recurso para trabalhar com imagem:

libjpeg62-dev
libreadline-gplv2-dev
wv
poppler-utils
python-imaging

$ echo "Instalar biblioteca Python"
$ sudo aptitude install python-distribute python-dev build-essential libssl-dev libxml2-dev libxslt1-dev libbz2-dev
$ echo "Instalar biblioteca de imagem"
$ sudo aptitude install libjpeg62-dev libreadline-gplv2-dev wv poppler-utils python-imaging
$ echo "Instalar controle de versão"
$ sudo aptitude install subversion git

Após a instalação das dependências do Plone, vamos começa a realmente interagir com o Plone. Agora precisamos instalar o Plone, existe dois modelo de Plone, um onde instalamos a instancia Plone e outra que instalamos um Cluster de ZEO (ambiente de produção que precisa isolar ZEO do Plone):

$ ./install.sh standalone

No final da instalação do Plone o mesmo vai retorna algumas informações importante como a senha do usuário Administrador do Zope, pasta que foi instalado o Plone, informações para suporte (da comunidade) e etc.

#####################################################################
######################  Installation Complete  ######################

Plone successfully installed at /home/avelino/Plone
See /home/avelino/Plone/zinstance/README.html
for startup instructions

Use the account information below to log into the Zope Management Interface
The account has full 'Manager' privileges.

    Username: admin
    Password: xxxxxxx

This account is created when the object database is initialized. If you change
the password later (which you should!), you'll need to use the new password.

- If you need help, ask the mailing lists or #plone on irc.freenode.net.
- The live support channel also exists at http://plone.org/chat
- You can read/post to the lists via http://plone.org/forums

- Submit feedback and report errors at http://dev.plone.org/plone
  (For install problems, specify component "Installer (Unified)")

avelino@SAO-NT-01072:/tmp/Plone-4.2.2-UnifiedInstaller $

Agora depois do Plone instalado queremos subir um site:

Temos o Zope/Plone rodando na porta 8080 liberado para todos os IP de sua maquina, ao acessar o endereço no browser http://127.0.0.1:8080/ veremos esse site:

Precisamos criar um Plone Site, para isso basta clicar no botão "Criar um novo site Plone, após clicar você será redirecionado para uma pagina onde deve preencher com nome e titulo do site, abaixo dessas duas informações temos a lista de produtos (para quem vem de outro CMS geralmente é chamado de Plugin) instalados no Plone. Como estamos começando agora vamos deixar todos em branco e clicar em Criar site Plone.

Após clicar no botão você acabou de criar o seu Plone Site.

Agora basta você colocar conteúdo em seu Plone Site.

Comunidade Plone Brasil

No Brasil temos a comunidade PloneGov-BR.

Comandos tmux (cheat sheet)

2012-10-08T17:49:00+02:00

tmux é um software que pode ser usado para vários consoles de multiplex virtuais, permitindo que um usuário acesse múltiplas sessões de terminais separados dentro de uma janela de um único terminal ou sessão de terminal remoto. É útil para lidar com vários programas a partir de uma interface de linha de comando, e para separar os programas a partir do shell do Unix, que começou o programa. Distribuído sob uma licença BSD.

tmux - terminal multiplexer

Managing tmux sessions

tmux # start tmux server
tmux at # attach running sessions to a terminal
tmux ls # list running tmux sessions

Commands (used within a running tmux session)

c  - create new window
n/l - next/last window
&  - kill current window

%  - split window, adding a vertical pane to the right
"  - split window, adding an horizontal pane below
←/→ - move focus to left/right pane
↑/↓ - move focus to upper/lower pane

!  - Break current pane into new window
x  - Kill the current pane.
d  - detach the current client

[  - enter copy mode (then use emacs select/yank keys)
    * press CTRL-SPACE or CTRL-@ to start selecting text
    * move cursor to end of desired text
    * press ALT-w to copy selected text

]  - paste copied text

?  - show tmux key bindings

Note

All commands need to be prefixed with the action key.
By default, this is CTRL-b

Plone para desenvolvedores Python

2012-08-30T11:40:00+02:00

Sempre que uma pessoa vinha falar de Plone para mim eu não me sentia muito bem pois não conhecia e o pessoal que sempre conversei que desenvolvia em Plone e depois conheceu Django sempre falava que não valia apena mexer com Plone! Será que isso é realmente verdade?

Depois do que eu escutei o pessoal falando eu não queria nem saber desse cara chamado Plone, ate mesmo que para desenvolver uma solução de gerenciamento de conteúdo usando Django não é muito trabalhoso (Realmente era assim que eu pensava, mal eu sabia que estava completamente enganado). Como eu fiz para mudar esse preconceito que tinha?

Realmente para mim mudar esse pensamento foi preciso senta e conhecer a ferramenta, não foi um trabalho muito facil pois como já relatei vim de Django e para mim era preciso subir um ambiente relativamente parecido, mas é Plone e ele roda encima do servidor de aplicação Zope e isso é algo que eu não conhecia (apenas tinha uma ideia do que era mas o que é realmente não sabia) em fim, depois do esforço de conhecer o Zope e Plone achei bacana. Mas achar bacana e colocar em produção é bem diferente.

No começo de agosto assumi um cargo de lider tecnico da tv1.com, eis que surge uma demanda gigantesca pois atendemos muitos sites do Governo Brasileiro, tais como:

Todos os sites é em Plone, e por esse motivo tive que estudar ainda mais do que estava estudando...

Semana passada Liz Leddy e Nejc Zupan (dois desenvolvedores

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/plone-para-desenvolvedores-python.rst, line 45)

Line block ends without a blank line.

Plone) estava no Brasil para participar do evento Plone Symposium South America e Caipirinha Sprint (um dos melhores sprint que participei). | O sprint foi muito bom fiquei surpreso com a qualidade do código que o Plone tem e como o pessoal leva a escrita de teste unitario e teste funcional a serio, o que posso falar é que 100% do código Plone tem cobertura de teste (se você que ver com os seus proprio olhos aqui explica como rodar os teste com coverage).

Bom o que posso falar mais é que agora sou um core commiter do Plone:

Bom nós desenvolvedores (Python) temos mania de criticar (ter preconceito) ou não ter uma iniciativa para estudar uma nova tecnologia, o que posso falar para essas pessoas (eu realmente sou um desse) é: Conheça para depois tomar suas propria decisão, se você acha que um projeto pode ser mais simples ou melhor em um ponto especifico, não esqueça que você desenvolvedor (Python) tem capacidade de ajudar um projeto open source.

Proxy transparente com Nginx

2012-08-09T13:05:00+02:00

Muitas pessoas usam Squid para fazer qual quer tipo de proxy, ate mesmo para proxy transparente para usar em servidor web, por exemplo:

Você tem um site que precisa ter IP aqui no Brasil so que como o custo de servidor e link aqui no Brasil é muito caro, você pode fazer um proxy transparente para o servidor aqui no Brasil ser um cara que vai receber a requisição e repassar para o outro servidor que esteja em qual quer lugar do mundo. Com essa solução podemos ter uma maquina simples (maquina com pouco poder de processamento) pois ela só vai receber o trafego e repassar para o servidor que esteja em outro local.

Vamos imaginar um exemplo pratico, preciso que o usuário acesse o IP 177.71.248.185 (é um servidor da Amazon no Brasil), esse servidor precisa receber a requisição e repassar para o IP 67.159.35.2 (é maquina principal onde é processado o backend, esse servidor esta fora do Brasi). Foi usado essa solução em um portal que atendo para ter baixa latencia.

Vamos ao exemplo pratico:

upstream server {
    server 67.159.35.2;
}
server {
    listen       80;
    server_name  avelino.us www.avelino.us;
    location / {

        proxy_cache proxy-cache;
        proxy_cache_key "$host$request_uri$args";
        proxy_ignore_headers "Cache-Control" "Expires";
        proxy_cache_min_uses 1;
        proxy_hide_header Set-Cookie;
        proxy_cache_valid 200 301 302 30m;
        proxy_cache_valid any 0m;
        proxy_buffering on;

        proxy_pass http://server;
        proxy_redirect off;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
    }

}

Criei um "upstream server" para falar qual é o servidor de destino do trafego, na configuração acima tem um cache de 30 minutos pois no servidor principal tem cache de 4 horas.

Logicamente que existe desvantagem com isso, pois vamos estar trafegando em duas (ou mais) redes, assim usando o trafego do servidor que esta recebendo a primeira requisição e do segunda que esta recebendo um requisição do primeiro.

Console colorido usando Node.js

2012-07-27T11:40:00+02:00

Para quem esta acostumado trabalhar com make para subir um ambiente ou o pessoal que gosta de escrever alguns shell scripts para automação de simples rotinas acho muito importante colocar cor nos retornos do script, isso é ótimo para sinalizar o que realmente o software (ou script) esta fazendo.

Para deixar um retorno colorido usando Node.js não é muito diferente de shell script, pois o que vai processar o retorno é um console bash (zsh ou qual quer outro shell), veja o exemplo abaixo de como deixar um retorno de shell script colorido:

echo -e " \033[0;30m Preto  \033[0m             --> 0;30 "
echo -e " \033[0;31m Vermelho  \033[0m          --> 0;31 "
echo -e " \033[0;32m Verde  \033[0m             --> 0;32 "
echo -e " \033[0;33m Marrom  \033[0m            --> 0;33 "
echo -e " \033[0;34m Azul  \033[0m              --> 0;34 "
echo -e " \033[0;35m Purple  \033[0m            --> 0;35 "
echo -e " \033[0;36m Cyan  \033[0m              --> 0;36 "
echo -e " \033[0;37m Cinza Claro  \033[0m       --> 0;37 "
echo -e " \033[1;30m Preto Acinzentado \033[0m  --> 1;30 "
echo -e " \033[1;31m Vermelho Claro  \033[0m    --> 1;31 "
echo -e " \033[1;32m Verde Claro  \033[0m       --> 1;32 "
echo -e " \033[1;33m Amarelo \033[0m            --> 1;33 "
echo -e " \033[1;34m Azul  Claro \033[0m        --> 1;34 "
echo -e " \033[1;35m Purple Claro  \033[0m      --> 1;35 "
echo -e " \033[1;36m Cyan  Claro \033[0m        --> 1;36 "
echo -e " \033[1;37m Branco  \033[0m            --> 1;37 "

echo -e " \033[40;1;37m Fundo Preto    \033[0m     --> 40;?;? "
echo -e " \033[41;1;37m Fundo Vermelho \033[0m     --> 41;?;? "
echo -e " \033[42;1;37m Fundo Verde    \033[0m     --> 42;?;? "
echo -e " \033[43;1;37m Fundo Marrom   \033[0m     --> 43;?;? "
echo -e " \033[44;1;37m Fundo Azul     \033[0m     --> 44;?;? "
echo -e " \033[45;1;37m Fundo Purple   \033[0m     --> 45;?;? "
echo -e " \033[46;1;37m Fundo Cyan     \033[0m     --> 46;?;? "
echo -e " \033[47;1;37m Fundo Cinza    \033[0m     --> 47;?;? "

echo -e " \033[4;30m Sublinhado  \033[0m        --> 4;? "
echo -e " \033[5;30m Piscando    \033[0m        --> 5;? "
echo -e " \033[7;30m Invertido   \033[0m        --> 7;? "
echo -e " \033[8;30m Concealed   \033[0m        --> 8;? "

Bom como comentei acima em Node.js não é muito diferente, seja exemplo abaixo:

'use strict';
//// http://avelino.us/2012/07/27/console-colorido-usando-node-js
////

// Retorna o texto em vermelho
console.log("\033[31m Aqui esta o texto em vermelho.")

// Retorna o texto em azul
console.log("\033[34m Aqui esta o texto em azul.")

// Volta o padrão do bash
console.log("\033[0m Aqui estamos dando reset nas cores do bash.")


// Criando variavel para deixar um pouco mais simples
var red, blue, reset;
red   = '\u001b[31m';
blue  = '\u001b[34m';
reset = '\u001b[0m';

console.log(red +"Aqui esta o texto em vermelho. "+ blue +"Aqui esta o texto em vermelho. "+ reset +"Aqui estamos dando reset nas cores do bash.")

Perceba que no começo do script estamos usando o "``'use strict';``", para não termos problema com o formato loco de color dentro das strings. No exemplo que estamos usando variáveis coloquei as colors em Unicode (eis ai uma problema!).

Porque uso "\u" nos códigos unicode?

Bom realmente eu não entendi muito bem o porque o Node.js trata dessa forma, mas achei uma essa explicação:

Octal literals can be identified by a numeric value starting with

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/console-colorido-usando-node-js.rst, line 97)
Line block ends without a blank line.

a leading 0 (zero). Since this is a source of a possible unintentional octal values when the programmer zero-pads decimal numbers of varying lengths in the source code to make then look prettier and more uniform. The strict mode disallows the octal mode due to this reason. | The ESCape code can be represented in a number of ways. Decimal 27 , Hexadecimal 1B , Octal 33 or Binary 00011011. | So instead of write the ESC code in a string as \033 you can as well just choose one of the other modes. Hexadecimal for instance: \x1B. | In your example you used the two-byte unicode representation of the character \u001b which works just as well. | I’m still an oldschool C head and usually assumes all strings to be plain ASCII so I’d use \x1B by default instead of this newfangled unicode crap Java is using. ^_^

Realmente não é muito produtivo desenvolver dessa forma, mas temos algumas iniciativas open source que pode nos ajudar com o retorno de cores dentro do Node.js.

cli-color - Mariusz Nowak
colorize - Matt Patenaude
sty - Trevor Burnham (Esse projeto aceita você coloca objetos html como marcação)

Todos os projetos acima estão dentro do npm.

Criando package (modulo) em Node.js

2012-06-23T10:15:00+02:00

Existe muitas pessoas querendo estudar Node.js pela simplicidade de trabalhar com processamento assíncrono e por usar JavaScript em server side. JavaScript é uma linguagem simples mas para desenvolvimento Client side mas ao mesmo tempo quando colocamos JavaScript do lado do servidor começa a surgi algumas duvidas como: estrutura do software, como criar biblioteca, qual Framework usar e muitas outras.

Dando uma olhada no Github vi que tem muitos software que parece uma lingüiça com mais de 500 linhas em um mesmo arquivo, aí me vem a seguinte pergunta "JavaScript não é orientado a objeto?" logicamente que sim, então tem alguma coisa errada pois uns dos paradigma é dividir funcionabilidade onde cada modulo faça sua parte e usando todas faz o que foi proposto a ser feito.

Então vamos lá, seguindo um exemplo simples:

Conectar em um banco de dados
Fazer insert, update e delete
Desconectar do banco de dados

O exemplo usado encontra-se no repositorio "example-nodejs-mongodb" na minha conta do Github, nesse exemplo vou usar o banco de dados MongoDB por ser mais simples de instalar e usar (Pois é um banco de dados NoSQL) . Dado que já esteja instalado o MongoDB em seu sistema operacional (Para usuarios Linux basta baixar o source do MongoDB no site e depois rodar o binario mongod, já para usuarios Windows não tenho não tenho experiencia no ambiente mas achei esse tutorial que pode ajudar). A instalação do NodeJS e NPM no Linux e Windows é uma operação relativamente simples, por isso não vou detalhar todo o processo, você pode ver nos artigos nesse blogpost.

A primeira coisa que temos que ter em mente é que tudo o que é escrito dentro de um package (proprio) não é levado para fora, você precisa especificar o que realmente quer expor do seu package. No arquivo `mongocon.js`_ temos um exemplo de como trabalhar com exports no Node.JS:

var mongoose = require('mongoose');
mongoose.connect('mongodb://localhost/avelinous');

exports.mongoose = mongoose;

No exemplo acima estou expondo toda a classe do mongoose, eu poderia restringir export só alguns metodos por exemplo:

var mongoose = require('mongoose');
mongoose.connect('mongodb://localhost/avelinous');

exports.mongoose_schema = mongoose.Schema;

Assim podemos limitar o acesso dentro de um package.

Caso queira fazer um package e expor publicamente via NPM, basta criar um package.json juntamente com o seu source, assim pode colocar dependencias que o seu package tem e em qual versão do NodeJS ele roda, veja o exemplo de um package.json:

{
    "name": "mongo_test",
    "description": "A package using mongoose ODM",
    "author": "Thiago Avelino <thiagoavelinoster AT gmail DOT com>",
    "dependencies": {
        "mongoose": ">= 2.7.0"
    },
    "engine": "node 0.6.19"
}

Pronto, com isso é facil enviar o seu package para o repositorio do NPM.

Vagas de Python para trabalhar remoto

2012-05-07T16:46:00+02:00

A duas semana eu escrevi um blogpost sobre "Trabalhar para empresa de fora do Brasil" e realmente vale muito apena, como a demando do projeto aumentou consideravelmente estamos precisando de desenvolvedores para entrar no time. Nosso time é responsável por desenvolver algumas ferramentas de SEO.

Conhecimento necessario:

Dominio do idioma inglês;
Python;
Django (Caso conheça outro frameworks é importante).

Itens importante:

Tradução de projeto open source;
Foco (Como o trabalho é remoto, temos que sempre ter foco no que estamos fazendo);
Conhecimento em arquitetura de software;
Contribuido com projeto open source (Ideal que tenho o repositorio aberto);
Ótimo conhecimento em desenvolvimento ágil;

Estamos procurando por pessoas criativas, que gostem de inovação, de pesquisar e identificar novas tendências e de encarar desafios complexos com agilidade e velocidade.

Se você se encaixa neste perfil, envie seu curriculo em inglês para mim (thiagoavelinoster AT gmail.com) com uma lista dos últimos 5 livros técnicos que você leu, Github, Twitter, LinkedIn e o que você quiser compartilhar.

Trabalhar para empresa de fora do Brasil

2012-04-20T19:13:00+02:00

O tema é muito abrangente mas vou focar justamente para a área tecnologia onde temos a possibilidade de trabalhar remoto (vulgo home office, que é um outro tema que gera muita polemica).

Hoje fecha um total de 3 dias trabalhando na empresa Mochii (Realmente achei o site da empresa muito nerd e extremamente diferente, esse e outros motivo me fez trabalhar com eles) e durante esses três dias tive uma ótima experiencia para compartilhar.

Primeiro que o dono da empresa é muito acessível, sem essa frescura de hierarquia (Não que eu ache totalmente hierarquia desnecessário, mas em alguns caso ao meu ver não precisaria de tanta burocracia).

Segundo que o time de desenvolvimento de lá é 100% aberto a ideias e a criticas (logicamente que criticas construtivas e que saiba conversa sobre o porque não concorda com determinada parte do código), muito diferente de alguns desenvolvedores no Brasil (Sei que tem em outros lugares do mundo mas como trabalhei muito tempo no Brasil estou usando como referencia) que se apega com código desenvolvido.

Uma coisa que realmente me deixou muito surpreso foi em relação a

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/trabalhar-para-empresa-de-fora-do-brasil.rst, line 30)

Line block ends without a blank line.

cobrança de como esta indo a tarefa que eu (Thiago Avelino) assumi, o dono da empresa chegou para mim e falou que eu deveria conversa com um funcionario que saberia explicar melhor sobre o porque esta usando a tecnologia X, Y e Z, depois do lider do desenvolvimento me explicado foi atribuido uma tarefa e não fui cobrado nem uma vez sobre a tarefa, realmente isso é muito diferente aqui no Brasil, principalmente quando um desenvolvedor novo entra em um time, geralmente tem sempre um cara no time que fica pergunta "e ai esta entendendo?", ao meu ver isso tem o seu lado bom e consequentemente o seu lado ruim. | O lado bom é que tem a interação do time com o novo desenvolvedor, mais isso acaba ficando chato pois se o novo desenvolvedor não esta entendo ele vai ficar com vergonha (ou alguma coisa do genero) de se expressa falando que não esta entendo alguma parte do fluxo do projeto ou mesmo código.

Poderia falar mais 1001 experiência que tive essa semana, mas vou ir gerando blog post com os passar das semanas, assim posso ir aprofundando cada dia mais da experiência vivida.

Realmente vale apena trabalhar para uma empresa de fora do Brasil.

Node.js onde usar?

2012-04-10T01:13:00+02:00

Ultimamente estou estudando bastante Javascript para colocar algumas aplicações em Node.js no ar, ate que tive a minha primeira necessidade real de usar Nodejs.

Na Nodegrid tivemos a necessidade fazer grande processamento assíncrono, temos um servidor de cache que foi desenvolvimento por necessidade de armazenamento e controle do que esta em cache e tempo para expirar o mesmo, poderia ser usado memcache mas a Nodegrid esta fazendo um serviço de hosting de memcache, com isso teríamos o problema de concorrência de nome dentro do banco chave e valor (Memcache).

No case que tenho com a Nodegrid na solução de cache (Djazz.cache) começamos a desenvolver usando 'C', funcionou muito bem, mas com o passar do tempo a manutenção do software começou ficar trabalhosa. Eu tenho experiencias com software grande em C (Kernel BSD) e mesmo assim a manutenção de um software não é nada confortável. Migrei para Python com Twisted, mais infelizmente o códigos usando Twisted não fica muito agradável ou seja não é Pythônico então olhei para o projeto Node.js que tem a característica simples e facil de trabalhar com processamento assíncrono.

Recomendo olhar o trabalho que os commiters do Node.js estão fazendo, tem muitas ideias ótimas e outra que precisa ser melhoradas.

Vejo a Node.js como uma solução ótima e simples para trabalhar com conexões assíncrono, ainda hoje não vejo o Node.js substituindo uma linguagem que já esta a anos rodando em backend como Python, Ruby, Java e etc. Ao meu ver o Node.js vai crescer ainda mais o seu uso nas necessidades específica (assíncronas), pela simplicidade de implementação e fácil manutenção.

Link o slide da palestra "Node.js em produção"

Test é para os fracos

2012-02-24T22:48:00+01:00

Em novembro fiz mais uma palestra sobre teste unitários só que agora com o titulo da palestra bem diferente "Test é para os fracos", o motivo desse titulo é para deixar a palestra mais dinâmica pois escrever teste não é uma tarefa muito simples no primeiro contato.

Tem muitas pessoas que acha que escrever teste não garante que o software não tem bug, isso é claro, mas vamos encarar o problema quando quando tiver que mudar o software, caso ele esteja como teste na parte onde esta sendo implementado novas funcionalidade e venha quebrar ai sim vamos dar valor aos teste.

Uns dos tópicos da minha palestra é como acostumar a escrever teste, geralmente não é um trabalho muito simples, quando começamos a praticar técnicas de desenvolvimento de software como TDD é um trabalho muito chato pois não temos experiencia e nem costume de escrever um teste para depois implementar o software passar na quela teste, vendo este cenário podemos chegar a conclusão que muitos desenvolvedores não sabe realmente o que precisa ser desenvolvido e com isso fica ainda mais complicado de praticar TDD.

Antes de desenvolvermos um software a primeira coisa é saber o que o software vai fazer, só assim a pratica de TDD começa e ficar mais fácil e fluente, uma dica que dou para quem começa da implementa camada de teste unitário em um projeto é participar de Coding Dojo e de PythonStorm (Ideia do nosso amigo Rodolpho Eckhardt) onde é reunido um grupo para fazer para bater um papo sobre tecnologia (Python) e falar sobre melhores praticas.

Esse é referente aos primeiros slides da palestra, vou escrever as próximos slides no próximos webposts.

Link dos slides da palestra: http://www.slideshare.net/avelinoo/test-para-os-fracos

VIM a IDE para programadores Python

2011-12-22T22:47:00+01:00

Depois muito tempo sem escrever nada no meu blog, escolhi esse tema para chamar a atenção do pessoal que esta começando desenvolver em Python que sempre pergunta qual é a melhor IDE para desenvolver em Python ou qual quer programador que usa uma super IDE pesado porque tem o recurso X, Y e Z.

Com o VIM podemos ter todos os recurso avançado que temos em qual quer IDE, basta algumas configurações para que esses recursos ser ativado, para facilitar a vida de todos compartilhei o meu .vimrc e nesse post vou explicar como usar o mesmo.

"Em 2 de novembro de 1991, Bram Moolenaar publicava a primeira versão do edito vim. O vim nasceu como um clone para Amiga do editor vi criado por Bill Joy em 1976, adicionando algumas funcionalidades extras, daí seu nome (VI iMproved ou VI Melhorado). Este editor se adaptou rapidamente a outras plataformas. "

Assumindo que o vi já esta instalado no meu micro, vamos instalar as configurações que eu fiz, basta rodar os seguintes comando no seu bash (Linux ou Mac):

curl https://raw.github.com/avelino/.vimrc/master/bootstrap.sh -o - | sh

Após isso ele vai baixar o repositório na sua pasta HOME.

Recomendo o uso o VIM em GUI pois podemos chegar 256 cores, ou seja,

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/vim-ide-para-programadores-python.rst, line 30)

Line block ends without a blank line.

colocar temas mais agradável e assim deixando o uso do vim mais confortável para o desenvolvimento, para Linux é o gvim e para mac o macvim (Para mac o Björn Winckler fez um ótimo trabalho, na minha humilde opinião é a melhor versão do VIM via GUI).

Chega de blablabla né, vamos logo para o que realmente interessa, como o VIM ficou e como utilizar ele?

Usando o vim para navegar nas pasta de um projeto:

Buscando arquivo por nome dentro do projeto:

Listar todas as class e def do arquivo esta esta aberto (Python)

Lista de comandos para usar no 'vim', lembrando que esses comando foi customizado:

:cd /path Abrir pasta
tn Abrir nova aba
te Abrir nova aba e carregar arquivo
t] Proxima aba
t[ Voltar aba
Ctrl+c Adicionar todos os arquivos no cache para poder fazer busca de arquivo (recomendo fazer isso ao abrir o projeto)
Ctrl+f Busca arquivo e abre na mesma aba
Ctrl+s Busca arquivo e abre em uma nova aba
\b Abre arquivo que esta no buffer do vim (Arquivo abertos)
\d, \n ou F3 Abre navegador de arquivo
\f Lista todas as class e def (Python)
\j Vai para declaração de um metodo
\r Renomear todos os metodos
[e Move linha para cima
e] Move linha para baixo
\v ouCtrl+w + v` Divide a tela em vertical
\h ou Ctrl+w + s Divide a tela em horizontal
\w ou Ctrl+w + q Fecha a aba atual
Ctrl+k Abre console Python
Ctrl+j Roda o script Python aberto
\sh Abre bash (shell)
\p Manda o arquivo em aberto para o dpaste.com
\ga Git add .
\gc Git commit
\gsh Git push
\gs Git status
\gd Git diff
\gr Git remove
\S Remove todos os espaços do final
\c Lista controle de versao do buffer

Google Nexus S, atualização oficial para Android 4.0 (Ice Cream Sandwich)

2011-12-17T22:48:00+01:00

Dia 16/12/2011 o Google lançou oficialmente a atualização do aparelho Nexus S para Ice Cream Sandwich (Android 4.0), a noticia saiu no Twitter oficial do Google Nexus.

Para você atualizar o seu Nexus S faça o seguinte procedimento:

1 - Faça download da imagem do Android 4.0 para o Nexus S no seguinte link:

http://android.clients.google.com/packages/ota/google_crespo/VQ8PQk_V.zip ou http://dl.dropbox.com/u/763381/VQ8PQk_V.zip
2 - Coloque o VQ8PQk_V.zip SD do seu Nexus S e você deve renomear o arquivo para update.zip
3 - Desligue o seu aparelho
4 - Aperte o botão do volume para cima + o botão power, seu celular vai iniciar no modulo fastboot
5 - Selecione a opção recovery
6 - Vai começa carregar e aparecera um triângulo com um !, nessa tela você deve aperta o botão power + volume para cima (Deve ser na sequência relatado no post)
7 - Vai aparecer um menu onde você deve selecionar a seguinte opção Apply update from /sdcard
8 - Após instalar você deve selecionar reboot system now
9 - Pronto, Android 4.0.3 instalado no seu Nexus S

Quando o seu celular for ligar a primeira vez com Android 4.0 ele vai ficar um pouco lento pois vai refazer o dalvik cache.

Lembrando que você tem que ter a versão do Android oficial do Google instalado no seu Nexus S, caso não esteja não vai conseguir fazer os procedimentos, pois estamos atualizando para a versão oficial do Google.

O Google vai liberar aos poucos a atualização automatica para os Nexus S pois se não vai acabar com o link das operadoras, no Brasil principalmente que nosso 3G é um 2G.

Nova versão da API do Dropbox

2011-10-13T22:47:00+02:00

Dia 14.09.2011 o Dropbox lançou a nova versão 1.0 da API, nesse lançamento trouxe muitas novidades e melhorias:

Suporte para aplicações web
Suporte para criação de pasta (Na versão 0.1 da API não tinha)
Novo site para desenvolvedores, com documentação simples e completa https://www.dropbox.com/developers_beta
Melhor compartilhamento de arquivo, streaming, busca por arquivo e suporte para revisão de arquivo
Implementação no controle de nomes de arquivos, para não sobrescrever arquivos já salvo
SDK atualizado para iOS, Android, Python, Ruby e Java que implementa todas modificações e documentação

Link do repositorio (Python Pypi) da nova biblioteca http://pypi.python.org/pypi/dropbox/1.1

O dropbox implementou um oauth onde podemos desenvolver software e

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/nova-versao-da-api-do-dropbox.rst, line 26)

Line block ends without a blank line.

fazer o usuário usar a conta de dropbox dele para armazenamento de arquivos: |

Vou falar um pouco sobre 3 metodos que esta dentro da biblioteca "dropbox" client, rest e session:

Com o metodo session é por onde tudo começa, onde você linka o seu software com uma conta Dropbox, exemplo:

# Include the Dropbox SDK libraries
from dropbox import session

# Get your app key and secret from the Dropbox developer website
APP_KEY = 'INSERT_APP_KEY_HERE'
APP_SECRET = 'INSERT_SECRET_HERE'

# ACCESS_TYPE should be 'dropbox' or 'app_folder' as configured for your app
ACCESS_TYPE = 'INSERT_ACCESS_TYPE_HERE'
sess = session.DropboxSession(APP_KEY, APP_SECRET, ACCESS_TYPE)

Caso esteja usando a conta do Dropbox do usuário podemos pegar informações da conta dele:

client = client.DropboxClient(sess)
print "linked account:", client.account_info()

Agora usando o metodo "client" podemos fazer get e put de arquivos:

from dropbox import client
f = open('working-draft.txt')
response = client.put_file('/magnum-opus.txt', f)
print "uploaded:", response

Após criar o arquivos podemos ler ele:

print client.get_file('/magnum-opus.txt').read()

Reescrever o arquivo com uma nova revisão para criar um novo arquivo:

out = open('magnum-opus.txt', 'w')
out.write(client.get_file('/magnum-opus.txt',rev='362e2029684fe').read())

Para trabalhar com REST temos um ótima documentação https://www.dropbox.com/developers_beta/reference/api

Problema com hashlib + md5 (Python 2.7)

2011-10-04T22:46:00+02:00

Estava com o seguinte problema "Error: No module named _md5", primeiramente pensei que fosse problema de de compilação do Python, mas olhando o problema proximo achei alguns artigo falando desse problema e um deles estava no bug.python.org

A solução que cheguei foi, criar uma lib chamada "_md5", criei um arquivo chamado "_md5py":

class _md5:
    def __init__():
        import md5
        return md5

Lendo as documentação vi que a lib "hashlib._md5" foi deprecada pois a md5 ficou no lugar. Espero que ajude outras pessoas que esta com esse problema.

Porque fazer teste unitario em javascript?

2011-07-21T22:45:00+02:00

É complicado confiar em um software que não tem teste unitario. Hoje estava escrevendo alguns códigos em JavaScript e resolvi escrever esse post pois muitos desenvolvedores JavaScript não costumam testar seus códigos.

QUnit é um Framework open source de teste unitário para JavaScript. Ele foi desenvolvido para fazer teste unitários no desenvolvimento do próprio Jquery, mas é capaz de testar qualquer código Javascript (Até mesmo testar código Javascript do lado do servidor NodeJS).

Segue abaixo o exemplo de uma implementação simples:

<html>
<head>
  <script src="http://code.jquery.com/jquery-latest.js"></script>
  <link rel="stylesheet" href="http://code.jquery.com/qunit/git/qunit.css" type="text/css" media="screen" />
  <script type="text/javascript" src="http://code.jquery.com/qunit/git/qunit.js"></script>
  <script>
    function calc(val1, val2, oper){
      val1 = typeof val1 == 'undefined' ? 0 : val1
      val2 = typeof val2 == 'undefined' ? 0 : val2
      oper = typeof oper == 'undefined' ? "+" : oper

      if(oper == "+")
        cal = val1 + val2
      else if(oper == "-")
        cal = val1 - val2
      else
        cal = false

      return cal
    }
  </script>

  <script>
    $(document).ready(function(){

      module("Test render html")
      test("test valor in #test1", function(){
        equals("ok ok ok", $("#test1").html())
        notEqual("ok ok ok ", $("#test1").html())
      })

      module("Test function calc()")
      test("test basic return 10", function(){
        equals(10, calc(10))
        notEqual(10, calc(11))
      })

      test("test basic sum 2 parameter", function(){
        equals(20, calc(10, 10))
        notEqual(21, calc(10, 10))
        deepEqual(20, calc(10, 10))
        notStrictEqual("20", calc(10, 10))
      })

      test("set operator +", function(){
        equals(20, calc(10, 10, "+"))
        equals(false, calc(10, 10, "..."))
      })

      test("set operator -", function(){
        equals(1, calc(10, 9, "-"))
      })

    })
  </script>

</head>
<body>
  <h1 id="qunit-header">QUnit example</h1>
  <h2 id="qunit-banner"></h2>
  <div id="qunit-testrunner-toolbar"></div>
  <h2 id="qunit-userAgent"></h2>
  <ol id="qunit-tests"></ol>
  <div id="qunit-fixture">test markup, will be hidden</div>

  <div id="test1">ok ok ok</div>
</body>
</html>

No código acima estou fazendo dois tipos de testes: um módulo de item renderizado na página, e outro módulo de teste de uma função de cálculo.

Segue abaixo o print de como ficou o test:

Template Django com Haml

2011-05-28T22:44:00+02:00

Haml (HTML Abstraction Markup Language) é uma linguagem simples, que é usado para descrever XHTML de qualquer documento web sem precisar ficar abrindo e fechando tags HTML. Ele foi projetado para resolver muitos dos problemas de templates, bem como fazer marcação tão elegante como ela pode ser.

Em Python temos a biblioteca HamlPy ela pega os files HAML e gera o HTML para usarmos em nossos sistemas.

Vamos logo para a pratica, chega de lero lero.

%html{'xmlns':"http://www.w3.org/1999/xhtml", 'lang':"en", "xml:lang":"en"}
  %head

    %title Testando Haml

    %style{'type': 'text/css'}
      body{font-family: verdana;}

    %script{'type':'text/javascript', 'src':'https://www.google.com/jsapi?key=ABQIAAAAUgaJsDgRTDbR5vvhnJ3iYBT2yXp_ZAY8_ufC3CFXhHIE1NvwkxS2j2XMXVpjyqg8A7TkHl2W04abvA'}
    %script{'type': 'text/javascript'}
      google.load("jquery", "1.6.1");

  %body
    #header
      %h1#lero
        .test Haml
        %ul.navigation
          - for run in varloop
            %li= run
    #content
      Testando para ver se funciona o HamlPy

Esse é um layout feito com haml, é muito simples pois não precisamos ficar fechando as tags, assim os erros de html é 100% resolvido, como converte o haml para html:

/Users/avelino/.virtualenvs/haml/bin/hamlpy template/index.haml template/index.html

O binario hamlpy recebe dois parâmetros o primeiro é o input file haml o segunda é o output a saída html, depois de rodarmos o hamlpy temos uma saida da seguinte forma:

<html lang='en' xmlns='http://www.w3.org/1999/xhtml' xml:lang='en'>
  <head>
    <title>Testando Haml</title>
    <style type='text/css'>
      body{font-family: verdana;}
    </style>
    <script src='https://www.google.com/jsapi?key=ABQIAAAAUgaJsDgRTDbR5vvhnJ3iYBT2yXp_ZAY8_ufC3CFXhHIE1NvwkxS2j2XMXVpjyqg8A7TkHl2W04abvA' type='text/javascript'></script>
    <script type='text/javascript'>
      google.load("jquery", "1.6.1");
    </script>
  </head>
  <body>
    <div id='header'>
      <h1 id='lero'>
        <div class='test'>Haml</div>
        <ul class='navigation'>
          {% for run in varloop %}
            <li>{{ run }}</li>
          {% endfor %}
        </ul>
      </h1>
    </div>
    <div id='content'>
      Testando para ver se funciona o HamlPy
    </div>
  </body>
</html>

Minha views do Django declaro sempre com o arquivo .html que foi gerado com o hamlpy. Veja como ficou o meu views:

# -*- coding: utf-8 -*-
"""
    views

    :copyright: (c) 2011 by the Avelino Labs, see Thiago Avelino <thiago@avelino.us> for more details.
    :license: BSD, see LICENSE for more details.
"""

from django.shortcuts import render_to_response
from django.template import RequestContext

def index(request):
    return render_to_response(
            'index.html',
            context_instance=RequestContext(request))

Entendendo na pratica como funciona a linguagem Go

2011-05-25T22:14:00+02:00

A linguagem Go é um projeto open source para tornar os programadores mais produtivos.

Go foi desenvolvido para utilização maxima do CPU, tornando um processo simples para criar aplicação Multithreaded, o processo de utilização de maquinas na rede para processar determinado programa também é bem simples, assim tornando um software mais flexível e modular.

Vamos montar um servidor HTTPD em Go.

package main

import (
    "http";
    "io";
    "fmt";
)

func HelloServer(c *http.Conn, req *http.Request) {
    io.WriteString(c, "hello, world!\n");
}

func main() {
    fmt.Printf("http://localhost:8080/hello\n");
    http.Handle("/hello", http.HandlerFunc(HelloServer));
    err := http.ListenAndServe(":8080", nil);
    if err != nil {
        panic("ListenAndServe: ", err.String())
    }
}

O HelloServer() é o que vai fazer a parte de renderização, o man()

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/entendendo-na-pratica-como-funciona-linguagem-go.rst, line 42)

Line block ends without a blank line.

ele sobre o servidor HTTP na porta 8080, e caso o usuário tente processar um URL que não esteja no fmt ele vai cair no err onde vai processar o erro e apresentar o panic. | Simples assim já temos um servidor HTTP para toda HTTP.

[TOPICOFF] Site fora do ar, DataCenter tirando meu sono

2011-04-29T22:44:00+02:00

Peço 1001 desculpas por o Avelino.US ter ficado fora do ar durante os últimos 4 dias.

Depois de 8 mês o DataCenter onde estava meu site ele colocou algumas regrar para serviço contratado daquela data para frente e depois de 2 mês o DataCenter lançou a regra para os que já tinha servidor alugado, ou seja, todos os IP do servidor caiu.

Migramos de DataCenter e não vai mais ocorrer esse tipo de problema.

Upload da arquivo no Google App Engine (BlobProperty)

2011-04-23T22:43:00+02:00

Essa semana que passou tive uma necessidade para um sistema de trabalhar com UPLOAD de arquivos, ate ai é simples, só que o sistema estava em Google App Engine, depois de apanhar um pouco resolvi fazer um post aqui no Blog para deixar documentado como não é complicado trabalhar com BlobProperty no BigTable.

Primeiro vamos criar um Modal onde vai ter dois campo o arquivo e o mimetype dele:

class DatastoreFile(db.Model):
    data = db.BlobProperty(required=True)
    mimetype = db.StringProperty(required=True)

Agora vamos criar a views onde ele vai processar o formulario e o POST do formulario:

class MainHandler(webapp.RequestHandler):
    def get(self):
        self.response.out.write(template.render("upload.html", {}))

    def post(self):
        file = self.request.POST['file']

        entity = DatastoreFile(data=file.value, mimetype=file.type)
        entity.put()

        file_url = "http://%s/%d/%s" % (self.request.host, entity.key().id(), file.name)
        self.response.out.write("Your uploaded file is now available at %s" % (file_url,))

Podemos notar que na definição get() temos apenas a renderização do "upload.html", o conteudo dele é bem simples, temos um input do tipo file e outro submit:

<html>
<head>
  <title>File Upload</title>
</head>
<body>
  <form method="post" action="/" enctype="multipart/form-data">
    <input type="file" name="file" />
    <input type="submit" value="Upload" />
  </form>
</body>
</html>

Falando da definição post() que esta na classe MainHandler ela que faz o trabalho de fazer o UPLOAD do arquivo para dentro do BlobProperty, é um processo bem simples, a variável "file" recebe o POST do input file, depois disso chamamos o modal que tem o nome de DatastoreFile passando dois parâmetros que é os dois campos criados, o data e mimetype, depois disso é só fazer o put() que seja salvo no banco de dados. Dentro do post() eu gero o link para download do arquivo na variável file_url, onde passo o HOST (url do sistema), id() (do arquivo que foi feito upload) e file name (Nome do campo que recebeu o arquivo).

Agora temos que fazer a classe para download do arquivo onde vamos mudar o Content-Type do response para o mime-type do arquivo que foi feito o upload, exemplo: fiz o upload de um arquivo no formato JPG o mime type dele é "image/jpeg", então tenho que fazer o responser renderizar em formatado "image/jpeg".

Na URL que montamos para download passamos a seguinte informação id e file name onde temos que criar uma definição get() que receba essas informações:

class DownloadHandler(webapp.RequestHandler):
    def get(self, id, filename):
        entity = DatastoreFile.get_by_id(int(id))
        self.response.headers['Content-Type'] = entity.mimetype
        self.response.out.write(entity.data)

Recebendo as duas variáveis podemos fazer um consulta no BigTable de forma simples onde busco o id, pego o retorno do banco de dados e coloco que o response.headers['Content-Type'] é o mime-type que esta salvo no banco e depois é só escrever o arquivo na tela.

Agora vamos criar as rotas da URL:

def main():
    application = webapp.WSGIApplication([
        ('/', MainHandler),
        ('/(\d+)/(.*)', DownloadHandler)
        ],debug=True)
    util.run_wsgi_app(application)

if __name__ == '__main__':
    main()

Quem ainda estiver com duvida pode dar uma olhar no repositorio: https://bitbucket.org/avelino/post_py_upload_de_arquivo_no_gae/src

Criando sistema com Multithreaded em Python

2011-04-01T22:43:00+02:00

Multithreaded é quando temos mais de um programa executando ao mesmo tempo, totalmente diferente de executar duas vez o mesmo programa, com "threads" o sistema vai ser executado apenas uma vez e via thread vai processar mais de uma função ao mesmo tempo, isso é necessario para concorrência em sistema.

Algumas vantagens de trabalha com threads:

Múltiplos processo ao mesmo tempo e pode, portanto, compartilhar informações e comunicar uns com os outros mais facilmente do que se fossem processos separados;
Menos consumo de memória, pois o mesmo vai consumir mais CPU.

Uma thread tem um começo, meio e fim, assim podemos colocar um ponteiro de instrução para acompanhar onde esta sendo processado cada thread dentro de seu contexto.

Ela pode ser antecipada (interrompido);
Pode ser temporariamente suspensos (também conhecido como sleep), enquanto outros segmentos estão em execução - isso é chamado de rendimento.

Iniciando uma nova Thread:

#!/usr/bin/python
# -*- coding: UTF-8 -*-

import thread
import time

# Definição da função de thread
def print_time( name, delay):
    count = 0
    while count < 5:
        time.sleep(delay)
        count += 1
        print "%s: %s" % ( name, time.ctime(time.time()) )

# Criar dois tópicos
try:
    thread.start_new_thread( print_time, ("Thread-1", 2, ) )
    thread.start_new_thread( print_time, ("Thread-2", 4, ) )
except:
    print "Erro: não conseguiu iniciar a thread"

while 1:
    pass

Executando:

avelino:multithreading/ [11:01:01] $ python example.py
Thread-1: Thu Mar 31 11:03:20 2011
Thread-2: Thu Mar 31 11:03:22 2011
Thread-1: Thu Mar 31 11:03:22 2011
Thread-1: Thu Mar 31 11:03:24 2011
Thread-2: Thu Mar 31 11:03:26 2011
Thread-1: Thu Mar 31 11:03:26 2011
Thread-1: Thu Mar 31 11:03:28 2011
Thread-2: Thu Mar 31 11:03:30 2011
Thread-2: Thu Mar 31 11:03:34 2011
Thread-2: Thu Mar 31 11:03:38 2011

Se repararmos temos alguns processo concorrendo ao mesmo tempos, dessa forma já estamos trabalhando com Thread.

Modulos da biblioteca thread

threading.activeCount(): Retorna o número de objetos de thread que estão ativos.
threading.currentThread(): Retorna o número de objetos de thread no controle do chamador de thread.
threading.enumerate(): Retorna uma lista de todos os objetos de thread que estão atualmente activas.
run(): Método é o ponto de partida para uma thread.
start(): Método inicia uma thread, chamando o método de execução.
join([time]): Espera para terminar.
isAlive(): Método verifica se uma thread ainda está em execução.
getName(): Método retorno o nome de uma thread.
setName(): Método declaro o nome de um thread.

Trabalhando com Python e MongoDB

2011-03-28T22:40:00+02:00

Hoje MongoDB está começando ficar bem comentado na internet (famosos Database NoSQL). Tenho bastante aplicações em produção trabalhando com MongoDB e outros database NoSQL ambas escrita em Python, vou escrever um pouco como usar o MongoDB na linguagem Python.

Como em qualquer outra linguagem, não tem muito segredo. No Python temos a LIB chamada PyMongo, que simplifica muito o trabalho do programador.

Contando que o PyMongo já estejá instalado, seguimos em frente.

Como fazer um conexão:

>>> from pymongo import Connection
>>> connection = Connection()

>>> connection = Connection('localhost', 27017)

Usar/Criar um Database:

>>> db = connection.forum_database

>>> db = connection['forum-database']

O MongoDB usa um formato jSON para sua syntax, veja abaixo:

>>> forum = {"author": "Thiago Avelino",
...         "text": "Python e MongoDB",
...         "tags": ["mongodb", "python", "pymongo"]}

Inserindo em um Documento, usando o método insert():

>>> imaster = db.imaster
>>> imaster.insert(forum)
ObjectId('4c7400f42d73303fd2000000')

Após rodar o insert() ele criou um documento fisico no servidor, podemos ver este registro da seguinte forma:

>>> db.collection_names()
[u'imaster', u'system.indexes']

Selecionando apenas um documento com find_one()

>>> imaster.find_one()
{u'text': u'Python e MongoDB', u'_id': ObjectId('4c7400f42d73303fd2000000'), u'author': u'Thiago Avelino', u'tags': [u'mongodb', u'python', u'pymongo']}

Filtrando, usando condições para selecionar:

>>> imaster.find_one({"author": "Thiago Avelino"})
{u'text': u'Python e MongoDB', u'_id': ObjectId('4c7400f42d73303fd2000000'), u'author': u'Thiago Avelino', u'tags': [u'mongodb', u'python', u'pymongo']}

Contando:

>>> imaster.count()
1

Temos também alguns ORM Python que trabalha com o MongoDB, um exemplo

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/trabalhando-com-python-e-mongodb.rst, line 86)

Line block ends without a blank line.

é o MongoEngine que trabalha exatamente igual o ORM do Django. | Veja um exemplo usando MongoEngine:

class BlogPost(Document):
    title = StringField(required=True, max_length=200)
    posted = DateTimeField(default=datetime.datetime.now)
    tags = ListField(StringField(max_length=50))

class TextPost(BlogPost):
    content = StringField(required=True)

class LinkPost(BlogPost):
    url = StringField(required=True)

# Create a text-based post
>>> post1 = TextPost(title='Using MongoEngine', content='See the tutorial')
>>> post1.tags = ['mongodb', 'mongoengine']
>>> post1.save()

# Create a link-based post
>>> post2 = LinkPost(title='MongoEngine Docs', url='hmarr.com/mongoengine')
>>> post2.tags = ['mongoengine', 'documentation']
>>> post2.save()

# Iterate over all posts using the BlogPost superclass
>>> for post in BlogPost.objects:
...     print '===', post.title, '==='
...     if isinstance(post, TextPost):
...         print post.content
...     elif isinstance(post, LinkPost):
...         print 'Link:', post.url
...     print
...
=== Using MongoEngine ===
See the tutorial

=== MongoEngine Docs ===
Link: hmarr.com/mongoengine

>>> len(BlogPost.objects)
2
>>> len(HtmlPost.objects)
1
>>> len(LinkPost.objects)
1

# Find tagged posts
>>> len(BlogPost.objects(tags='mongoengine'))
2
>>> len(BlogPost.objects(tags='mongodb'))
1

Certificado EV SSL

2011-03-28T22:39:00+02:00

Certificados Digitais EV SSL, ou em português SSL de Validação Avançada, são certificados qualificados que se apresentam aos usuários da Internet de forma distinta dos demais certificados, garantindo assim aos usuários que o site acessado possui um certificado SSL emitido segundo um processo altamente seguro e verificado através de uma auditoria.

História

O Comércio via Internet está enfrentando uma crise de segurança. A confiança na segurança de sites está diminuindo, e o número de consumidores que estão deixando de fazer transações on-line está aumentando. Segundo o instituto Forrester Research, ao final de 2005, 24% dos usuários de Internet não compraria via web para os feriados de final de ano pois não se sentiam seguros e 61% reportou que haviam reduzido as compras online por algum motivo.

Agora em 2007 empresas com operações online poderão mostrar definitivamente sua identidade para os seus clientes – e os clientes poderão confirmar esta identidade antes de confiar no site. Essa oportunidade se deve ao resultado da grande evolução no backbone de segurança WEB nos últimos 10 anos. É a introdução de um novo tipo de certificado SSL, o primeiro desde a origem desta tecnologia há mais de uma década atrás.

Estes novos certificados são chamados Certificados Extended Validation SSL e eles representam mais de um ano de esforços feitos pelo CA/Browser Fórum, um consórcio de empresas líderes em manutenção de Browser e Autoridades Certificadoras de SSL. Os Certificados EV SSL irão facilitar o comércio online em todas as suas formas, aumentando a confiança dos usuários, legitimando sites e reduzindo significativamente a eficácia dos ataques de fraude e roubo de senha.

EV SSL no Brasil

No Brasil o certificado está sendo comercializado pela Certisign, Unicert, Comodo e Secsign. Até o final do ano estima-se que do total de vendas de certificados para servidores, 20% sejam no modelo EV SSL. Segundo a projeção da Certisign, isso significa a venda de quase 4.500 certificados.

Espera-se que no prazo de dois anos todas as empresas que se prestam a realizar transações on-line (como sites de e-commerce, bancos, etc...) adotem este produto, pois ele garante identificação visual, maior segurança e conforto para o consumidor.

Coding Dojo o melhor lugar para pratica Programação

2011-02-21T22:38:00+01:00

Nós da Comunidade Python São Paulo estamos no 10' Dojo.

Parabéns a todos os organizadores e participantes.

Agradeço a todas as empresa que abriu a porta para nós da Comunidade Python São Paulo poder realizar o Coding Dojo.

Dojo é uma reunião onde um grupo de programadores se reúnem para trabalhar em um desafio de programação. Eles estão lá para se divertir e se envolver em prática a fim de melhorar suas habilidades.

Veja a baixo videos gravado no 10' Dojo da Comunidade Python São Paulo onde foi realizado na empresa Gonow Tecnologia:

Veja o post completo que foi postado no Blog da Gonow.

Meu ambiente de trabalho em 7 itens

2011-02-20T22:37:00+01:00

O Licio me convidou para entrar no ritmo dos "7 itens" então vamos lá...

GIT + Mercurial

Geralmente procuro usar Mercurial no Bitbucket mas costumo usar

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 13)

Definition list ends without a blank line; unexpected unindent.

bastante Git no Github. Uso o Github porque vejo ele muito mais do que um espaço para criar repositórios, e sim uma rede social de Desenvolvedor.
VIM

Depois de muito testar o Emacs, TextMate e VIM, resolvi

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 23)

Definition list ends without a blank line; unexpected unindent.

afirma que para mim o melhor é o VIM, consigo fazer tudo que preciso e não tenho tantos problemas com " como no TextMate. Falando um pouco sobre o Emacs, realmente é um ótimo editor, só que cansa brincar de street fighter quando vou programar (Para os que conhece Emacs vai entender).

System Message: ERROR/3 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 28)

Unexpected indentation.

Depois de conhecer o QMX (Evangelista VIM) comecei ver o VIM como

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 29)

Block quote ends without a blank line; unexpected unindent.

um ótimo editor.
OS X

Depois de passar muito tempo com ambiente Linux, vi que não

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 36)

Line block ends without a blank line.

bastava a simplicidade de um gerenciamento de pacote como yum ou apt-get e sim um sistema onde conseguisse uma melhor integração com a camada de hardware. Por isso hoje uso Macbook, com o sistema operacional OS X.

E a bateria dura muito mais tempo do que qual quer outro Notebook que eu tive.
iterm2 + homebrew

Utilizo o iterm2 como terminal do meu Mac e tem me agradado muito

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 51)

Definition list ends without a blank line; unexpected unindent.

a parte de troca de abas, como gerenciador de pacote utilizo o homebrew (que me foi apresentado pelo Fabio Akita, automaticamente já sabemos que é escrito em Ruby :/ )
pip + virtualenv + virtualenvwrapper

Como sou desenvolvedor Python não temos trabalhar com ultiplos

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 61)

Definition list ends without a blank line; unexpected unindent.

projetos sem um Virtualenv para isolar meus ambientes para cada projeto, o Virtualenvwrapper uso para simplificar a criação de cada ambiente e o pip uso para instalar bibliotecas Python.
Dropbox

Realmente o Dropbox me salvou muitas vezes, com o uso dele não

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 71)

Definition list ends without a blank line; unexpected unindent.

preciso ficar levando pen drive para cliente ou qual quer local que eu for.
Google Apps (Gmail)

Não sei qualificar quantos % da minha vida profissional esta encima

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/meu-ambiente-de-trabalho-em-7-itens.rst, line 80)

Definition list ends without a blank line; unexpected unindent.

do Google Apps, mas sei que tem muita coisa lá.

Agora para seguir com o meme, convido meus amigos:

Christiano Anderson
Bruno Rocha
Bernardo Heynemann
Rodrigo Bernardo Pimentel

Curso Desenvolvimento ágil com Django

2011-01-27T22:36:00+01:00

Comece a desenvolver com um framework de alto nível, que estimula o desenvolvimento rápido e limpo. Aprenda Django agora!

O Curso esta no valor de R$ 69,00.

No curso explico como fazer um site completo com Django onde

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/curso-desenvolvimento-agil-com-django.rst, line 24)

Line block ends without a blank line.

contemplo valores que o profissional vai usar no desenvolvimento de sistemas, no curso tem materiais suficiente para que você possa criar e ajuda qual quer projeto Open Source escrito em Python e Django.

O curso esta sendo realizado com apoio do iMasters Pro onde temos outros curso com uma qualidade excelente.

Veja o conteudo do curso de Django no site do iMasters Pro.

Problema com Celery "process exiting with exitcode 1"

2010-12-16T22:34:00+01:00

Hoje estava rodando o Celery em um projeto e me deparei com um problema, o "process exiting with exitcode 1" quando dava start no Celery:

[root@xen-01 gonow]# python2.7 manage.py celeryd -v 2 -B -s celery -E -l INFO
[2010-12-16 09:18:13,184: WARNING/MainProcess] celery@xen-01 v2.1.3 is starting.
[2010-12-16 09:18:13,185: WARNING/MainProcess] /usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/apps/
        worker.py:107: UserWarning: Running celeryd with superuser privileges is not encouraged!
  "Running celeryd with superuser privileges is not encouraged!")
[2010-12-16 09:18:13,185: WARNING/MainProcess] /usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/apps/
        worker.py:110: UserWarning: Using settings.DEBUG leads to a memory leak, never use this setting in a production environment!
  warnings.warn("Using settings.DEBUG leads to a memory leak, "
[2010-12-16 09:18:13,188: WARNING/MainProcess]
Configuration ->
    . broker -> ghettoq.taproot.Database://guest@localhost/
    . queues ->
        . celery -> exchange:celery (direct) binding:celery
    . concurrency -> 2
    . loader -> djcelery.loaders.DjangoLoader
    . logfile -> [stderr]@INFO
    . events -> ON
    . beat -> ON
    . tasks ->
        . gonow.vps.tasks.lvm
[2010-12-16 09:18:13,213: INFO/PoolWorker-2] child process calling self.run()
[2010-12-16 09:18:13,223: INFO/PoolWorker-3] child process calling self.run()
[2010-12-16 09:18:13,237: INFO/Beat] child process calling self.run()
[2010-12-16 09:18:13,239: INFO/Beat] Celerybeat: Starting...
[2010-12-16 09:18:13,239: WARNING/MainProcess] celery@xen-01 has started.
[2010-12-16 09:18:13,257: INFO/Beat] process shutting down
[2010-12-16 09:18:13,258: WARNING/Beat] Process Beat:
[2010-12-16 09:18:13,259: WARNING/Beat] Traceback (most recent call last):
[2010-12-16 09:18:13,259: WARNING/Beat] File "/usr/local/lib/python2.7/multiprocessing/process.py", line 232, in _bootstrap
[2010-12-16 09:18:13,284: WARNING/Beat] self.run()
[2010-12-16 09:18:13,285: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 392, in run
[2010-12-16 09:18:13,291: WARNING/Beat] self.service.start(embedded_process=True)
[2010-12-16 09:18:13,292: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 322, in start
[2010-12-16 09:18:13,292: WARNING/Beat] humanize_seconds(self.scheduler.max_interval)))
[2010-12-16 09:18:13,292: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 362, in scheduler
[2010-12-16 09:18:13,292: WARNING/Beat] self._scheduler = self.get_scheduler()
[2010-12-16 09:18:13,292: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 354, in get_scheduler
[2010-12-16 09:18:13,293: WARNING/Beat] lazy=lazy)
[2010-12-16 09:18:13,293: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/utils/
        __init__.py", line 362, in instantiate
[2010-12-16 09:18:13,297: WARNING/Beat] return get_cls_by_name(name)(*args, **kwargs)
[2010-12-16 09:18:13,298: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 274, in __init__
[2010-12-16 09:18:13,298: WARNING/Beat] Scheduler.__init__(self, *args, **kwargs)
[2010-12-16 09:18:13,298: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 150, in __init__
[2010-12-16 09:18:13,299: WARNING/Beat] self.setup_schedule()
[2010-12-16 09:18:13,299: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 279, in setup_schedule
[2010-12-16 09:18:13,299: WARNING/Beat] self.merge_inplace(conf.CELERYBEAT_SCHEDULE)
[2010-12-16 09:18:13,299: WARNING/Beat] File "/usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/beat.py",
        line 250, in merge_inplace
[2010-12-16 09:18:13,299: WARNING/Beat] if self.get(key):
[2010-12-16 09:18:13,300: WARNING/Beat] File "/usr/local/lib/python2.7/UserDict.py", line 61, in get
[2010-12-16 09:18:13,310: WARNING/Beat] return self[key]
[2010-12-16 09:18:13,310: WARNING/Beat] File "/usr/local/lib/python2.7/UserDict.py", line 20, in __getitem__
[2010-12-16 09:18:13,310: WARNING/Beat] return self.data[key]
[2010-12-16 09:18:13,311: WARNING/Beat] File "/usr/local/lib/python2.7/shelve.py", line 122, in __getitem__
[2010-12-16 09:18:13,317: WARNING/Beat] value = Unpickler(f).load()
[2010-12-16 09:18:13,318: WARNING/Beat] EOFError
[2010-12-16 09:18:13,318: INFO/Beat] process exiting with exitcode 1

O motivo desse error é que antes de dar start no Celery ele já esta rodando em memoria. Quando rodamos o Celery ele cria alguns arquivos no projeto para gerenciamento de Task, um dele é o celery.dir que guarda informações das function que vai ser processada de X em X tempo.

Bom a solução para esse casa é apagar o arquivo "celery.dir" assim ele zera o task do Celery, quando der start novamente ele recria o "celery.dir".

Agora ele só normal:

[root@xen-01 gonow]# python2.7 manage.py celeryd -v 2 -B -s celery -E -l INFO
[2010-12-16 09:18:28,539: WARNING/MainProcess] celery@xen-01 v2.1.3 is starting.
[2010-12-16 09:18:28,540: WARNING/MainProcess] /usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/apps/
        worker.py:107:
        UserWarning: Running celeryd with superuser privileges is not encouraged!
  "Running celeryd with superuser privileges is not encouraged!")
[2010-12-16 09:18:28,540: WARNING/MainProcess] /usr/local/lib/python2.7/site-packages/celery-2.1.3-py2.7.egg/celery/apps/
        worker.py:110:
        UserWarning: Using settings.DEBUG leads to a memory leak, never use this setting in a production environment!
  warnings.warn("Using settings.DEBUG leads to a memory leak, "
[2010-12-16 09:18:28,543: WARNING/MainProcess]
Configuration ->
    . broker -> ghettoq.taproot.Database://guest@localhost/
    . queues ->
        . celery -> exchange:celery (direct) binding:celery
    . concurrency -> 2
    . loader -> djcelery.loaders.DjangoLoader
    . logfile -> [stderr]@INFO
    . events -> ON
    . beat -> ON
    . tasks ->
        . gonow.vps.tasks.lvm
[2010-12-16 09:18:28,568: INFO/PoolWorker-2] child process calling self.run()
[2010-12-16 09:18:28,578: INFO/PoolWorker-3] child process calling self.run()
[2010-12-16 09:18:28,591: INFO/Beat] child process calling self.run()
[2010-12-16 09:18:28,593: INFO/Beat] Celerybeat: Starting...
[2010-12-16 09:18:28,596: WARNING/MainProcess] celery@xen-01 has started.

Cron dentro do Django com Celery

2010-10-19T22:34:00+02:00

Ontem na parte da noite conversando com um conhecido ele falou que

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/cron-dentro-do-django-com-celery.rst, line 9)

Line block ends without a blank line.

estava usando em um projeto o Celery, como ainda não conhecia vamos estudar este projeto. Gostei da forma que ele trabalha e como ele integra com o Django. | Tenho em um projeto uma fila de processamento só que foi desenvolvido por mim e não tem todos os recursos que o Celery tem.

Vou explicar como usar o Celery com o Django em um exemplo simples, e como sempre basta usar a criatividade para desenvolver a sua necessidade.

Primeiramente temos que instalar dois pacotes Python para que possamos trabalhar com o Celery no Django, o django-celery e ghettoq. Caso tenhamos o easy_install instalado basta instalar os pacotes da seguinte forma:

$ easy_install django-celery
$ easy_install ghettoq

Caso não tenha vamos instalar:

$ cd /usr/src/
$ git clone http://github.com/ask/django-celery.git
$ cd django-celery
$ python setup.py build
$ python setup.py install
$ cd ..
$ git clone http://github.com/ask/ghettoq
$ cd ghettoq
$ python setup.py build
$ python setup.py install

Após instalar vamos criar um projeto para que possamos trabalhar com o Celery nele.

$ django-admin.py startproject celerytest
$ cd celerytest

Vamos editar o settings.py:

DATABASES = {
    'default': {
        'ENGINE': 'django.db.backends.sqlite3',
        'NAME': 'test',
    }
}
...
CARROT_BACKEND = "ghettoq.taproot.Database"
INSTALLED_APPS = (
    ...
    'djcelery',
    'ghettoq',
)

Após declarar qual biblioteca o projeto em Django vai carregar podemos sincronizar o nosso database:

$ python manage.py syncdb

Temos que criar um arquivo chamado tasks.py, esse arquivo trabalha como o models de uma aplicação:

from celery.task.schedules import crontab
from celery.decorators import periodic_task

# this will run every minute, see http://celeryproject.org/docs/reference/celery.task.schedules.html#celery.task.schedules.crontab
@periodic_task(run_every=crontab(hour="*", minute="*", day_of_week="*"))
def test():
    print "Tarefa de teste..."

Agora temos que dar start em nosso daemon Celery:

$ python manage.py celeryd -v 2 -B -s celery -E -l INFO
2010-10-19 05:34:44,215: WARNING/MainProcess] celery@program-8 v2.1.1 is starting.
[2010-10-19 05:34:44,216: WARNING/MainProcess] /usr/local/lib/python2.6/dist-packages/celery-2.1.1-py2.6.egg/celery/apps/
    worker.py:105: UserWarning: Running celeryd with superuser privileges is not encouraged!
  "Running celeryd with superuser privileges is not encouraged!")
[2010-10-19 05:34:44,216: WARNING/MainProcess] /usr/local/lib/python2.6/dist-packages/celery-2.1.1-py2.6.egg/celery/apps/
    worker.py:108: UserWarning: Using settings.DEBUG leads to a memory leak, never use this setting in a production environment!
  warnings.warn("Using settings.DEBUG leads to a memory leak, "
[2010-10-19 05:34:44,222: WARNING/MainProcess]
Configuration -&gt;
    . broker -&gt; ghettoq.taproot.Database://guest@localhost/
    . queues -&gt;
        . celery -&gt; exchange:celery (direct) binding:celery
    . concurrency -&gt; 2
    . loader -&gt; djcelery.loaders.DjangoLoader
    . logfile -&gt; [stderr]@INFO
    . events -&gt; ON
    . beat -&gt; ON
    . tasks -&gt;
 . celerytest.lol.tasks.test
[2010-10-19 05:34:44,238: INFO/PoolWorker-2] child process calling self.run()
[2010-10-19 05:34:44,239: INFO/PoolWorker-3] child process calling self.run()
[2010-10-19 05:34:44,241: WARNING/MainProcess] celery@program-8 has started.
[2010-10-19 05:34:44,241: INFO/Beat] child process calling self.run()
[2010-10-19 05:34:44,241: INFO/Beat] Celerybeat: Starting...
[2010-10-19 05:35:00,537: INFO/MainProcess] Got task from broker: celerytest.lol.tasks.test[22d15af7-8fe9-4acd-bdde-06265004eb50]
[2010-10-19 05:35:00,760: WARNING/PoolWorker-3] firing test task
[2010-10-19 05:35:01,088: INFO/MainProcess] Task celerytest.lol.tasks.test[22d15af7-8fe9-4acd-bdde-06265004eb50] processed: None

Pronto ele esta rodando.

O Celery é um projeto muito bom só que ainda estamos enfrentando alguns bugs com processos pesado o pior que ele para de processar e não esta dando nem um retorno, por isso antes colocar em produção teste sua aplicação onde o Celery vai rodar.

Par ou Ímpar com Python

2010-10-18T22:33:00+02:00

Como vocês viu gosto muito de matemática, então nada melhor de juntar

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/par-ou-impar-com-python.rst, line 9)

Line block ends without a blank line.

Matemática com Python, um script simples em Python para identificar se o numero digitado é Par ou Ímpar.

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/par-ou-impar-com-python.rst, line 12)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    #!/usr/bin/env python
    n = raw_input("Numero: ")
    if n%2==0:
        print "Par"
    else:
        print "Impar"

Não tem muito segredo mas no teste do evento Google Developer Day caiu coisa do tipo.

Identificando dispositivo movel no Django

2010-10-16T22:32:00+02:00

Hoje temos uma biblioteca chamada de Bloom Device feira para Django desenvolvida por bishanty e kevin.tom.

Como instalar?

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 13)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    $ wget http://django-bloom.googlecode.com/files/bloom-0.1.tar.gz
    $ tar -tzvf bloom-0.1.tar.gz
    $ cd django-bloom
    $ python setup.py install

Antes de instalar esta biblioteca teríamos que fazer da segunte forma:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 22)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    >>> request.META['HTTP_USER_AGENT']
    'SonyEricssonW850i/R1GB Browser/NetFront/3.3 Profile/MIDP-2.0 Configuration/CLDC-1.1'

E pegar o resultado do HTTP_USER_AGENT e parcia. Com o Bloom Device ele retorna um JSON:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 30)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    >>> request.device
    {u'mobileDevice': '1', u'displayWidth': '240', u'displayHeight': '320', u'vendor': 'Sony Ericsson',  u'model': 'W850i', ...}

Como usar no Django?

Depois de instalado temos que instanciar o Bloom Device no Django no

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 36)

Line block ends without a blank line.

settings.py:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 40)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    INSTALLED_APPS = (
    ...
    'bloom.device',
    ...
    )
    ...
    MIDDLEWARE_CLASSES = (
    ...
    'bloom.device.middleware.DeviceDetectMiddleware',
    ...
    )

Na views da aplicação vamos usar assim:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/identificando-dispositivo-movel-no-django.rst, line 56)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    @detect_device
    from bloom.device.decorators import detect_device
    def my_view(request):
    print request.device
    ...

Agora vai a criatividade para poder trabalhar com o Bloom Device.

Recomendações

jQuery Mobile

Calculo de Bhaskara via Python

2010-10-15T22:31:00+02:00

O foco este post é levar você aprender computação com Python.

Para calcular as raízes em função do segundo grau, utilizamos uma fórmula muito querida por todos que estudam no ensino médio, a famosa fórmula de Bhaskara:

Onde cada letra desta fórmula representa os coeficientes da função do segundo grau que queremos resolver. Basta substituir e achar os valores. Podem notar que há um ± no meio da fórmula. Pois é, é daí que irá sair dois resultados: um com o sinal de + e outro com o sinal de -. Veja o exemplo:

Neste exemplo temos os coeficientes, a=2, b= -6 e c= -20 (Muita

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/calculo-de-bhaskara-python.rst, line 31)

Line block ends without a blank line.

atenção para os sinais) | Agora substituindo na fórmula de Bhaskara: | |

Agora chegamos no momento crucial do cáculo das raízes.

Devemos separar esta conta em duas: uma com o sinal de + e a outra

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/calculo-de-bhaskara-python.rst, line 37)

Line block ends without a blank line.

com o sinal de -. Assim: | |

Portanto as duas raízes da função são 5 e -2.

Chega de blablabla e vamos ver como isso fica em Python:

import math
import sys
a=input ("a:")
b=input ("b:")
c=input ("c:")
d=(b^2)-(4*a*c) #Mário Meyer
# d=((b^2)-4*a)*c Esta errado esta linha, usar a linha superior.
if d<0 :
        print ("Delta negativo, raiz impossivel de ser extraida.")
        sys.exit()

else : print "Delta: %s." % d
        m1=math.sqrt(d)
        x1=(-b+m1)/(2*a)
        x2=(-b-m1)/(2*a)
        print "Raiz ~ X1= %s." % x1
        print "Raiz ~ X2= %s." % x2

Oportunidade Python - UPX

2010-10-14T22:31:00+02:00

Empresa de Alphaville (São Paulo) procura DOIS programadores Python para trabalharem presencialmente desenvolvendo em framework Django. Contratação imediata.

Características obrigatórias:

Fluência em Python e Django.
Fluência em inglês escrito.
Disponibilidade para trabalhar das 9h às 18h em Alphaville.

Características desejáveis:

Ser usuário GNU Linux.
Noções de Mercurial.
Experiência com Webservices.
Noções de Google AppEngine.

A faixa salarial é de ~ R$ 5.000,00. Os currículos (ou portfólios) devem ser enviados em para thiago.ayub AT upx DOT com DOT br

Gerando SVG com Python

2010-10-11T22:23:00+02:00

Em baixo veja um código de como gerar SVG com Python

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/gerando-svg-com-python.rst, line 10)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    import os

    display_prog = 'display'

    class Scene:
        def __init__(self,name="svg",height=400,width=400):
            self.name = name
            self.items = []
            self.height = height
            self.width = width
            return

        def add(self,item): self.items.append(item)

        def strarray(self):
            var = ["\n",
                   "\n" % (self.height,self.width),
                   " \n"]
            for item in self.items: var += item.strarray()
            var += [" \n\n"]
            return var

        def write_svg(self,filename=None):
            if filename:
                self.svgname = filename
            else:
                self.svgname = self.name + ".svg"
            file = open(self.svgname,'w')
            file.writelines(self.strarray())
            file.close()
            return

        def display(self,prog=display_prog):
            os.system("%s %s" % (prog,self.svgname))
            return


    class Line:
        def __init__(self,start,end):
            self.start = start #xy tuple
            self.end = end     #xy tuple
            return

        def strarray(self):
            return ["  \n" %\
                    (self.start[0],self.start[1],self.end[0],self.end[1])]


    class Circle:
        def __init__(self,center,radius,color):
            self.center = center #xy tuple
            self.radius = radius #xy tuple
            self.color = color   #rgb tuple in range(0,256)
            return

        def strarray(self):
            return ["  \n" % colorstr(self.color)]

    class Rectangle:
        def __init__(self,origin,height,width,color):
            self.origin = origin
            self.height = height
            self.width = width
            self.color = color
            return

        def strarray(self):
            return ["  \n" %\
                    (self.width,colorstr(self.color))]

    class Text:
        def __init__(self,origin,text,size=24):
            self.origin = origin
            self.text = text
            self.size = size
            return

        def strarray(self):
            return ["  \n" %\
                    (self.origin[0],self.origin[1],self.size),
                    "   %s\n" % self.text,
                    "  \n"]


    def colorstr(rgb): return "#%x%x%x" % (rgb[0]/16,rgb[1]/16,rgb[2]/16)

    def main():
        scene = Scene('test')
        scene.add(Rectangle((100,100),200,200,(0,255,255)))
        scene.add(Line((200,200),(200,300)))
        scene.add(Line((200,200),(300,200)))
        scene.add(Line((200,200),(100,200)))
        scene.add(Line((200,200),(200,100)))
        scene.add(Circle((200,200),30,(0,0,255)))
        scene.add(Circle((200,300),30,(0,255,0)))
        scene.add(Circle((300,200),30,(255,0,0)))
        scene.add(Circle((100,200),30,(255,255,0)))
        scene.add(Circle((200,100),30,(255,0,255)))
        scene.add(Text((50,50),"Thiago Avelino gerando SVG com Python"))
        scene.write_svg()
        scene.display()
        return

    if __name__ == '__main__':
     main()

Repositório para linguagem Python - PyPI

2010-10-10T22:23:00+02:00

PyPI (Python Package Index) é um repositório para linguagem Python. Hoje temos 11.559 software no repositório.

Caso você use PyPI e ache um erro basta reporta o BUG para o Support Requests.

Você tem uma aplicação e acha que a mesma pode ajudar outras pessoas você pode colocar a sua aplicação no PyPI, basta ler como reporta a aplicação aqui.

Veja todas as aplicações

Django Lock 1.0 - Gnome Look

2010-09-23T22:22:00+02:00

Tema para Gnome com cara de Django

http://gnome-look.org/content/show.php?action=content&content=132944

O blog do Google Brasil: Google Developer Day 2010 - São Paulo, Brasil - Inscrições Abertas!

2010-09-15T22:21:00+02:00

O blog do Google Brasil: Google Developer Day 2010 - São Paulo, Brasil - Inscrições Abertas!

Ajudando o projeto MongoEngine

2010-09-06T22:21:00+02:00

Com grande orgunho que venho anunciar a todos que o projeto MongoEngine tem path pt_BR.

http://mongoengine.org/pt_BR/

Por enquanto estamos apenas com o site em Português e trabalhando encima da documentação.

Caso você queira ajudar o projeto por favor mandar email para avelino@mongoengine.org

Livro Aprenda Computação com Python

2010-09-04T22:18:00+02:00

Você quer aprender Python e não sabe por onde começar?

Posso indicar um Livro é escrito pelo pessoal da `Associação Python

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/livro-aprenda-computacao-com-python.rst, line 9); backlink

Inline interpreted text or phrase reference start-string without end-string.

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/livro-aprenda-computacao-com-python.rst, line 9)

Line block ends without a blank line.

Brasil`_. Hoje esta na versão 1.1 e se encontra no Google Code com o nome aprendacompy.

Este é o 3º repositório público deste projeto, que começou na Incubadora Fapesp, migrou para o Bitbucket e agora está no GoogleCode, onde esperamos encontrar uma base permanente, mais estável e mais acessível para os colaboradores.

São Paulo Open Source Jam 2 - Google Open Source Blog

2010-08-07T22:17:00+02:00

São Paulo Open Source Jam 2 - Google Open Source Blog

Foi um evento muito bom.

Software proprietaros em linguagem Open Source

2010-07-23T22:17:00+02:00

Não sei bem por onde começar escrever este post, mas vamos lá.

Hoje achei na internet um software proprietario que usava quando tinha

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/software-proprietaros-em-linguagem-open-source.rst, line 11)

Line block ends without a blank line.

empresa de webhost com o source aberto, bom sou programador e logo baixei para ver o source. | Graças a Deus não uso ele ainda, me deu muito medo de olhar a estrutura do software e codigo, à lembrando que esta em php 3 (lol).

Se você tem software Open Source ou principalmente proprietario tem que fornecer uma estrutura robusta para o seu software sejá ele trabalho colaborativo ou corporativo.

Open source você ganha em promoção pessoal e na própria venda de serviços a quem confiou em você porque mostrou que tem capacidade de fazer algo que sirva.

Projeto proprietário precisa de investimento inicial às vezes alto e

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/software-proprietaros-em-linguagem-open-source.rst, line 25)

Line block ends without a blank line.

para dar retorno precisa ser vendido. Isto geralmente é difícil porque quase sempre tem um similar free e Open Source.

Estude os modelos disponíveis por aí e discuta com a equipe como pretendem ganhar dinheiro.

Bom é isso ai, espero ajuda você empresa ou profissional rever alguns conceitos

TDA Fila com Python

2010-07-23T22:15:00+02:00

O foco este post é levar você aprender computação com Python.

O TDA Fila é definido pelas seguintes operações:

__init__

Inicializar uma nova fila vazia.
insert
Adicionar um novo item à fila.
remove
Remover e retornar um item da fila. O item retornado é o que foi

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/tda-fila-com-python.rst, line 12)

Line block ends without a blank line.

adicionado primeiro. | isEmpty | Checar se a fila está vazia.

Segue abaixo um source para explica melhor a implementação "TAD Fila".

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/tda-fila-com-python.rst, line 23)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    class Queue:
     def __init__(self):
      self.length = 0
      self.head = None

     def isEmpty(self):
      return (self.length == 0)

     def insert(self, cargo):
      node = Node(cargo)
      node.next = None
      if self.head == None:
       # if list is empty the new node goes first
       self.head = node
      else:
       # find the last node in the list
       last = self.head
       while last.next: last = last.next
       # append the new node
       last.next = node
         self.length = self.length + 1

     def remove(self):
      cargo = self.head.cargo
      self.head = self.head.next
      self.length = self.length - 1
      return cargo

Existem duas invariantes para um objeto Fila bem formado: o atributo length deve ser o número de nós na fila.

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/tda-fila-com-python.rst, line 57)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    >>> from Queue import *
    >>> start = new Queue()
    >>> start.insert(50)
    >>> start.insert(99)
    >>> start.insert(10)
    >>> while not start.isEmpty(): print start.remove()
    50
    99
    10

Pilhas com listas de Python

2010-07-23T22:13:00+02:00

Pilhas com listas de Python

O foco este post é levar você aprender computação com Python.

As listas de Python são bem parecida com às operações que define uma

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/pilhas-com-listas-de-python.rst, line 11)

Line block ends without a blank line.

pilha.

Segue abaixo um source para explica melhor a implementação "TAD Pilha"

class Stack :
 def __init__(self) :
  self.items = []

 def push(self, item) :
  self.items.apend(item)

 def pop(self) :
  return self.items.pop()

 def isEmpty(self) :
  return (self.items == [])

Uma pilha é uma estrutura de dados genérica, o que significa que podemos adicionar qualquer tipo de ítem a ela.

Usando:

>>> from Stack import *
>>> start = Stack()
>>> start.push(50)
>>> start.push(23)
>>> start.push("+")
>>> while not start.isEmpty() :
... priint start.pop()

Python é uma otima linguagem para ser academica.

Fail no Sonora - terra.com.br

2010-07-16T22:12:00+02:00

O terra.com.br vende um produto que estagiários faz...

Estagiário que escreve o software do terra.com.br

Teste e qualidade de software (TDD)

2010-07-15T22:11:00+02:00

Quando falamos em "Teste e qualidade de software" nós programadores já devemos ter em mente uma técnica chamada Test Driven Development (TDD) em português Desenvolvimento dirigido por testes é uma técnica de desenvolvimento que gera em torno de um ciclo repetições:

Desenvolvedor escreve um caso de teste automatizado que define uma melhoria desejada ou uma nova funcionalidade.
É produzido código que possa ser validado pelo teste para posteriormente o código ser refatorado para um código sob padrões aceitáveis.

Através de TDD, programadores podem aplicar o conceito de melhorar e depurar código legado desenvolvido apartir de técnicas antigas.

Alguns Framework para TDD:

iGrape Framework (Em desenvolvimento do modulo de TDD) -

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/teste-e-qualidade-de-software-tdd.rst, line 23)

Line block ends without a blank line.

http://igrape.org | Pyccuracy Acceptance Testing Framework - http://github.com/heynemann/pyccuracy | Cucumber - http://cukes.info/ | Accuracy

Trabalhando com Location em php para Android

2010-07-15T22:10:00+02:00

Veja como trabalhar com PHP + Android + Location

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/trabalhando-com-location-em-php-para-android.rst, line 10)

Cannot analyze code. No Pygments lexer found for "brush:php".

.. code:: brush:php

    include("Android.php");
    $droid = new Android();

    $droid->dialogCreateAlert();

    $result = array();

    $latitude = $droid->getInput("Location", "Latitude: ");
    $longitude= $droid->getInput("Location", "Longitude: ");

    $locations = $droid->geocode($latitude['result'], $longitude['result']);

    foreach ($locations['result'] as $location)
    {
      $location = get_object_vars($location);
      foreach ($location as $key => $value)
      {
        $result[] = ucfirst(str_replace('_', ' ', $key)).': '.$value;
      }
    }
    $droid->dialogSetItems($result);

    //displays the box
    $droid->dialogShow();

by Anton

Novos icones dos Serviço Google

2010-07-07T22:09:00+02:00

Curti

Um pouco mais sobre Google Friend Connect

2010-07-07T22:09:00+02:00

Google Friend Connect é uma aplicação web que permite a adicionar recursos de redes sociais diretamente a um site ou blog qualquer.

A primeira versão do Google Friend Connect foi apresentada oficialmente ao público em dezembro de 2008. Através deste recurso, um usuário usando uma conta Google,Yahoo! ou OpenID, pode interagir com outros visitantes do site ou de sua própria rede social, compartilhando recursos, arquivos ou aplicações OpenSocial.

http://www.google.com/friendconnect

Badge button do iGrape Framework

2010-07-06T22:08:00+02:00

Se você gostou da ideia, ajuda ou quer ajudar pegue agora mesmo o seu badge button.

Grupo: http://groups.google.com/group/igrape

Github: http://github.com/igrape

Site: http://igrape.org

Para os amantes de Python, vem ai o novo framework iGrape Python

2010-07-04T22:07:00+02:00

Bom é com grande prazer anunciar a version 0.1 do iGrape Python esta disponivel para todos contribuir para uma grande saga de CODES para o mesmo.

A version 0.1 do iGrape Python esta utilizando o mod_python para fazer a renderização HTML

Github

Twitter

ORM Python para MongoDB - MongoEngine

2010-07-03T22:03:00+02:00

O MongoEngine é um ORM para MongoDB escrito em Python, o developer

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/orm-python-para-mongodb-mongoengine.rst, line 9)

Line block ends without a blank line.

team do MongoEngine busca trabalhar exatamente igual ao ORM do Django.

Uso o MongoEngine em muitos projetos e ele é o ORM MongoDB oficial do iGrape Python (Ainda não esta disponivel on-line, estamos terminando os teste para depois disponibilizar.

O MongoEngine trabalha com o pyMongo, então antes de instalar o MongoEngine instale o pyMongo.

Chega de blablabla, vamos ao exemplo:

class BlogPost(Document):
    title = StringField(required=True, max_length=200)
    posted = DateTimeField(default=datetime.datetime.now)
    tags = ListField(StringField(max_length=50))

class TextPost(BlogPost):
    content = StringField(required=True)

class LinkPost(BlogPost):
    url = StringField(required=True)

# Create a text-based post
>>> post1 = TextPost(title='Using MongoEngine', content='See the tutorial')
>>> post1.tags = ['mongodb', 'mongoengine']
>>> post1.save()

# Create a link-based post
>>> post2 = LinkPost(title='MongoEngine Docs', url='hmarr.com/mongoengine')
>>> post2.tags = ['mongoengine', 'documentation']
>>> post2.save()

# Iterate over all posts using the BlogPost superclass
>>> for post in BlogPost.objects:
...     print '===', post.title, '==='
...     if isinstance(post, TextPost):
...         print post.content
...     elif isinstance(post, LinkPost):
...         print 'Link:', post.url
...     print
...

=== Using MongoEngine ===

See the tutorial

=== MongoEngine Docs ===

Link: hmarr.com/mongoengine

>>> len(BlogPost.objects)
2
>>> len(HtmlPost.objects)
1
>>> len(LinkPost.objects)
1

# Find tagged posts
>>> len(BlogPost.objects(tags='mongoengine'))
2
>>> len(BlogPost.objects(tags='mongodb'))
1

Simples de trabalhar assim né, agora mão na massa vamos migrar nosso sistema que usa MongoDB para MongoEngine

Mexer no que esta quieto (Servidor Linux)

2010-06-29T22:03:00+02:00

Bom resolvi fazer atualização no servidor onde roda os mirror (CentOS

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/mexer-no-que-esta-quieto-servidor-linux.rst, line 9)

Line block ends without a blank line.

e PHP) | | E com sempre.... PAM (Grande surpresa)

Ele atualizou o servidor de DNS (PowerDNS) e lá vem a merda....

Pensei que ele tinha trocado o file de conf e dei um mv em outro que

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/mexer-no-que-esta-quieto-servidor-linux.rst, line 14)

Line block ends without a blank line.

estava na pasta, que beleza faz as coisas sem olhar, o file estava correto e coloquei um errado o servidor DNS não respondia...

Pessoal cuidado com servidores em produção.

Servidor de MIRROR esta na Locaweb, recomendo.

Install WebAlizer in CentOS 5.5 (Final)

2010-06-28T22:02:00+02:00

I needed to statisitca mirror for PHP (br3.php.net)

Install dependency:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/install-webalizer-centos-55-final.rst, line 22)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    root@avelino: ~ # yum -y install gcc gcc-c++ gd gd-devel zlib zlib-devel

Install webalizer:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/install-webalizer-centos-55-final.rst, line 28)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    root@avelino: ~ # wget ftp://ftp.mrunix.net/pub/webalizer/webalizer-2.21-02-src.tgz
    root@avelino: ~ # tar -xzvf webalizer-2.21-02-src.tgz
    root@avelino: ~ # mv webalizer-2.21-02-src webalizer
    root@avelino: ~ # mv webalizer /var/www/html
    root@avelino: ~ # cd /var/www/html/webalizer

Compile webalizer:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/install-webalizer-centos-55-final.rst, line 38)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    root@avelino: ~ # ./configure
    root@avelino: ~ # make
    root@avelino: ~ # make install
    root@avelino: ~ # mkdir /etc/webalizer
    root@avelino: ~ # cp /usr/local/etc/webalizer.conf.sample /etc/webalizer
    root@avelino: ~ # cd /etc/webalizer
    root@avelino: ~ # mv webalizer.conf.sample webalizer.conf
    root@avelino: ~ # vi webalizer.conf

Config line:

LogFile /var/log/httpd/access_log
OutputDir /var/www/html/webalizer
HostName yourdomain.com

Run virtual proses

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/install-webalizer-centos-55-final.rst, line 56)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    root@avelino: ~ # for i in /etc/webalizer/*.conf; do webalizer -c $i ; done

Check this out

http://yourdomain.com/webalizer

Continuidade no projeto IUG

2010-06-24T22:02:00+02:00

Hoje conversando com o Coringao (Responsável pelo Ubuntu Games)

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/continuidade-no-projeto-iug.rst, line 19)

Line block ends without a blank line.

perguntei do IUG (Instalador Ubuntu Games). | Ele me informou que estava parado e tals.

O desenvolvedor dele foi o Pretto e por motivos de falta de tempo ele não pode dar continuidade.

A partir de hoje estou assumindo o projeto IUG.

Launchpad

Configurando date.timezone do PHP

2010-06-23T22:01:00+02:00

Quando você instala o php no servidor ele vem com o timezone em comentário mas tem Framework ou Sistemas que pede isso, bom simples.

Localize o arquivo php.ini no seu servidor e ache a linha

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/configurando-datetimezone-do-php.rst, line 13)

Line block ends without a blank line.

date.timezone. | Pronto agroa coloque ele assim:

date.timezone = "America/Sao_Paulo"

Pronto, agora de um restart no seu HTTPD (Apache) e já esta funcionando.

Algumas diferença entre YUM e APT

2010-06-21T22:00:00+02:00

Na tabela abaixo tem algumas diferença entre o YUM e APT.

APT	YUM	Descrição breve
apt-get install "pacote"	yum install "pacote" yum groupinstall "grupo_pacote"	Instala um pacote ou um grupo de pacotes (para ver os grupos de pacotes que podem ser instalados digite "yum grouplist". Por exemplo, para instalar o X11 é necessario digitar o comando "yum groupinstall "X Window System"". Já para instalar o KDE digite "yum groupinstall "KDE (K Desktop Environment)"").
apt-get install "pacote"	yum update "pacote" yum upgrade "pacote" yum install "pacote" yum groupinstall "grupo_pacote"	Atualiza um pacote ou um grupo de pacotes já instalados. Para ver os grupos de pacotes que podem ser instalados digite "yum grouplist".
apt-get install -d pacote	yum install --downloadonly yumdownloader pacote	Faz o download do pacote, lembrando que com o apt-get e com o yum o download é feito para o diretório do cache (/var/cache/). Já com o "yumdownloader", o rpm vai por padrão para o diretório atual. Para utilizar a opção "--downloadonly" do comando "yum" é necessário instalar um plugin (yum install yum-plugin-downloadonly)
apt-get install -V pacote	---	Instala um pacote, mostrando as suas versões.
apt-get install --auto-remove pacote	---	Remove as dependências sem uso ao instalar um pacote.
apt-get install --reinstall pacote	yum reinstall pacote	Reinstala o pacote já instalado.
apt-get install -m \| --fix-missing \| --ignore-missing pacote	x	CORRIGIR PROBLEMAS: ignora pacotes perdidos. Pode-se usá-lo em conjunto com a opção "-f". Use este comando quando aparecer erros como "500 Can't connect to ftp.debian.org (Connect: Network is unreachable) Faile to fetch http://IP:porta.... Este erro pode aparecer ao tentar instalar um pacote depois de ter sido executado com sucesso o "apt-get update".
apt-get install -f \| --fix-broken [pacote]	x	CORRIGIR PROBLEMAS: tenta corrigir o sistema com dependências quebradas.
apt-get remove pacote	---	Este comando não removem as dependências sem uso (orfãs) do pacote que será removido e nem remove os arquivos de configuração. Contudo avisa quais são essas dependências e mostra como removê-las (apt-get autoremove).
apt-get remove --purge pacote	yum remove pacote yum erase pacote yum groupremove "grupo_pacote"	Estes comando não removem as dependências sem uso (orfãs) do pacote que será removido, mas remove os arquivos de configuração.
apt-get remove --purge --auto-remove pacote	yum remove --remove-leaves pacote	Remove as dependências sem uso ao remover um pacote. Por padrão o yum e o apt não removem as dependências sem uso. Veja também o comando "deborphan" e "rpmorphan". Para usar a opção "--remove-leaves" do comando "yum" é necessário instalar um plugin (yum install yum-plugin-remove-with-leaves).
apt-get remove -f \| --fix-broken [pacote]	x	CORRIGIR PROBLEMAS: tenta corrigir o sistema com dependências quebradas.
apt-get update	yum makecache	Atualiza a lista de todos os pacotes disponíveis (a lista dos pacotes disponíveis fica numa database feita a partir do comando "apt-get update" ou "yum makecache". Ao utilizar o comando "yum makecache" tudo que está dentro de "/etc/yum.repos.d/" é verificado).
apt-get upgrade	yum update yum groupupdate	Atualiza os pacotes já instalados.
apt-get dist-upgrade	yum upgrade yum update --obsoletes	Atualiza a versão da distribuição. O "yum upgrade" = "yum update --obsoletes". Veja o plugin para o "yum" chamado "yum-plugin-upgrade-helper".
apt-get autoremove	---	Remove as dependências sem uso.
apt-cache search expressão apt-cache pkgnames expressão	yum search expressão yum provides pacote yum whatprovides pacote yum list pacote yum grouplist grupo_pacote	Procura a expressão em todos os pacotes disponíveis, nas suas descrições breves e/ou nas descrições detalhadas. A lista dos pacotes disponíveis fica numa database feita a partir do comando "apt-get update" ou "yum makecache". As opções "provides" e "whatprovides" do comando "yum" mostram a descrição breve do pacote.
apt-cache show pacote	yum info [pacote] yum groupinfo grupo_pacote	Mostra informações sobre um pacote ou no caso do "yum info" pode mostrar informações de todos os pacotes.
apt-cache pkgnames [expressão]	yum list [nome_pacote] yum grouplist [nome_grupo_pacote]	Mostra uma lista de pacotes disponíveis (a lista dos pacotes disponíveis fica numa database feita a partir do comando "apt-get update" ou "yum makecache") ou um que coincida com a expressão utilizada.
apt-cache depends pacote	yum deplist pacote	Mostra as dependências de um determinado pacote. Também mostra sugestões, conflitos e recomendações.
apt-cache stats	---	Mostra estatísticas sobre a database do pacotes.
apt-cache policy	---	Mostra como está a configuração do "/etc/apt/preferences" que prioriza pacotes.
apt-get clean	yum clean packages	Apaga o cache local gerado ao instalar ou atualizar algum pacote. Eles ficam em "/var/cache/apt/" ou em "/var/cache/yum/"
---	yum clean dbcache	---
---	yum clean headers	---
---	yum clean metadata	apaga arquivos XML, XML.TGZ e SQLITE que ficam dentro de "/var/cache/yum/fedora" e em "/var/cache/yum/updates". Este comando apaga cache da lista de pacotes disponíveis que são gerados ao utilizar comando como "yum update", "yum makecache" etc. Então, ao utilizar o comando "yum clean metadata" toda lista de pacotes terá que ser baixada novamente.
---	yum clean all	Equivalente aos comando "yum clean headers", "yum clean metadata", "yum clean packages" e "yum clean dbcache"
apt-get source pacote	---	Faz o download do código fonte do pacote para o diretório atual, incluindo o diretório descompactado do pacote (já faz a descompactação do tar.gz) e aparecem vários outros pacotes relacionados.
apt-get source -d pacote	yumdownloader --source pacote	Faz o download do código fonte do pacote para o diretório atual. No caso do "apt-get" é um "tar.gz". Já com o "yumdownloader" é um "src.rpm".
---	yum-builddep pacote	x
/etc/apt/sources.list apt-get update apt-get install apt-get upgrade etc ou /etc/apt/preferences apt-get install -t etch pacote	yum downgrade pacote	O manual on-line "man apt-get" recomenda cuidado ao fazer downgrades. No caso do comando "apt" se deve primeiro mudar o repositório (/etc/apt/sources.list) e depois atualizar a lista de pacotes disponíveis (apt-get update) antes de tentar um downgrade.
---	yum {ação} --noplugins pacote	Roda com todos os plugins desabilitado. Os plugins são habilitados por padrão.
apt-file search /caminho/arquivo	rpm -qf / caminho/arquivo	Descobre em qual pacote está um determinado arquivo ou biblioteca. Deve-se passar o path do arquivo em vez e digitar "apt-file update" para atualizar o cache. Este comando é o mesmo que consultar o endereço packages.debian.org
apt-key update	---	Caso real que aparecia a mensagem "W: GPG error:". Digitei "apt-key update" e resolveu o problema.
apt-get install debian-archive-keyring apt-get update ou apt-get install --reinstall debian-archive-keyring apt-get update	---	Caso real que apareciam as seguintes mensagens ao utilizar o comando "apt": "W: GPG error:", "The following packages could not be authenticated debian", "The following signatures couldn't be verified because the public key is not available", "There is no public key available for the following key IDs" ou "The following signatures were invalid"..
*Arquivos de System Message: WARNING/2 (`/Users/avelino/workspace/avelino.github.io/content/old/algumas-diferenca-entre-yum-e-apt.rst`, line 1536); backlink* Inline strong start-string without end-string. Configuração**	*Arquivos de System Message: WARNING/2 (`/Users/avelino/workspace/avelino.github.io/content/old/algumas-diferenca-entre-yum-e-apt.rst`, line 1558); backlink* Inline strong start-string without end-string. Configuração**	Descrição breve
/etc/apt/sources.list	/etc/yum.repos.d/fedora.repo /etc/yum.repos.d/fedora-updates.repo /etc/yum.repos.d/fedora-updates-testing.repo /etc/yum.repos.d/fedora-rawhide.repo	* fedora.repo: repositório padrão de pacotes do Fedora; * fedora-updates.repo: repositório de atualizações de pacotes já testadas; * fedora-updates-testing.repo: repositório de atualizações de pacotes que estão em fase de teste; * fedora-rawhide.repo: repositório de pacotes não testados e que ainda em desenvolvimento. Este repositório é mais usado por desenvolvedores para testarem novos pacotes para a próxima versão do Fedora.
/etc/apt/apt.conf	/etc/yum.conf	Arquivo de configuração das ações que devem ser tomandas ao utiliza o comando apt.
/var/cache/apt/	/var/cache/yum/	Cache dos pacotes e das databases.
/etc/apt/preferences	---	Prioridades das versões do Debian GNU/Linux.
/var/lib/dpkg/status	/var/lib/rpm/*	Lista de pacotes instalados ou não-instalados
---	/etc/yum/pluginconf.d/	Diretório onde ficam arquivos de configuração dos plugins (novas funcionalidades) para o comando "yum".
---	/etc/yum/yum-updatesd.conf	Arquivo de configuração para o daemon do "yum" que notifica a existência de atualização. Esta notificação pode ser através de e-mail, syslog ou sobre o dbus (daemon de menssagem).

by Hugo

Introdução ao tnsnames.ora

2010-06-21T21:59:00+02:00

A Oracle (corporação) é uma empresa mantenedora do Database Enterprise Oracle. Como o foco da Oracle é business eles foca em uma documentação mais profissional onde os Certificado consiga entender com facilidade.

Bom chega de blablabla, vamos para parte de template de TNS:

System Message: WARNING/2 (/Users/avelino/workspace/avelino.github.io/content/old/introducao-ao-tnsnamesora.rst, line 15)

Cannot analyze code. No Pygments lexer found for "brush:python".

.. code:: brush:python

    XE =
    (DESCRIPTION =
    (ADDRESS =
    (PROTOCOL = TCP)(HOST = localhost)
    (PORT = 1521)
    )
    (CONNECT_DATA =
    (SERVER = DEDICATED)
    (SERVICE_NAME = XE)
    )
    )

Isso é muito importante quando você tem uma aplicação onde tem que conectar em um Database remoto.

Falando um pouco do iGrape Framework

2010-06-19T21:59:00+02:00

iGrape é um Framework com um foco bem diferente de todos os framework do mercado. Ele busca unificar algumas linguagem de programação onde ele vai ficar responsável pela logica e estrutura do APLICATIVO e a linguagem fica responsável pela syntax.

Hoje o iGrape Framework tem versão em PHP onde estamos desenvolvendo a arquitetura do framework. Vamos contar com versão php, python, ruby e css (Buscando uma arquitetura de escrita unica).

iGrape quadro está disponível desde 2007 e uso dos últimos três anos em vários cenários de produção. É baseado em princípios sólidos MVC, incluindo a separação de exibição, lógica e camadas de dados. Ele foi projetado para ser eficiente, modular e expansível, permitem um equilíbrio de luz e um monte de recursos em três línguas que ele trabalha (PHP, Python e Ruby).

Caso você gostou da ideia do iGrape Framework e quer ajudar no Desenvolvimento, Redator (Escrever DOCS), Tester (Em diversos ambientes) e etc:

Github: github.com/igrape/igrape

Grupo: groups.google.com/group/igrape

Tweet Switch com Youtube no Gtalk

2010-06-17T21:58:00+02:00

Python Web ou Django (Framework MVC Design Pattern)

2010-05-25T21:55:00+02:00

Bom hoje temos alguns Framework (MVC) Python na web, vou estar comparando o source Python Web com Django, simplesmente ficou mais somples.

Python Web:

#!/usr/bin/python

import MySQLdb

print "Content-Type: text/html"
print
print "<title>Books</title>"
print ""
print "<h1>Books</h1>"
print "<ul>"
connection = MySQLdb.connect(user='me', passwd='letmein', db='my_db')
cursor = connection.cursor()
cursor.execute("SELECT name FROM books ORDER BY pub_date DESC LIMIT 10")
for row in cursor.fetchall():
    print "<li>%s</li>" % row[0]
print "</ul>"
print ""
connection.close()

Django (MVC Design Pattern):

# models.py (the database tables)

from django.db import models

class Book(models.Model):
    name = models.CharField(maxlength=50)
    pub_date = models.DateField()

# views.py (the business logic)

from django.shortcuts import render_to_response
from models import Book

def latest_books(request):
    book_list = Book.objects.order_by('-pub_date')[:10]
    return render_to_response('latest_books.html', {'book_list': book_list})

# urls.py (the URL configuration)

from django.conf.urls.defaults import *
import views

urlpatterns = patterns('',
    (r'latest/$', views.latest_books),
)

# latest_books.html (the template)

<title>Books</title>

<h1>Books</h1><ul>{% for book in book_list %}
<li>{{ book.name }}</li>
{% endfor %} </ul>

pyBotIRC Bot em Python para IRC

2010-05-23T21:56:00+02:00

Bot simples usando socket no Python:

import sys
import socket
import string

HOST="irc.freenode.net"
PORT=6667
NICK="pyAvelino"
IDENT="pyAvelino"
REALNAME="pyBotIRC"
readbuffer=""
CHANNELINIT="#channel"

s=socket.socket( )
s.connect((HOST, PORT))
s.send("NICK %s\r\n" % NICK)
s.send("USER %s %s bla :%s\r\n" % (IDENT, HOST, REALNAME))
s.send('JOIN %s\r\n' % CHANNELINIT)

while 1:
# readbuffer=readbuffer+s.recv(1024)
readbuffer=s.recv(1024)
print readbuffer
temp=string.split(readbuffer, "\n")
readbuffer=temp.pop( )

for line in temp:
    line=string.rstrip(line)
    line=string.split(line)

    if(line[0]=="PING"):
        s.send("PONG %s\r\n" % line[1])

avelino.us

Chromium as the default browser

Riak, alta performance NoSQL para seu projeto

Palestra sobre London Framework na PyCon Argentina

Docutils System Messages

Plone, por onde começar?

Por onde começa?

Comunidade Plone Brasil

Comandos tmux (cheat sheet)

tmux - terminal multiplexer

Managing tmux sessions

Sharing sessions between terminals

Commands (used within a running tmux session)

Plone para desenvolvedores Python

Proxy transparente com Nginx

Console colorido usando Node.js

Porque uso "\u" nos códigos unicode?

Criando package (modulo) em Node.js

Vagas de Python para trabalhar remoto

Trabalhar para empresa de fora do Brasil

Node.js onde usar?

Test é para os fracos

VIM a IDE para programadores Python

Google Nexus S, atualização oficial para Android 4.0 (Ice Cream Sandwich)

Para você atualizar o seu Nexus S faça o seguinte procedimento:

Nova versão da API do Dropbox

Problema com hashlib + md5 (Python 2.7)

Porque fazer teste unitario em javascript?

Template Django com Haml

Entendendo na pratica como funciona a linguagem Go

[TOPICOFF] Site fora do ar, DataCenter tirando meu sono

Upload da arquivo no Google App Engine (BlobProperty)

Criando sistema com Multithreaded em Python

Modulos da biblioteca thread

Trabalhando com Python e MongoDB

Certificado EV SSL

História

EV SSL no Brasil

Coding Dojo o melhor lugar para pratica Programação

Meu ambiente de trabalho em 7 itens

Curso Desenvolvimento ágil com Django

Problema com Celery "process exiting with exitcode 1"

Cron dentro do Django com Celery

Par ou Ímpar com Python

Identificando dispositivo movel no Django

Calculo de Bhaskara via Python

Oportunidade Python - UPX

Gerando SVG com Python

Repositório para linguagem Python - PyPI

Django Lock 1.0 - Gnome Look

O blog do Google Brasil: Google Developer Day 2010 - São Paulo, Brasil - Inscrições Abertas!

Ajudando o projeto MongoEngine

Livro Aprenda Computação com Python

São Paulo Open Source Jam 2 - Google Open Source Blog

Software proprietaros em linguagem Open Source

TDA Fila com Python

Pilhas com listas de Python

Fail no Sonora - terra.com.br

Teste e qualidade de software (TDD)

Trabalhando com Location em php para Android

Novos icones dos Serviço Google

Um pouco mais sobre Google Friend Connect

Badge button do iGrape Framework

Para os amantes de Python, vem ai o novo framework iGrape Python

ORM Python para MongoDB - MongoEngine

Mexer no que esta quieto (Servidor Linux)

Install WebAlizer in CentOS 5.5 (Final)

Continuidade no projeto IUG

Configurando date.timezone do PHP

Algumas diferença entre YUM e APT

Introdução ao tnsnames.ora

Falando um pouco do iGrape Framework

Tweet Switch com Youtube no Gtalk

Python Web ou Django (Framework MVC Design Pattern)

pyBotIRC Bot em Python para IRC