Hoje é dia do Administrador de Sistemas

Standard

Mais um ano se passou e nem sequer ouvi falar seu nome….

Wiring Closet: BEFORE
photo credit: Cloned Milkmen

Se o sujeito da frase acima for seu administrador de sistemas erga as mãos para o céu e agradeça. O bom administrador de sistema é assim mesmo: Discreto, silencioso, compassivo e calmo. Tem que entender as necessidades dos usuários, entender os meandros do sistema e não aparecer. Quando aparece algo está errado.

Você não imagina os lugares em que um administrador de sistemas tem que botar a mão até que a coisa fede.

Aproveite hoje e dê um abraço no seu afinal, sem ele, sua rede estaria parada e você não estaria lendo isso.

Mineração de Nuvens

Standard

A mineração de dados é o mais importante conjunto de tecnologias que estão sendo desenvolvidas em nossos dias. É diretamente responsável por quase todas as surpresas que temos todos os dias na Internet. Hoje, por acaso, uma empresa de vendas online me enviou uma promoção de um item que pesquisei ontem em várias outras lojas. Pura coincidência, ou um dos melhores exemplos de troca de informações e mineração de dados que vi este ano. E vemos isso todos os dias.

Drowning by numbers
photo credit: Jorge Franganillo

O R é uma linguagem de programação para estatística e mineração de dados que, nos últimos dois anos tomou de assalto as mentes, e corações de milhões de pesquisadores, cientistas de dados, mineradores, gerentes e estudantes. Baseado em uma ferramenta proprietária, foi desenvolvido e é distribuído em software livre. Permitindo a criação de rotinas, algoritmos e testes de validade ou classificação extremamente rápidos. Eu disse linguagem de programação? Fui modesto, trata-se de um verdadeiro ambiente de desenvolvimento.  Acrescente outra ferramenta livre, o RStúdio, teremos, além do ambiente de desenvolvimento, uma ide amigável e boa qualidade. Ainda assim há um problema.

Algoritmos de mineração de dados requerem grande capacidade de processamento e espaços gigantescos de memória. Para você ter uma idéia no meu modesto dual core, com 4 gigas, minerar exceções em apenas 2000 linhas gastou 2 giga bytes de memória e 45 segundos. Tempo e recursos inaceitáveis para ambientes de produção e mesmo para pesquisas um pouco mais complexas.

Qual não foi minha surpresa ao descobrir que posso minerar dados de graça nas núvens usando um ambiente com capacidades centenas de vezes maior que o meu? A Coudnumbers oferece 2GBytes de armazenamento para seus dados e scripts, 2GBytes de tráfico e 5 horas de processamento por mês, totalmente grátis. Aquela mineraçãozinha de 2000 linhas levou só 8s e acredito que a maior parte deles tenha sido gasta enviando e recebendo dados. Minha internet também não é lá estas coisas. Não conhece o R, não se preocupe, eles aceitam também Python e C/C++ entre outras.

Bons dados o tragam.

A mineração de dados é o mais importante conjunto de tecnologias que estão sendo desenvolvidas em nossos dias. É diretamente responsável por quase todas as surpresas que temos todos os dias na Internet. Hoje, por acaso, uma empresa de vendas online me enviou uma promoção de um item que pesquisei ontem em várias outras lojas. Pura coincidência, ou um dos melhores exemplos de troca de informações e mineração de dados que vi este ano. E vemos isso todos os dias.