The people that matter don’t mind and the people that mind don’t matter.

O 4Chan é, discutivelmente, o maior fórum da internet. Tudo o que os teus tios vão te mandar por email daqui a 5 anos está rolando por lá há pelo menos 3. De RickRolling ao Pedobear, tudo surgiu no 4chan.

Dentre as inúmeras categorias, a mais famosa e insana é o Random, ou /b/ (pronunciado “bê”) para os íntimos. O /b/ é uma terra sem-lei, onde as únicas coisas proibidas são pedofilia e e xingar o admin, embora volta-e-meia alguém escape…

O volume de informação (100% inútil, garanto) é imenso, chegando a casa dos milhões de posts por dia, e pelo menos um quarto deles tem imagens. Se você não conhece o /b/ ainda, vai ali, abre a página (cuidado, potencialmente NSFW!) e volta. Eu te espero.

Pronto, abriu e ficou dando F5 por meia hora, né?

Foi pensando nisso que eu resolvi escrever o BDumper. Ele é um simples robô que vai abrir o /b/, pegar o link de todas as imagens atualmente na página inicial e baixar a versão full de cada uma. Terminado isso, simplesmente repete o processo até encher o saco ou lotar o teu HD, o que vier primeiro.

O programa foi escrito em C++, utilizando somente a STL para fazer o parse das strings e fazendo uma chamada de sistema pro curl para baixar os arquivos.

Esta é a primeira versão do programa, o código está feio, sujo e bobo, não tem uma interface gráfica nem tratamento nenhum além de verificar a ID do arquivo no 4chan para evitar baixar o mesmo link duas vezes (embora baixe duas imagens iguais caso sejam postadas com nomes diferentes).

Aceito sugestões e correções.

Por um momento eu achei que isto fosse maléfico demais, mas, hey, não tem como ser pior que o /b/.

Só peço para, por favor, não postarem este código lá, vai derrubar o servidor deles.

Baixe as imagens do /b/!

TODO:

• Interface gráfica, provavelmente em QT, embora talvez faça uma em Cocoa para facilitar a vida de quem tem um mac e não quer instalar a SDK do QT.
• Fezer uma checkagem por hash das imagens para evitar baixar imagens repetidas
• Limpar o código
• Edit: Opção para abrir cada thread e baixar as imagens dela, dica do Geek Pobre, nos comentários

O código foi compilado no OSX com o XCode, o projeto e o binário estão inclusos. Para compilar no Linux:

g++ -o bdumper funcoes.cpp main.cpp

Mas eu não testei ainda no Linux.

Edit: Compilei e testei ele no Linux, roda como esperado.

O programa também deve compilar sem problemas no Visual Studio ou outras IDEs no windows, só tenha certeza de ter o CURL no seu PATH.

Han? Erro com o MSSQL eu entendo, mas o Linux Today rodando MSSQL? É o fim dos tempos, como diria meu Tio.

O ssh (secure shell) já salvou a minha vida mais de uma vez. É muito mais prático do que FTP quando se quer fazer alterações nos arquivos do servidor e não é necessário subir ou baixar nenhum arquivo. Além disso, existe o sshfs, que é uma grande facilidade para nós usuários do Linux, que podemos montar uma pasta ssh como se fosse um sistema de arquivos local, e ter todo o conforto de editores de texto gráficos e bonitinhos 100% online.

Crédito da foto: Stryker W@SP

Ela provê uma conexão segura e encriptada a um servidor remoto, e te dá uma shell completa do sistema hospedeiro, que normalmente é unix. Conhecer a linha de comando então é mais que uma mão na roda, é obrigatório. Mas muita gente não vai muito longe do ls, cd, pwd, rm, mv.

Existem dois truques que eu uso muito em todos os sites que eu administro, e realmente facilitam muito a minha vida.

Imagina a situação: no teu site tem uma centena ou mais de arquivos de backup, simples cópias de segurança de arquivos, de antes de serem modificados, e você não precisa mais deles. Sempre ouvimos que é uma boa prática nesses casos simplesmente fazer uma cópia do arquivo, adicionando .bak ao fim do nome, mas ninguém nunca nos diz porque. Esse primeiro truque é justamente para tirar proveito disso. Tendo todos os teus arquivos de backup terminando em .bak, não importa quão espalhados eles estejam na árvore de diretórios, basta rodar este comandinho:

find . | grep .bak | xargs rm

(Antes que os xiitas venham reclamar, sim, dá pra juntar o find com um grep, mas o grep é mais rápido que o find para esse caso.)

Explicando por partes: Cada “|” (chamado de pipe) concatena comandos, passando a saída de um comando para o próximo. O primeiro comando, find ., lista recursivamente todos os arquivos do diretório atual. A saída é passada para o grep, que procura nessa lista por arquivos que contenham a expressão .bak no nome (e é uma boa rodar só os dois primeiros comandos para ter certeza de que não tá aparecendo nada extra aí). Por fim, temos o todo-poderoso xargs, que tem mais usos do que o próprio Stallman conhece, executa o comando rm em cada nome desta lista.

A segunda situação é quando precisamos fazer uma faxina no servidor, mas não sabemos o que diabos está pesando 1,5GB. Isso é facilmente resolvido com este lindo comando:

du -ch

(É fácil de lembrar dele, lê “duch”, que soa a “douche”, um xingamento em inglês).

Este comando vai também listar recursivamente todos os diretórios (mas só eles, não os arquivos), e te dar o tamanho de cada um, e o total da pasta atual no fim. Extremamente útil.

O meu notebook é bem guerreiro. É um HP Pavillion dv9010us, tela 17, dual core, 2GB de RAM. E funciona muito bem com o Linux. Já tive alguns problemas com ele, e nem tudo funciona com a facilidade que deveria, mas funciona.

Eu inclusive troquei a wireless dele (e tive que hackear a BIOS no processo) por uma Atheros ABG, para dar uma melhorada no coitado, já que veio com uma broadcom B, muito chinelona.

A única coisa que eu nunca tinha nem tentado fazer funcionar no Linux foi a webcam dele. Sabia que ela um dia tinha funcionado no windows, pois veio instalada, e cheguei a utilizá-la lá, mas após uma ou outra formatação da partição windows, nem com os drivers do site da HP ela funcionava. Simplesmente ignorei o fato e fui adiante.

Hoje, porém, eu vim no ônibus pensando em como eu não tinha nada de inútil para fazer a tarde, e no que poderia tentar fazer. Decidi pôr minha webcam pra funcionar. Minha decepção, porém, foi com a facilidade. Passo a passo, o que deve ser feito para as webcams que, como a minha, usam o chipset r5u870:

Primeiro, verifique qual webcam você tem. Dê um lsusb no terminal. Você deve encontrar uma linha como esta:

Bus 001 Device 002: ID 05ca:1870 Ricoh Co., Ltd

O que importa, nesta linha, é o que vem depois de ID. Qualquer webcam cuja ID seja 05ca:18xx funcionará com este guia.

A seguir, atualize seu sistema e instale os pacotes essenciais para a compilação com um sudo aptitude install build-essential linux-headers. Vale lembrar que eu testei com o kernel rt do ubuntustudio, e funcionou sem problema nenhum. Minha experiência diz que, se algo assim funciona nesse kernel, funciona em qualquer lugar.

Agora baixe as fontes:

svn co http://svn.mediati.org/svn/r5u870/trunk r5u870

Uma pasta com o nome de r5u870 será criada. Mude para ela com um cd e compile com um make. Não se preocupe com tudo o que aparece no teminal, são warnings do gcc, normalmente, e vai dar tudo certo assim mesmo. Se deu problema, a última linha será algo como make: *** [all] Error 2. Caso isto não tenha aparecido, está tudo ok. Siga em frente e instale com um sudo make install. Agora nada deve dar errado.

Pronto, seus drivers estão compilados. Após um reboot eles serão carregados normalmente. Caso não queira esperar, dê um sudo modprobe r5u870 e seja feliz.

O aMSN reconheceu sem problema nenhuma minha webcam e enviou para meus contatos. O mesmo aconteceu com o xawtv (sudo aptitude install xawtv).

[Página do desenvolvedor]

Morto de cansado. Não há melhor maneira de descrever meu estado após o dia de hoje da FISL.

Nem tirei muitas fotos porque fiquei de palestra em palestra. Assisti uma especialmente boa, do Rasmus Lerdorf, criador do PHP.

Ele contou da sua experiência em portar todo o Yahoo para PHP, as dificuldades de um sistema em larga escala, como optimizar o código e principalmente como manter a segurança do sistema.

A wireless estava um pouco menos pior. Fora dos lugares mais movimentados, onde a interferência das outras redes era menor, eu pegava IP com certa facilidade, e até consegui baixar a incrível velocidade de 1MBps.

O problema, mesmo, era no meio do povo. Com cerca de 15 redes wireless, não tinha como não dar interferência. O resultado foi ligar na cabeada mesmo.

No pouco tempo que eu estive fora das palestras, vi um grupo de crianças que fazem parte de um projeto-piloto do OLPC, cada uma com seu XO. Peguei um pedaço da conversa de duas menininhas de, no máximo, 10 anos, que contavam ter blogs. Damn, competição de gatos a gente atura, mas menininhas pré-adolescentes?

No geral, foi melhor que o segundo dia, mas ainda temos os mesmos problemas de sempre. E pensar que depois de 9 anos já teriam aprendido…