Estamos em um novo endereço

Aqui estamos nós para avisar que estamos em um novo endereço. www.dadosaleatorios.com.br Lá vamos postar muitas coisas sobre data mining, web crawling, estatística e programação. Não deixe de nos acompanhar e ficar ligado no que está acontecendo. As atualizações serão feitas semanalmente e é claro, envie-nos sugestões. Espero vocês lá.

Criando um Web Crawler para pegar as informações diretamente no site do Cartola FC

Neste post vou ensinar como criar um web crawler para pegar as informações no site do Cartola FC e assim criar suas próprias estatísticas, índices, etc... Mas afinal, o que é um web crawler? Segundo a Wikipedia,  "é um programa de computador que navega pela World Wide Web de uma forma metódica e automatizada.". No caso do Cartola FC, queremos acessar o site e pegar todas as informações referentes a tabela de busca, de todos os jogadores.

Então a ideia básica é acessar o site do Cartola FC, pegar o código fonte e tratá-lo de alguma maneira de forma a restar apenas as informações que são de seu interesse.

A imagem abaixo exibe como exemplo o jogador Fred (com a tabela que é apresentada ao usuário) e um respectivo pedaço do código fonte.


Porém analisar o código fonte desta forma é trabalhoso e não muito funcional, pois temos de tratar a situação da mudança de página por exemplo.

Então uma forma alternativa de estudar a tabela é vendo quais conexões são usadas ao alterar algum parâmetro da criação da tabela e ver se existe uma forma mais direta de acessar os dados (no caso do Google Chrome basta ir em 'inspecionar elemento'). Ao vermos as conexões que são usadas ao acessar a página 2 de busca, eis que a mágica surge.


Sendo assim, conseguimos acessar os dados de busca diretamente pela URL fornecida (http://cartolafc.globo.com/mercado/filtrar.json?page=1&order_by=preco). Agora que você possui esta URL basta copiar e colar diretamente no endereço do seu browser que você terá acesso a todos os dados em um formato JSON. Basta operar um loop mudando o '...page=1...' para 2,3,...,43 e assim você terá pego todos os dados.

No próximo post vou por o código para fazer isso utilizando a linguagem R.

Para quem quiser os dados em formato .csv, aqui está:

https://dl.dropboxusercontent.com/u/46482875/rodada1-brasileirao.csv



Ressureição do Monocíclioco com um novo objetivo

Depois de exatos 1167 dias, eis que surge um nova postagem no Monocíclico. Na verdade se quer deveria ser aqui essa postagem, e sim em um blog novo. Porém graças a minha incrível preguiça e falta de criatividade vou continuar por aqui.

A questão é que participarei de uma liga no Cartola FC e meu objetivo é utilizar as estatísticas fornecidas e montar alguma estratégia numérica coerente. O que vou fazer ainda não sei. Mas gostaria de narrar no blog passo a passo do que será feito. Espero conseguir atualizar periodicamente, mas duvido muito que consiga fazer isso por mais de 10 rodadas.

Então é isso. Vida longa ao novo-antigo blog.  :)

Inusitadas Frutas e Legumes

As pessoas estão constantemente tentando mudar a natureza - para torná-la melhor ou simplesmente diferente. Observe esta coleta de frutas e legumes e veja por si mesmo até que ponto a criatividade humana pode chegar.

















































Criativos e Impressionantes Rolos de Papel

Sudoku Toilet Paper: Este criativo rolo de papel higiênico vem com quebra-cabeças de Sudoku impressos nele. Agora, enquanto faz suas coisas em seu banheiro, você pode ter mais divertimento jogando Sudoku.



Origami Toilet Paper: Este rolo de papel higiênico vem com instruções completas sobre como fazer origamis com o próprio papel higiênico. Único contra é que imagino eu que ele não seja tão aconômico assim.



Windows Vista Toilet Paper: Os japoneses são tão apreciadores do próximo Windows Vista Service Pack 1 que eles imprimiram rolos de papel higiênico sobre ele e alguns destaques de suas características.



Story Toilet Paper: Este papel higiênico japonês vem impresso com várias cópias de Drop, uma novela de nove capítulos escrito por Koji Suzuki, que tem feito filmes tanto no Japão quanto em Hollywood.



Camouflage Toilet Paper: Se você pensa em servir ao exército este item é indispensável em seu banheiro.



Mind Trainer Toilet Paper: Cada pedaço de papel deste rolo é impresso com um diferente tipo de puzzle. Ideal para aquele que quer dar uma aumentada no QI.



Crossword Puzzle Toilet Paper: Da próxima vez que você se esquecer de uma revista ou livro, não terá mais problema nenhum com este rolo de papel higiênico. Com ele você é capaz de perder horas resolvendo palavras cruzadas.



$100 Dollar Bill Toilet Paper: Se você sempre foi um daqueles que diz "Fulano tem tanto dinheiro que nem tem papel higiênico, vai com notas de R$ 50 mesmo" seus dias de inveja acabaram.



Cheese Grater Toilet Paper: Para aqueles que são tão resistente como pregos.



Glow in the Dark Toilet Paper: Agora mesmo no escuro você será capaz de encotnrar o seu papel higiênico.



Safari Toilet Paper: Este conjunto possui papel higiênico de girafa, zebra e leopardo, que são capazes de dar um toque exótico ao seu banheiro.



Ruler Toilet Paper: Se o alguma pessoa que reside com você é uma daquelas pessoas que te pertubam falando que você gasta muito papel higiênico, este foi feito para você. Com ele você pode realmente medir se está usando muito ou não.



Colored Toilet Paper: Estes papéis higiênico vêm em quatro cores deslumbrantes, e pelo que dizem são macias e sedosas.



Sprinkle When Youtinkle Toilet Paper: Uma mulher aparece em cada edaço, lembrando a todos que "Use Youtinkle no assento. Seja limpo !"



Chuck Norris Toilet Paper: Esta é uma certeza de que o vencedor de qualquer piada é o Chuck Norris.



50 Million Pound Toilet Paper: Lembra do rolo lá em cima com dólares? Então, nesse aqui você tem nada mais nada menos que 50 milhões de euros.



How To Toilet Paper: Com ele você tem instruções completas de como utilizar um papel higiênico. Simples e eficiente !



Funny Toilet Paper: "É uma paródia de uma determinada rede de lojas, você sabe do que estamos falando! Cutucá-los usando este papel higiênico humorístico."



Black Toilet Paper: Sempre utilizamos papel higiênico exclusivamente branco e nem sequer soubemos de que poderiamos comprar papel higiênico preto.



Notepad Toilet Paper: Se você é daqueles que acha que o banheiro é um lugar de reflexão tá aí uma ótima opção para você anotar seus pensamentos.



On A Roll Toilet Paper: Coloque uma faixa naporta do banheiro após cada utilização.



Music Toilet Paper: Este parece legal !



Jokes Toilet Paper: Um papel higiênico com muitas piadas. Engraçado, literalmente.



Lipstick Kiss Toilet Paper: Papel higiênico com atitude. Este rolo de papel higiênico vem coberta de beijos de batom.



Toilet Roll With Bride & Groom: "Este novo papel higiênico que traz comicamente a noiva e o noivo certamente trará junto um sorriso."

« Previous Page