Extraindo Diários Oficiais de João Pessoa-PB

Renne Rocha Maker - Level 12

12 views - 5 years ago

O projeto Querido Diário propõe utilizar inteligência artificial para classificar, contextualizar e expandir a informação contida nos diários oficiais municipais brasileiros, tornando-os disponíveis em uma plataforma que permitirá sua visualização em formato aberto e amigável. http://queridodiario.ok.org.br/ Nessa transmissão, iremos revisar o spider que obtem os dados de João Pesoa-PB de modo a diminuir a quantidade de requisições feitas, melhorando a performance e possibilitando executar o spider para obter os dados apenas das datas desejadas. Links mencionados no vídeo: - [Projeto Querido Diário](http://queridodiario.ok.org.br/) - [Mapeamento dos Diários do Municípios - Censo](https://censo.ok.org.br/) - [Repositório do Projeto](github.com/okfn-brasil/querido-diario/) - [Pull-request desenvolvido nesse vídeo](https://github.com/okfn-brasil/querido-diario/pull/393) - [Scrapy Cloud](https://www.scrapinghub.com/scrapy-cloud/) - para rodar seus spiders - [Diário Oficial de João Pessoa-PB](http://antigo.joaopessoa.pb.gov.br/semanariooficial/) Music by Josh Woodward. [Free download](http://joshwoodward.com/)

dados abertospythonraspagem de dadosscrapy
Open on LHC

Comments

Sam Taylor
Sam Taylor 3 hours ago

Love the pacing and the clean examples. This maps really well to our Tube concept.

Jordan Lee
Jordan Lee 5 hours ago

The card preview pattern translates nicely to a video thumbnail layout.

Riley Kim
Riley Kim 1 day ago

Would love to see creator rewards when a video gets saved or positively discussed.