Scraping com Python: Coleta de dados na web

Conteúdo Detalhado

1. Nosso primeiro scraping

   • Projeto inicial do treinamento
   • Ambiente e bibliotecas
   • Um pouco sobre Anaconda e Python

2. Obtendo e limpando o HTML

   • Entendendo a web
   • Recapitulando o que vimos
   • Obtendo o conteúdo HTML de um site
   • Acessando páginas com urllib.request
   • Tratamento de strings
   • Extraindo informações de strings

3. Introdução ao BeautifulSoup

   • HTML da nossa página
   • As tags de um documento HTML
   • Criando um objeto BeautifulSoup
   • Utilizando o BeautifulSoup
   • Acessando tags
   • Varrendo um documento HTML
   • Acessando o conteúdo das tags
   • Um pouco mais sobre o método get_text()
   • Acessando os atributos de uma tag
   • Formas de acessar os atributos de uma tag

4. Pesquisando com BeautifulSoup

   • Os métodos find() e findAll()
   • Navegando por arquivos HTML
   • Utilizando os métodos find() e findAll()
   • Outros métodos de pesquisa
   • Um pouco mais sobre os métodos de pesquisa do BeautifulSoup

5. Obtendo os dados de um anúncio

   • Identificando e selecionando os dados no HTML
   • Procedimento de scraping
   • Obtendo o valor do veículo anunciado
   • Trabalhando com dicionários Python
   • Obtendo as informações sobre o veículo anunciado
   • Técnicas de pesquisa
   • Obtendo os acessórios do veículo anunciado
   • Trabalhando com listas
   • Criando um DataFrame
   • DataFrames com Pandas
   • Obtendo a foto do anúncio

6. Obtendo os dados de uma página

   • Identificando as informações no HTML
   • Métodos do BeautifulSoup
   • Criando uma rotina de scraping
   • Iterando por tags e acessando atributos

7. Obtendo os dados de todas as páginas

   • Identificando as informações no HTML
   • Retirando informações das informações
   • Criando uma rotina de scraping
   • Recordando um pouco