Aniversário
Alura 12 anos

20% OFF

Falta pouco!

00

DIAS

00

HORAS

00

MIN

00

SEG

Logo do curso
Curso

Spark:

processamento de linguagem natural

Quero estudar na alura

8h

Para conclusão

1331

Pessoas nesse curso

9.3

Avaliação média

Certificado

De participação

Introdução_

O que você aprenderá_

  • Aprenda os principais passos no processamento de linguagem natural
  • Remova caracteres especial usando expressões regulares
  • Aplique o conceito de tokenização nos dados
  • Remova as palavras vazias ou StopWords
  • Construa a Sacola de Palavas ou Bag of Word
  • Aprenda a ler o resultado do Bag of Word no PySpark
  • Entenda a relevancia das palavras com o TF-IDF
  • Ajuste uma Árvore de Decisão para classificar

Público alvo_

Pessoas com conhecimento em Python. Pessoa interessada em entender como fazer uma análise textual usando PySpark e entregar um modelo de classificação usando análise de sentimento.

Ana Duarte

github

linkedin

Sou bacharela em Estatística e atualmente curso Ciência da Computação. Já atuei como cientista de dados no ramo educacional e financeiro e hoje sou instrutora na Escola de Dados da Alura e voluntária na equipe de projetos do grupo Data Girls. Sou apaixonada por transformar dados em informação inteligente usando a ciência de dados em diversos tipos de aplicação. Fora isso, sempre estou acompanhando alguma série e procurando novas rotas para andar de bike.

Curso atualizado em 14/06/2023

Ementa

  1. Introdução

    • Contexto do NLP
    • Explorando os dados
  2. Limpeza e processamento

    • Processo e bibliotecas
    • Caractere especial
    • Tokenização
    • StopWords
  3. Vetorização das palavras

    • Bag of words
    • Hashing TF
    • TF-IDF
    • Pipeline de transformação
  4. Treinando o modelo

    • Possíveis modelos
    • Árvore Decisão
    • Amostra e Treino
  5. Explicando os resultados

    • Teste e métricas
    • Nova Frase

Descubra se esse curso é pra você! Leia as primeiras aulas

Comece essa formação agora mesmo e capacite-se para seu próximo projeto!

Conheça os planos

Este e mais 4 cursos fazem parte das seguintes formações

Nossas formações são uma sequência de cursos e conteúdo para você se profissionalizar e se tornar quem o mercado procura!
Escola

Data Science

Trabalhe com dados. Aprofunde seu conhecimento nas principais ferramentas de uma pessoa data scientist. Descubra as diferentes possibilidades de análise de dados, do Excel ao Python, e mergulhe em frameworks e bibliotecas, como Pandas, Scikit-Learn e Seaborn.

Conheça a escola

Faça parte da nossa comunidade no discord!

Troque conhecimentos com a comunidade da Alura

Escolha a duração
do seu plano

Conheça os Planos para Empresas