Um cliente solicita um relatorio e você tem que devolver um link html para o

cliente acessar.

Primeiro passo a dominar o basico da programação while,for, if elif...

Graças ao import do python que importa aproximadamente

130.00 bicliotecas já é sufiente para desenvover o que quiser,
foram criados para facilitar a nossa vida.

O objetivo é tratar a base de dados e levar para o mysql.

O objetivo é fazer na unha.

Vamos aprender coisa necessaria no mercado.

O objetivo de fazer na unha é para raciciocinio logica.

Pentaho é uma ferramenta para analise de dados.

Se uma empresa ta precisando de um cientista de dados.

temos dois canditado: um que so sabe ciencia de dados e outroque sabe tudo.
quem vai contratar ?

Biblioteca chardet ? elas identifica o conjunto de caractere do arquivo.

É extramente importante preparar o arquivo.

È comum abrir um arquivo e está tudo estourado.

Exemplo de codificação windowns-1252

Se tiver uma virgula, vai dividir a coluna...

Alguem vai pedir para você a media de salario para uma pessoa que tem tres filhos..

# definir e renomear as colunas (para subida no mysql)

# todos floats precisam ter 2 casas decimais
# tratar os caracteres Æ ascii compativel alt + 198 ã
# precisaremos tratar os caracteres £ para ú
# precisaremos tratar os caracteres ‡ para ç
# como idendificar os caracteres que estão fora do padrão ?
# --- dica (vai precisar ler os campos string e verificar se tem caracteres
diferentes)
# vocês já sabem identificar um tipo str!
# vocês já sabem ler todos caracteres de um conjunto!
# vocês tem uma tabela ascii ?
# existem valores Nan ?
# existem valores Nulos (necessários) ?
# conciliar se o FGTS representa 8,5% em todas as linhas, caso não corrigir
# conciliar se as Férias representam 1/3 do salário e corrigir
# conciliar as datas de nascimento para verificar se existe impossiblidade de
filhos
# conciliar ajuda de custo x salário x filhos x ativo
# conciliar cesta báscia x salaário x filhos x ativo
# somar as colunas salários e filhos
# apresentar a média salarial por filho
# somar as colunas salários, filhos e média por filho, somente de quem tem acima de
3 filhos
# nomes dissonantes de genero ?
# https://unicode.org/charts/
# https://unicode.org/charts/PDF/U0000.pdf

Tenho uma base suja que precisa ser convertido.

È possivel prever se o funcionario terá filho ou não pela data de nascimento.

Identificar situações fora da curva....

O trabalho do cientista de dados é tratar as informações..

O contratante quanto o analista demonstra o que precisa ser feito em uma ETL.

Data frame problematico...

Existem modulos/validadores que identificam se é data, se tem apenas numeros...

Depois de transformar...sera necessário somar todos valores da coluna.