Regresso Linear

Em estatstica ou econometria, regresso linear uma equao para se estimar a

condicional (valor esperado) de uma varivel y, dados os valores de algumas outras
variveis x.

SVM Support Vector Machine

Uma mquina de vetores de suporte (SVM) um classificador discriminativo formalmente

definido por um hiperplano de separao. Em outras palavras, dado dados de treinamento
rotulado (aprendizagem supervisionada), o algoritmo produz um hiperplano timo que
categoriza novos exemplos.

Uma linha ruim se passar muito perto dos pontos porque ser sensvel ao rudo e no
generalizar corretamente. Portanto, nosso objetivo deve ser encontrar a linha passando o
mais longe possvel de todos os pontos.

Em seguida, a operao do algoritmo SVM baseia-se em encontrar o hiperplano que fornece a

maior distncia mnima para os exemplos de treino. Duas vezes, essa distncia recebe o
importante nome de margem dentro da teoria de SVM. Portanto, o timo hiperplano de
separao maximiza a margem dos dados de treinamento.

Nota: Neste exemplo tratamos de linhas e pontos no plano cartesiano em vez de hiperplanos e
vetores em um espao de alta dimenso. Esta uma simplificao do problema. importante
entender que isso s feito porque nossa intuio melhor construda a partir de exemplos
que so fceis de imaginar. No entanto, os mesmos conceitos se aplicam a tarefas onde os
exemplos para classificar se encontram em um espao cuja dimenso maior que dois.

KNN K-nearest Neighbor

No reconhecimento de padres, o algoritmo k-Nearest Neighbours (ou k-NN para abreviar)

um mtodo no-paramtrico utilizado para a classificao e regresso. Em ambos os casos, a
entrada consiste nos k exemplos de treinamento mais prximos no espao de recursos. A sada
depende se k-NN usado para classificao ou regresso:

Na classificao k-NN, a sada uma associao de classe. Um objeto classificado por um

voto majoritrio de seus vizinhos, sendo o objeto atribudo classe mais comum entre seus k
vizinhos mais prximos (k um inteiro positivo, tipicamente pequeno). Se k = 1, ento o objeto
simplesmente atribudo classe desse nico vizinho mais prximo.

Na regresso k-NN, a sada o valor da propriedade para o objeto. Este valor a mdia dos
valores de seus k vizinhos mais prximos.

Teoria de Bayes

Na teoria da probabilidade e na estatstica, o teorema de Bayes (alternativamente lei de Bayes

ou regra de Bayes) descreve a probabilidade de um evento, baseado em condies que possam
estar relacionadas com o evento. Por exemplo, se o cncer est relacionado idade, ento,
usando o teorema de Bayes, a idade de uma pessoa pode ser usada para avaliar com mais
preciso a probabilidade de que tenham cncer.

Uma das muitas aplicaes do teorema de Bayes a inferncia bayesiana, uma abordagem
particular inferncia estatstica. Quando aplicadas, as probabilidades envolvidas no teorema
de Bayes podem ter diferentes interpretaes de probabilidade. Com a interpretao da
probabilidade bayesiana, o teorema expressa como um grau subjetivo de crena deve mudar
racionalmente para dar conta de evidncias. A inferncia bayesiana fundamental para as
estatsticas bayesianas.