The class
Topic
O PyTorch, a biblioteca de redes neurais que a pesquisa usa. O tensor, a tabela de números do PyTorch. A diferenciação automática, o autograd, que faz sozinha a retropropagação escrita à mão na aula 5. O otimizador Adam, que ajusta a taxa de cada peso, fica como caixa-preta: o que entra é o gradiente, e o que sai é o passo.
Practice in class
O mesmo MLP no MNIST em PyTorch, comparado com o de NumPy. Depois, o erro final contra a taxa de aprendizado: a fronteira entre melhorar e piorar, quebrada, que a aula 9 leva ao plano de duas taxas.
Assignment
- O MNIST em PyTorch, com a acurácia no teste, a semente e a versão dos dados, e a curva do erro final contra a taxa de aprendizado na rede pequena da aula, a mesma que a aula 9 leva ao plano das duas taxas. A mesma curva no MNIST inteiro é um extra opcional.
- Uma pergunta sobre o estudo da semana.
