A IA aprende sozinha
Um robô que não sabe nada aprende o caminho por tentativa e erro.
experimento ao vivo
O robô já está procurando a estrela. Observe como as tentativas ajudam a encontrar o caminho.
Como usar
- Veja as setas e as cores: é o que o robô acha de cada casa.
- Clique nas casas para pôr ou tirar paredes e buracos no meio do treino.
Carregando o experimento…
Mouse ou dedoToque
Sobre este experimento
Um robozinho num mapa com um objetivo e alguns buracos. Ele começa andando ao acaso, ganha pontos quando chega e perde quando cai. Aos poucos ele aprende o melhor caminho, e você vê no mapa o que ele aprendeu.
Como isso funciona?
- 01Ninguém ensina o caminho. O robô só recebe uma nota: +1 ao chegar, −1 ao cair e um pequeno custo por passo. Isso se chama aprendizado por reforço.
- 02Ele guarda uma tabela com o valor de cada ação em cada casa e atualiza esses valores a cada passo, com o algoritmo Q-learning. As cores do mapa mostram esses valores.
- 03No começo ele explora ao acaso; depois passa a aproveitar o que já sabe. Equilibrar explorar e aproveitar é um dos grandes desafios desse tipo de IA, usada até para treinar IAs que jogam.