IA2-27

Prévia do material em texto

Tema 27: Aprendizado por Reforço (Reinforcement Learning) 
O aprendizado por reforço (Reinforcement Learning - RL) é uma área do aprendizado de 
máquina em que um agente aprende a tomar decisões em um ambiente para maximizar uma 
recompensa acumulada ao longo do tempo. Ao contrário do aprendizado supervisionado, onde o 
modelo aprende a partir de exemplos rotulados, no aprendizado por reforço, o agente explora e 
interage com o ambiente, recebendo recompensas ou penalidades baseadas em suas ações. 
O processo de aprendizado por reforço é descrito por um ciclo de interação entre o agente e o 
ambiente. O agente observa o ambiente, toma uma ação, recebe uma recompensa (ou 
penalidade) e então ajusta seu comportamento para maximizar a recompensa total. 
Ambiente: O mundo com o qual o agente interage.Agente: O modelo que toma as decisões. 
Ação:s decisões ou movimentos que o agente pode fazer no ambiente.Recompensa: O feedback 
imediato após a ação tomada. Pode ser positiva (recompensa) ou negativa (penalidade). 
Estado: A situação atual do ambiente, que o agente observa. 
Conceitos Importantes no Aprendizado por Reforço 
• Função de Valor (Value Function): Estima a recompensa esperada a partir de um 
determinado estado, ajudando o agente a tomar melhores decisões a longo prazo. 
• Política (Policy): A estratégia que o agente segue para escolher as ações. A política 
pode ser determinística ou estocástica, dependendo de como as ações são escolhidas. 
• Q-Learning: Um algoritmo popular de aprendizado por reforço que usa uma tabela de 
valores chamada Q-table para estimar a qualidade das ações, sem precisar de um 
modelo do ambiente. O agente escolhe ações que maximizam os valores da Q-table. 
Exploração vs ExploraçãoUma das questões centrais no aprendizado por reforço é o dilema 
entre exploração e explorção: 
• Exploração: O agente tenta novas ações para aprender mais sobre o ambiente. 
• Exploração: O agente escolhe as ações que ele já sabe que trazem as maiores 
recompensas. 
Equilibrar exploração e exploração é essencial para que o agente aprenda de maneira eficiente. 
Aplicações do Aprendizado por ReforçoQuestões de Alternativas - Tema 27: Aprendizado 
por Reforço1. O que é o objetivo principal do aprendizado por reforço? 
• a) X Maximizar a recompensa acumulada ao longo do tempo através da interação com o 
ambiente 
• b) Minimizar a perda de um modelo durante o treinamento 
• c) Classificar objetos em imagens com base em exemplos rotulados 
• d) Criar um modelo capaz de prever resultados de séries temporais 
• 2. Qual dos seguintes conceitos refere-se à estratégia que um agente segue para 
escolher ações no aprendizado por reforço? 
• a) Função de valor 
• b) Política 
• c) Exploração 
• d) Q-learning