Nenhum ser humano, animal vertebrado, tecido humano ou tecido animal foi utilizado nesta investigação. Apenas conjuntos de dados de acesso público (o conjunto de dados FeederBW e o conjunto de dados da rede de distribuição de baixa tensão com 236 barras) e simulações baseadas em computador foram utilizados no estudo. Portanto, este estudo não exigiu aprovação do comitê de ética em pesquisa (IRB), ética ou consentimento informado.
A Estratégia Dinâmica de Orlamentação para Aceitação de Alimentadores de Baixa Tensão Baseada em Colaboração entre Agentes foi desenvolvida utilizando aprendizado por reforço multiagente (MARL) para condições operacionais ricas em fontes renováveis. Os conjuntos de dados FeederBW e de 236 barras de baixa tensão foram pré-processados, normalizados e sincronizados temporalmente para construir um modelo de rede dinâmico que represente os estados dos alimentadores, recursos energéticos distribuídos, regiões sensíveis à tensão e condições de congestionamento. Agentes inteligentes foram atribuídos a seções dos alimentadores e pontos de junção da rede para monitorar tensão local, congestionamento, incerteza na geração renovável e capacidade de aceitação do alimentador, trocar informações com agentes vizinhos e atualizar políticas de orlamentação por meio de aprendizado por reforço descentralizado. A função de recompensa foi projetada para melhorar a aceitação do alimentador, ao mesmo tempo que limita o congestionamento, a instabilidade de tensão e os atrasos de coordenação. Foram consideradas restrições de tensão, carregamento do alimentador, carregamento do transformador e congestionamento, enquanto a operação desequilibrada trifásica, o controle avançado de inversores fotovoltaicos e a compensação de potência reativa não foram modeladas explicitamente. O framework geral é apresentado na Figura 1. As ferramentas de pesquisa utilizadas neste estudo estão listadas na Tabela de Materiais.

Figura 1: Arquitetura do framework proposto. Esquema do Framework de Orquestração Dinâmica que incorpora agentes inteligentes, aprendizado por reforço, análise de congestionamento e coordenação adaptativa de alimentadores. Clique aqui para visualizar uma versão maior desta figura.
1. Aquisição de dados
Os dados foram obtidos do conjunto de dados FeederBW31 e do conjunto de dados de distribuição em baixa tensão com 236 barras32. Esses conjuntos de dados foram selecionados porque continham informações sobre topologia do alimentador, condições de tensão, comportamento da geração renovável, demanda de carga, congestionamento e perfis operacionais dinâmicos necessários para a orquestração descentralizada e o aprendizado de agentes baseado em reforço.
O conjunto de dados FeederBW foi utilizado principalmente para modelar a operação do alimentador, a intermitência de energia renovável, o desvio de tensão e a propagação de congestionamento em redes de baixa tensão. Ele continha dados operacionais do alimentador, comportamento da geração distribuída, medições de tensão nos nós e flutuações de carga que apoiavam a análise de orquestração adaptativa. O conjunto de dados de 236 barras em baixa tensão foi usado para avaliar a escalabilidade e a coordenação descentralizada. Ele continha informações sobre conexões das barras, condições de carga do alimentador, características de tensão nos nós, penetração de fontes renováveis distribuídas e casos operacionais sensíveis ao congestionamento. Juntos, os dois conjuntos de dados permitiram análises em nível de alimentador e em larga escala sob condições de alta penetração de energia renovável. As características dos conjuntos de dados e seus propósitos na estrutura são resumidos na Tabela 1.
| Nome do Conjunto de Dados | Tipo de Conjunto de Dados | Número de Nós/Barra | Atributos dos Dados | Finalidade no Trabalho Proposto |
| Conjunto de Dados FeederBW | Conjunto de Dados Operacionais de Alimentador de Baixa Tensão | Múltiplos nós do alimentador | Perfis de tensão, geração renovável, demanda de carga, estados de congestionamento, comportamento operacional do alimentador | orquestração de alimentador com baixa latência, análise de congestionamento, priorização adaptativa de aceitação |
| Conjunto de Dados LV de 236 Barras | Conjunto de Dados de Distribuição em Grande Escala de Baixa Tensão | 236 barras | Topologia da barra, carregamento do alimentador, sensibilidade de tensão, penetração de renováveis, dinâmicas de congestionamento | Validação de escalabilidade, avaliação de coordenação descentralizada, análise de orquestração em grande escala |
Tabela 1: Características do conjunto de dados. Descrição dos conjuntos de dados, atributos operacionais e seus propósitos dentro do framework proposto de orquestração em baixa tensão.
2. Pré-processamento dos dados
Os conjuntos de dados adquiridos foram pré-processados para melhorar a consistência, o alinhamento temporal e a estabilidade da aprendizagem por reforço. Entradas ausentes, medições errôneas, registros duplicados e dados inconsistentes dos alimentadores foram filtrados utilizando procedimentos estatísticos de pré-processamento. Este passo foi utilizado para manter a consistência entre os dados operacionais dos alimentadores, os perfis de geração renovável, as medições de tensão e os dados de estado de congestionamento. Todas as variáveis operacionais foram normalizadas pelo método min–max, de modo que as características de entrada fossem transformadas em uma escala comum adequada para a aprendizagem do agente. As variáveis normalizadas incluíram a tensão do alimentador, a demanda de potência ativa, a geração renovável, o status de congestionamento e a capacidade de aceitação do alimentador. A formulação matemática do procedimento de pré-processamento está fornecida no Arquivo Suplementar 1 (Seção 1).
3. Modelagem dinâmica de rede de baixa tensão
Após a aquisição e pré-processamento dos dados, foi construído um modelo dinâmico de rede de distribuição para simular o comportamento de um sistema de distribuição com alta proporção de geração renovável sob condições variáveis de carga e geração. O modelo rastreou dinamicamente a topologia do alimentador, o comportamento dos recursos energéticos distribuídos, regiões sensíveis à tensão e a propagação de congestionamento.
Diferentemente de uma representação estática de rede, o modelo atualiza o comportamento do alimentador com base na intermitência das fontes renováveis, na demanda do consumidor e nas condições de congestionamento. Os conjuntos de dados FeederBW e LV de 236 barras foram utilizados para construir alimentadores interconectados nos quais barras, transformadores, fontes renováveis distribuídas e cargas foram representados como nós da rede. Cada nó do alimentador fornecia informações atualizadas sobre magnitude de tensão, demanda de potência ativa, geração renovável, estado de carregamento do alimentador e estado de congestionamento. Essas variáveis foram utilizadas pelos agentes inteligentes para monitorar o comportamento do alimentador e tomar decisões descentralizadas de orquestração. O modelo de rede também permitiu a identificação de regiões sensíveis e a priorização da aceitação de alimentadores por meio de análise contínua de sensibilidade.
A rede de distribuição de MT foi representada como uma rede baseada em grafos contendo estações de barramento, linhas de alimentação, transformadores, fontes renováveis e nós de carga consumidora. As derivações matemáticas detalhadas do modelo de rede são fornecidas no Arquivo Suplementar 1 (Seção 2). O estado dinâmico da rede e o índice de congestionamento foram monitorados continuamente. O índice de congestionamento foi normalizado na faixa [0,1], e a orquestração colaborativa de aceitação de alimentadores foi iniciada quando o índice de congestionamento excedeu 0,80.
4. Inicialização do Ambiente Multiagente
Após a construção do modelo dinâmico da rede de BT, o ambiente multiagente foi inicializado para apoiar a aceitação descentralizada de alimentadores. Agentes inteligentes foram atribuídos a segmentos de alimentadores, pontos de conexão de recursos energéticos distribuídos, locais de transformadores e nós suscetíveis a congestionamento dentro da rede de BT.
Cada agente atuava como uma entidade independente de tomada de decisão que monitorava a operação do alimentador local, trocava informações com agentes vizinhos e executava ações adaptativas de orquestração. Os agentes foram atribuídos a nós-chave dos alimentadores com base na sensibilidade de tensão, penetração de fontes renováveis, nível de congestionamento e importância do alimentador. A rede de baixa tensão foi configurada como um ambiente baseado em agentes, no qual os agentes monitoravam continuamente a tensão do alimentador, a demanda de potência ativa, a variação da geração renovável, o status de congestionamento e a capacidade de aceitação do alimentador. A formulação matemática do ambiente multiagente é fornecida no Arquivo Suplementar 1 (Seção 3).
5. Aprendizado de agente orientado por reforço
Após a inicialização do ambiente multiagente, implementou-se uma aprendizagem orientada por reforço para permitir que os agentes aprendessem políticas de orquestração de alimentadores por meio da interação com condições operacionais variáveis do sistema de média tensão. Durante cada interação, um agente observava o estado atual do alimentador, selecionava uma ação de orquestração e recebia uma recompensa ou penalização. O processo descentralizado de aprendizagem permitiu que os agentes se adaptassem à incerteza da geração renovável, às condições variáveis de congestionamento, às variações de tensão e às alterações na capacidade de aceitação do alimentador. Cada agente selecionava uma ação de orquestração de acordo com sua política aprendida. As derivações matemáticas associadas estão fornecidas no Arquivo Suplementar 1 (Seção 4).
Um total de 64 agentes inteligentes foi implantado. Com base na topologia do alimentador, nível de penetração de energias renováveis, sensibilidade de tensão e gravidade da congestão, cada agente foi alocado a um segmento do alimentador, local de transformador, ponto de conexão de recurso energético distribuído ou nó da rede sensível à congestão. Embora preservasse uma complexidade computacional razoável, a implantação descentralizada permitiu monitoramento cooperativo e aceitação adaptativa do alimentador em toda a rede de distribuição de baixa tensão com 236 barras. Cada agente observou um vetor de estado de cinco dimensões composto por magnitude de tensão, demanda de carga do alimentador, geração renovável, status de congestão e capacidade de aceitação do alimentador. O espaço de ações consistia em cinco ações de orquestração: priorização da aceitação do alimentador, mitigação de congestão, coordenação de renováveis, balanceamento de carga e controle de tensão. A tomada de decisão cooperativa foi apoiada por meio de uma topologia de comunicação descentralizada entre vizinhos, na qual cada agente trocava índices de sensibilidade e informações operacionais locais apenas com os agentes dos alimentadores vizinhos.
Um método MARL baseado em Q-learning foi implementado utilizando uma rede neural totalmente conectada com duas camadas ocultas contendo 128 e 64 neurônios. A ativação da unidade linear retificada foi aplicada nas camadas ocultas. Os parâmetros da rede foram otimizados usando o otimizador Adam com uma taxa de aprendizado de 0,001 e um fator de desconto de 0,99. Um tamanho de mini-lote de 64 foi utilizado, e o buffer de replay de experiências tinha capacidade para 100.000 transições. O treinamento foi considerado convergido quando a média móvel da recompensa cumulativa ao longo dos últimos 20 episódios variou menos que 0,1% durante 10 janelas de avaliação consecutivas. Caso esse critério não fosse satisfeito, o treinamento continuava até um máximo de 500 episódios. O fluxo de trabalho de aprendizado por reforço é mostrado na Figura 2.

Figura 2: Fluxograma do aprendizado do agente orientado por reforço. Fluxograma ilustrando o processo de aprendizado do agente baseado em reforço para orquestração descentralizada de alimentadores e otimização de decisões. Clique aqui para visualizar uma versão maior desta figura.
O processo de aprendizagem iniciou-se com a inicialização do ambiente de distribuição de MT, dos estados dos agentes e dos parâmetros de aprendizagem. Agentes inteligentes foram posicionados em regiões alimentadoras, locais de recursos energéticos distribuídos e barras propensas a congestionamento. Em seguida, foram definidos o espaço de observação, a taxa de aprendizagem, a estratégia de exploração, os fatores de recompensa e as funções de política. A cada etapa de interação, cada agente observava o estado atual da região alimentadora designada. O estado consistia na magnitude da tensão nos nós, demanda de carga do alimentador, características da geração renovável, nível de congestionamento e capacidade de aceitação do alimentador. Essas observações formavam o estado ambiental utilizado para a tomada de decisões de orquestração. Cada agente selecionava uma ação de acordo com sua política de aprendizagem por reforço. As ações disponíveis incluíam priorização da aceitação do alimentador, gerenciamento de congestionamento, coordenação de energia renovável, balanceamento de carga e gerenciamento de tensão. A ação selecionada era aplicada ao ambiente dinâmico de MT, após o que o estado do alimentador era atualizado.
Uma recompensa foi calculada após cada ação. Uma recompensa positiva foi atribuída quando a ação selecionada melhorou a aceitação do alimentador, evitou a propagação de congestionamento, manteve a conformidade de tensão ou melhorou a estabilidade da rede. Uma penalidade foi aplicada quando a ação resultou em, ou falhou em prevenir, sobrecarga do alimentador, violações de tensão ou atrasos na orquestração. A recompensa calculada foi utilizada para atualizar a função de valor e a política de decisão do agente por meio de otimização por reforço. A sequência de observação, seleção de ação, transição do ambiente, cálculo da recompensa e atualização da política foi repetida até que o critério de parada fosse satisfeito.
6. Avaliação da sensibilidade à tensão e à congestão
Após a aprendizagem orientada por reforço, as sensibilidades à tensão e ao congestionamento foram avaliadas para identificar regiões vulneráveis do alimentador e apoiar decisões dinâmicas de aceitação do alimentador sob incerteza da energia renovável.
Em cada intervalo de operação, foram determinados os efeitos das variações na potência da alimentador, na geração renovável e na demanda de carga sobre a tensão do nó e a congestão da rede. Os índices de sensibilidade à tensão e à congestão foram recalculados em cada intervalo de operação simulado, em vez de serem derivados exclusivamente de condições estáticas da rede. Os índices de sensibilidade para cada nó do alimentador foram atualizados com base nas condições atuais da rede, na variação da geração renovável e no estado de carregamento do alimentador. Os valores resultantes foram utilizados para classificar os nós do alimentador em ações de aceitação de alimentadores, gerenciamento de congestionamento e controle de tensão.
O índice de sensibilidade à tensão quantificou a alteração na tensão do nó resultante de uma variação no fluxo de potência ativa. Após o cálculo dos índices de sensibilidade à tensão e à congestão, eles foram combinados em uma pontuação de sensibilidade composta para a priorização adaptativa da aceitação do alimentador. O método de pontuação composta é descrito no Arquivo Suplementar 1 (Seção 5). Nós do alimentador com pontuações de sensibilidade mais altas receberam prioridades mais elevadas de orquestração durante a mitigação de congestão, correção na aceitação do alimentador e operações de regulação de tensão. As pontuações de sensibilidade foram recalculadas em cada intervalo de operação e compartilhadas com agentes vizinhos por meio do ambiente colaborativo de comunicação.
7. Orquestração colaborativa de aceitação e otimização adaptativa de decisão em cada intervalo operacional simulado
Após uma avaliação de sensibilidade, foi realizada a orquestração colaborativa da aceitação para permitir que agentes descentralizados tomassem decisões coordenadas de aceitação de alimentadores sob incerteza de fontes renováveis e condições dinâmicas de congestionamento. Os agentes trocaram estados locais dos alimentadores, índices de sensibilidade, alertas de congestionamento e prioridades operacionais. Cada agente avaliou independentemente a condição local do seu alimentador, ao mesmo tempo em que coordenou com agentes vizinhos para apoiar a estabilidade geral da rede.
A aceitação de alimentadores foi priorizada de acordo com a sensibilidade à tensão, gravidade da congestão, variabilidade da geração renovável e capacidade disponível do alimentador. As observações locais com base na sensibilidade foram agregadas entre os agentes, e foram geradas ações coordenadas de aceitação de alimentadores. A formulação matemática do processo colaborativo de orquestração é fornecida no Arquivo Suplementar 1 (Seção 6). O ambiente dinâmico da rede de BT foi implantado com agentes colaborativos posicionados em regiões de alimentadores, pontos de integração de energia renovável e barramentos suscetíveis a congestão, conforme descrito no Arquivo Suplementar 1 (Algoritmo 1). Em cada intervalo de operação, cada agente observou parâmetros locais do alimentador, incluindo magnitude de tensão, variação da geração renovável, carga do alimentador, nível de congestão e capacidade de aceitação do alimentador.
Os índices de sensibilidade à tensão e de sensibilidade à congestão foram então calculados para identificar regiões alimentadoras suscetíveis à instabilidade de tensão ou à propagação de congestão. Esses índices foram combinados em uma pontuação geral de sensibilidade da alimentadora, que determinou a prioridade de aceitação e orquestração da alimentadora. Informações locais de estado, níveis de congestão, indicadores de instabilidade de tensão e prioridades de aceitação foram trocados entre agentes vizinhos. Com base nas observações locais e nas informações compartilhadas, cada agente selecionou e implementou uma ação adaptativa de orquestração. Após cada ação, um feedback de reforço foi obtido a partir do ambiente dinâmico da rede de baixa tensão, com base na estabilidade da alimentadora, redução de congestão, conformidade de tensão e eficiência de aceitação da alimentadora. Esse feedback foi utilizado para atualizar a política de cada agente por meio de uma otimização baseada em reforço. A função objetiva global de orquestração forneceu simultaneamente um feedback coordenado para a otimização adaptativa em toda a população de agentes. As atualizações de política prosseguiram até que as políticas dos agentes convergissem para uma estratégia ótima de orquestração descentralizada.
8. Validação em larga escala
A estratégia de orquestração dinâmica foi validada utilizando o conjunto de dados FeederBW e o conjunto de dados da rede de distribuição de baixa tensão com 236 barras em cenários operacionais com alta penetração de energia renovável. A validação avaliou a capacidade do framework de orquestração descentralizada em gerenciar a aceitação dinâmica de alimentadores, intermitência renovável, propagação de congestionamento e instabilidade de tensão em sistemas interconectados de distribuição em baixa tensão. Os cenários operacionais avaliados incluíram alta penetração de renováveis, demanda de carga variável, propagação dinâmica de congestionamento, condições sensíveis à tensão e capacidade variável de aceitação de alimentadores.
O desempenho do framework foi avaliado utilizando a taxa de aceitação do alimentador, índice de conformidade de tensão, taxa de redução de congestionamento, latência de orquestração, velocidade de convergência, eficiência da coordenação descentralizada e capacidade de acomodação de renováveis. Essas medidas foram utilizadas para avaliar escalabilidade, robustez, adaptabilidade e desempenho de coordenação. O framework proposto foi comparado com abordagens tradicionais centralizadas de orquestração de alimentadores sob as mesmas configurações de rede. Conjuntos de dados equivalentes, cenários operacionais, condições de avaliação e medidas de desempenho foram aplicados aos métodos de comparação.
Tabela 2 resume os conjuntos de dados, condições operacionais, ambientes de orquestração e variáveis de desempenho utilizados para a validação experimental. O conjunto de dados FeederBW foi utilizado para avaliar a dinâmica operacional do alimentador, a intermitência de fontes renováveis, o desenvolvimento de congestionamento, a variação da carga residencial e as flutuações de tensão sob condições de alimentador de baixa tensão. O conjunto de dados de 236 barras em baixa tensão foi utilizado para avaliar a orquestração descentralizada em uma rede interconectada maior. A arquitetura foi validada sob condições variáveis de geração renovável, demanda de carga, tensão e congestionamento. A coordenação descentralizada e a otimização de políticas baseada em aprendizado por reforço foram avaliadas conjuntamente entre os agentes inteligentes.
A taxa de aceitação de alimentadores, o índice de conformidade de tensão, a taxa de redução de congestionamento, a velocidade de convergência e a latência de orquestração foram utilizados para quantificar o desempenho sob condições operacionais dinâmicas em sistemas de energia renovável.
| Parâmetro Experimental | Conjunto de Dados FeederBW | Conjunto de Dados LV 236-barras | Finalidade da Validação |
| Tipo de Rede | Rede Alimentadora de Baixa Tensão | Rede de Distribuição LV em Grande Escala | Avaliação da orquestração dinâmica |
| Número de Nós/Barras | Múltiplos nós alimentadores | 236 barras | Análise de escalabilidade |
| Integração de Renováveis | Fontes fotovoltaicas e renováveis distribuídas | Barras com alta penetração de renováveis | Validação da incerteza renovável |
| Comportamento da Demanda de Carga | Perfis dinâmicos de carga residencial | Variações de carga em alimentadores de grande escala | Orquestração adaptativa de carga |
| Cenários de Congestionamento | Estados de sobrecarga e congestionamento do alimentador | Propagação de congestionamento em múltiplas barras | Análise de mitigação de congestionamento |
| Condições de Tensão | Perfis de flutuação de tensão | Condições de barras sensíveis à tensão | Avaliação de conformidade com tensão |
| Agentes Inteligentes | Agentes distribuídos no alimentador | Agentes colaborativos em grande escala | Análise de coordenação descentralizada |
| Ambiente de Aprendizado | Orquestração orientada por reforço | Aprendizado adaptativo multiagente | Validação da otimização de políticas |
| Condições de Simulação | Variabilidade dinâmica de fontes renováveis | Operação dinâmica em grande escala | Teste de orquestração de baixa latência |
| Métricas de Desempenho | Taxa de aceitação, redução de congestionamento | Conformidade com tensão, velocidade de convergência | Desempenho geral da orquestração |
Tabela 2: Validação experimental em larga escala. Configurações experimentais utilizadas para avaliar escalabilidade, incerteza da energia renovável e coordenação descentralizada.