Discussão do artigo "Redes neurais de maneira fácil (Parte 84): normalização reversível (RevIN)"

 

Novo artigo Redes neurais de maneira fácil (Parte 84): normalização reversível (RevIN) foi publicado:

Há muito já aprendemos que o pré-processamento dos dados brutos desempenha um grande papel na estabilidade do treinamento do modelo. E, para o processamento online de dados "brutos", frequentemente usamos a camada de normalização em lote. No entanto, às vezes surge a necessidade de um procedimento inverso. Um dos possíveis métodos para resolver tais tarefas é discutido neste artigo.

Gostaria de lembrar que já enfrentamos esse problema ao treinar diversos modelos de autocodificadores. Então, encontramos uma solução ao usar os dados normalizados como metas. No entanto, neste caso, precisamos de dados que descrevem os próximos estados do ambiente, que diferem dos dados de entrada. Um dos métodos para resolver esse problema foi proposto no artigo "Reversible Instance Normalization for Accurate Time-Series Forecasting against Distribution Shift".

Os autores do artigo propõem um método simples, mas eficaz, de normalização e desnormalização — a normalização instantânea reversível (RevIN), que primeiro normaliza as sequências de entrada e depois desnormaliza as sequências de saída do modelo para resolver problemas de previsão de séries temporais relacionados à mudança de distribuição. RevIN é simetricamente estruturada para devolver as informações originais de distribuição à saída do modelo por meio da reescalagem e deslocamento da saída na camada de desnormalização em uma magnitude equivalente ao deslocamento e reescalagem dos dados brutos na camada de normalização.

RevIN é uma camada flexível e treinável que pode ser aplicada a qualquer camada arbitrária, suprimindo eficazmente as informações não estacionárias (média e variância de cada instância) em uma camada e restaurando-as em outra camada de posição praticamente simétrica, como nas camadas de entrada e saída. 

"Neural Networks Made Easy (Part 84): Reversible Normalization (RevIN)"

Autor: Dmitriy Gizlyk

 
ORL优化中发生错误。
 
LJ1616#
ORL优化中发生错误。

您也可以简单地将图像拖放到文本中或使用 Ctrl+V 粘贴
2024.04.23 17:36:01.235 核心 01 通过 0 测试,在 0:00:00.098 中出现错误 "OnInit 返回非零代码 1"

 
Olá a todos

Estou executando o código em Neural networks made easy (Parte 67): Using past experience to solve new tasks

Estoucom o mesmo problema em relação ao seguinte.

2024.04.21 18:00:01.131 Core 4 pass 0 tested with error "OnInit returned non-zero code 1" in 0:00:00.152

Parece que está relacionado ao comando 'FileIsExist'.

Mas não consigo resolver esse problema.

Você sabe como resolvê-lo?