RESEARCH27
ILDR: Geometric Early Detection of Grokking
arXiv CS.LG·24 de abril de 2026
Este artigo propõe o ILDR (Inter/Intra-class Distance Ratio) como um novo sinal geométrico para a detecção precoce de 'grokking' em redes neurais. O ILDR, calculado a partir de representações da penúltima camada, indica uma reorganização geométrica no espaço de representação antes que a precisão de validação melhore, superando os métodos de detecção existentes.
neural networksgrokkingmachine learningearly-detection
Ler original ↗