Can Geometric Deep Learning lead eliminate the need of "Brute Force" pre-training [D]

O autor questiona se o Deep Learning Geométrico, ao incorporar invariâncias diretamente na arquitetura, pode eliminar a necessidade de pré-treinamento "força bruta" com grandes volumes de dados. Ele sugere que o pré-treinamento massivo atual pode ser uma falha nas arquiteturas que não possuem invariâncias embutidas.