DeepMind lança Decoupled DiLoCo para treinamento de IA distribuída

A DeepMind, empresa de inteligência artificial do Google, anunciou o desenvolvimento do Decoupled DiLoCo, uma nova abordagem para o treinamento de modelos de IA em larga escala. O método visa superar os desafios de resiliência e eficiência inerentes aos sistemas de treinamento de IA distribuída, onde múltiplos computadores trabalham em conjunto.

Com o Decoupled DiLoCo, a DeepMind busca tornar o treinamento de modelos de inteligência artificial mais robusto contra falhas e interrupções, além de otimizar o uso de recursos computacionais. A abordagem desacoplada permite que diferentes partes do processo de treinamento operem de forma mais independente, representando um avanço significativo na pesquisa e desenvolvimento de IA.