Google DeepMind hat mit DiffusionGemma ein Sprachmodell veröffentlicht, das auf Diffusion statt auf dem klassischen Transformer-Ansatz basiert. Das Modell wird als einer der ersten ernsthaften Kandidaten für eine Alternative zu nächster-Token-Vorhersage-Modellen betrachtet. Dies könnte architektonisch bedeutsam sein, da es grundlegend andere Wege für die Sprachverarbeitung aufzeigt. Die Initiative deutet an, dass große Labs aktiv nach Alternativen zu dominanten Transformer-Designs suchen, um möglicherweise effizientere oder leistungsfähigere Ansätze zu finden.
