Het is vrij duidelijk als je terugkijkt. Google wedt op meerdere architecturen, niet alleen op transformers. Dit was toen Google een op diffusie gebaseerd taalmodel aankondigde.