FlashAttention to prawdopodobnie ostateczny wkład w "AI PhD": > spędź lata na nauce > zrozum rzeczy lepiej niż wszyscy inni > przepisz kod niskiego poziomu w bardziej inteligentny sposób > spraw, aby transformery były 2-4 razy szybsze > w zasadzie darmowy obiad > teraz działa na wszystkich naszych komputerach