Film Fukushimy (1986) pokazuje CNN, która rozpoznaje ręcznie pisane cyfry [3], trzy lata przed filmem LeCuna (1989). Oś czasu CNN wzięta z [5]: ★ 1969: Kunihiko Fukushima opublikował prostokątne jednostki liniowe, znane jako ReLU [1], które są obecnie szeroko stosowane w CNN. ★ 1979: Fukushima opublikował podstawową architekturę CNN z warstwami konwolucyjnymi i warstwami próbkowania w dół [2]. Nazwał to neocognitronem. Był trenowany za pomocą reguł uczenia nienadzorowanego. Obliczenia były 100 razy droższe niż w 1989 roku i miliard razy droższe niż dzisiaj. ★ 1986: Film Fukushimy na temat rozpoznawania ręcznie pisanych cyfr [3]. ★ 1988: Wei Zhang i in. mieli pierwszą "nowoczesną" 2-wymiarową CNN trenowaną przez propagację wsteczną, a także zastosowali ją do rozpoznawania znaków [4]. Obliczenia były około 10 milionów razy droższe niż dzisiaj. ★ 1989-: późniejsze prace innych [5]. REFERENCJE (więcej w [5]) [1] K. Fukushima (1969). Ekstrakcja cech wizualnych przez sieć z wieloma warstwami elementów progowych analogowych. IEEE Transactions on Systems Science and Cybernetics. 5 (4): 322-333. Praca ta wprowadziła prostokątne jednostki liniowe, znane jako ReLU, obecnie szeroko stosowane w CNN i innych sieciach neuronowych. [2] K. Fukushima (1979). Model sieci neuronowej dla mechanizmu rozpoznawania wzorców, niepodlegającego przesunięciu pozycji—Neocognitron. Trans. IECE, vol. J62-A, nr 10, s. 658-665, 1979. Pierwsza głęboka architektura sieci neuronowej konwolucyjnej, z naprzemiennymi warstwami konwolucyjnymi i warstwami próbkowania w dół. W języku japońskim. Wersja angielska: 1980. [3] Film wyprodukowany przez K. Fukushimę, S. Miyake i T. Ito (NHK Science and Technical Research Laboratories) w 1986 roku. YouTube: [4] W. Zhang, J. Tanida, K. Itoh, Y. Ichioka. Sieć neuronowa do rozpoznawania wzorców odpornych na przesunięcia i jej architektura optyczna. Proc. Annual Conference of the Japan Society of Applied Physics, 1988. Pierwsza "nowoczesna" CNN trenowana przez propagację wsteczną, zastosowana do rozpoznawania znaków. [5] J. Schmidhuber (AI Blog, 2025). Kto wynalazł konwolucyjne sieci neuronowe?