Dobra książka, choć temat przeważnie źle ujmowany
Ludzie nie znają traktatu Laplace’a, ani J.M. Keynesa, nie znają teoretyków historii analizy ryzyka, gier hazardowych tj. Bernstein. Ani nie zaglądają za często do Williama Fellera. Ten autor się wyróżnia. I choć rzadko czytam książki No Starch Press od deski Read more…
Krytyka artykułu Attention is all you need
Gdy krytykuję oryginalność artykułu Attention is all you need, nie twierdzę, że to 100% plagiat, jednak autorzy nowszych koncepcji przebiegle utożsamiają Elmana jedynie z RNN, które wykorzystuje także ChatGPT. Gdy przeczyta się cały 34 stronicowy artykuł Elmana ze zrozumieniem, to Read more…
Is attention mechanism in its foundations a kind of plagiarism of Elman (1990) concept?
In this entry I want to raise the suspicion against the originality of ideas presented in the article by Ashish Vaswani et al. – Attention Is All You Need written in 2017 and published officially and cited as of Read more…