david/flash-attention

огледало от https://github.com/Dao-AILab/flash-attention

Автор	SHA1 Съобщение	Дата
dan_the_3rd	c3f2a632aa [ft_attention] Fix for seqlen=8136 (#488)	преди 1 година
Tri Dao	62e9814466 [Rotary] Make sure frequency calculation is in fp32	преди 1 година
Tri Dao	311d6606bf [Gen] Fix FT kernel smem size, CG when batch size changed	преди 1 година
Tri Dao	a01d1213d7 [Gen] Add kernel from FasterTransformer for benchmarking	преди 1 година