david/flash-attention

огледало от https://github.com/Dao-AILab/flash-attention

Автор	SHA1 Съобщение	Дата
Ying Zhang	8cbc8a042f small fixes	преди 3 месеца
Ying Zhang	cdbbe844b1 minor changes to unpad_input test util func	преди 3 месеца
Ying Zhang	db80387343 Add seqused_q in fwd / bwd and seqused_k in bwd.	преди 3 месеца
Jay Shah	32792d37ec add missing if condition for key_padding_mask in test_util.py	преди 3 месеца
Ying Zhang	53537da422 add a unittest	преди 4 месеца
Ying Zhang	dfe1a59e4b Add var-seq-len to FA3 fp16 / bf16 fwd (#1072)	преди 4 месеца