Acasă Explorează Ajutor
Înregistrare Autentificare
david
/
flash-attention
oglindă de https://github.com/Dao-AILab/flash-attention
1
0
Bifurcare 0
Fisiere Probleme 0 Wiki
Ramură: changes_for_fp8
Ramuri Etichete
flash-attention
/
flash_attn
/
modules
Markus Krimmel 6bbc532388 fix: cast the alibi slopes to torch.float32 (#846) 9 luni în urmă
..
__init__.py ece539abd6 Add __init__.py files to subdirectories for installation 2 ani în urmă
block.py abbc131173 [LayerNorm] Switch from CUDA to Triton implementation 1 an în urmă
embedding.py f1a73d0740 Run isort and black on python files 1 an în urmă
mha.py 6bbc532388 fix: cast the alibi slopes to torch.float32 (#846) 9 luni în urmă
mlp.py c3b2196652 Add Alibi to MHA, test with Baichuan-13B 1 an în urmă