Tri Dao 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
..
instantiations 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
__init__.py 7f67966cc7 FA3 initial code release 6 місяців тому
benchmark_attn.py 7a802796e1 Big refactor and update 2 тижнів тому
benchmark_flash_attention_fp8.py a5a75274bc FA3 kvcache + split kv + gqa parallelization (#1236) 3 місяців тому
benchmark_split_kv.py a5a75274bc FA3 kvcache + split kv + gqa parallelization (#1236) 3 місяців тому
combine.h 478ee666cc Make namespace comment consistent (#1305) 2 місяців тому
copy_sm90_bulk_reduce.hpp 7a802796e1 Big refactor and update 2 тижнів тому
epilogue_bwd.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
epilogue_fwd.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
flash.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
flash_api.cpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
flash_attn_interface.py 7a802796e1 Big refactor and update 2 тижнів тому
flash_bwd_kernel_sm80.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_bwd_kernel_sm90.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_bwd_launch_template.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
flash_bwd_postprocess_kernel.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_bwd_preprocess_kernel.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_fwd_combine_kernel.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_fwd_combine_launch_template.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_fwd_combine_sm80.cu 7a802796e1 Big refactor and update 2 тижнів тому
flash_fwd_kernel_sm80.h 7a802796e1 Big refactor and update 2 тижнів тому
flash_fwd_kernel_sm90.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
flash_fwd_launch_template.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
generate_kernels.py 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
heuristics.h 7a802796e1 Big refactor and update 2 тижнів тому
mainloop_bwd_sm80.hpp 7a802796e1 Big refactor and update 2 тижнів тому
mainloop_bwd_sm90_tma_gmma_ws.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
mainloop_fwd_sm80.hpp 7a802796e1 Big refactor and update 2 тижнів тому
mainloop_fwd_sm90_tma_gmma_ws.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
mask.h 7a802796e1 Big refactor and update 2 тижнів тому
named_barrier.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
pack_gqa.h 7a802796e1 Big refactor and update 2 тижнів тому
padding.py 7a802796e1 Big refactor and update 2 тижнів тому
paged_kv.h 7a802796e1 Big refactor and update 2 тижнів тому
rotary.h 7a802796e1 Big refactor and update 2 тижнів тому
seqlen.h 7a802796e1 Big refactor and update 2 тижнів тому
setup.py 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
sm90_pipeline_no_cluster.hpp 68bf390920 Update Cutlass to fix mem fence 2 тижнів тому
softmax.h 7a802796e1 Big refactor and update 2 тижнів тому
static_switch.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
test_attn_kvcache.py a5a75274bc FA3 kvcache + split kv + gqa parallelization (#1236) 3 місяців тому
test_flash_attn.py 7a802796e1 Big refactor and update 2 тижнів тому
test_kvcache.py a5a75274bc FA3 kvcache + split kv + gqa parallelization (#1236) 3 місяців тому
test_util.py 7a802796e1 Big refactor and update 2 тижнів тому
tile_scheduler.hpp 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому
tile_size.h 7a802796e1 Big refactor and update 2 тижнів тому
utils.h 7bc3f031a4 Compile for both Sm80 and Sm90 2 тижнів тому