AlpinDale 4a7cb8f232 rocm: add custom paged attention kernels for ROCm (#1043) 2 місяців тому
..
all_reduce f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
attention 3bb0f07461 chore: rename `task_handler` to `worker` (#985) 2 місяців тому
backup 3bb0f07461 chore: rename `task_handler` to `worker` (#985) 2 місяців тому
core f1ea7711bd core: do not compile ScalarType for torch < 2.4.0 (#938) 2 місяців тому
cpu a113309876 kernel: add meta functions for ops to prevent graph breaks (#1019) 2 місяців тому
cutlass_extensions 93bc863591 feat: Machete Kernels for Hopper GPUs (#842) 3 місяців тому
hadamard 5d288aa76c feat: add fast hadamard transformation kernels (#232) 1 рік тому
mamba 0256ed236b feat: windows support (#790) 4 місяців тому
moe 9f3e7c86e2 feat: add fused Marlin MoE kernel (#934) 2 місяців тому
prepare_inputs 1390915778 multi-step: add support for flashinfer attention backend (#1033) 2 місяців тому
punica f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
quantization a113309876 kernel: add meta functions for ops to prevent graph breaks (#1019) 2 місяців тому
rocm 4a7cb8f232 rocm: add custom paged attention kernels for ROCm (#1043) 2 місяців тому
sampling bfc8988116 feat: add cuda sampling kernels for top_k and top_p (#828) 3 місяців тому
activation_kernels.cu f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
cache.h f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
cache_kernels.cu 0256ed236b feat: windows support (#790) 4 місяців тому
cuda_compat.h f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
cuda_utils.h 93bc863591 feat: Machete Kernels for Hopper GPUs (#842) 3 місяців тому
cuda_utils_kernels.cu f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
dispatch_utils.h f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
layernorm_kernels.cu e14223dce5 kernel: use `cub::BlockReduce` instead of custom impl (#895) 2 місяців тому
ops.h 1390915778 multi-step: add support for flashinfer attention backend (#1033) 2 місяців тому
permute_cols.cu 93bc863591 feat: Machete Kernels for Hopper GPUs (#842) 3 місяців тому
pos_encoding_kernels.cu f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
torch_bindings.cpp 1390915778 multi-step: add support for flashinfer attention backend (#1033) 2 місяців тому