| .. |
|
__init__.py
|
9d81716bfd
[v0.5.3] Release Candidate (#388)
|
8 місяців тому |
|
abstract.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
blocksparse_attn.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
flash_attn.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
flashinfer.py
|
d6cbbba95f
Revert "fix: issues with flashinfer fp8 kv (#950)" (#956)
|
1 місяць тому |
|
ipex_attn.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
openvino.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
pallas.py
|
032974a28a
tpu: fix TPU type api (#975)
|
1 місяць тому |
|
placeholder_attn.py
|
f7f3fed265
feat: add async postprocessor (#925)
|
1 місяць тому |
|
rocm_flash_attn.py
|
22a4cd4595
core: fix spec decode metrics and envs circular import (#889)
|
1 місяць тому |
|
torch_sdpa.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
utils.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
|
xformers.py
|
1405051912
attention: add `AttentionState` abstraction (#863)
|
1 місяць тому |
AlpinDale
032974a28a
tpu: fix TPU type api (#975)