| .. |
|
__init__.py
|
9d81716bfd
[v0.5.3] Release Candidate (#388)
|
9 місяців тому |
|
block_table.py
|
6ac658b0d6
some small performance improvements
|
5 місяців тому |
|
common.py
|
63b735bc2a
chore: optimize v2 block manager to match the performance of v1
|
6 місяців тому |
|
cpu_gpu_block_allocator.py
|
63b735bc2a
chore: optimize v2 block manager to match the performance of v1
|
6 місяців тому |
|
interfaces.py
|
63b735bc2a
chore: optimize v2 block manager to match the performance of v1
|
6 місяців тому |
|
naive_block.py
|
63b735bc2a
chore: optimize v2 block manager to match the performance of v1
|
6 місяців тому |
|
prefix_caching_block.py
|
6ac658b0d6
some small performance improvements
|
5 місяців тому |
|
utils.py
|
9099040472
feat: cross-attention kv caching support
|
6 місяців тому |
AlpinDale
6ac658b0d6
some small performance improvements