.. |
adapter_commons
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
assets
|
c6c91edab7
ci: update & overhaul test units (#769)
|
1 개월 전 |
attention
|
7a313483f1
chore: move update_flash_attn_metadata to attn backend (#731)
|
3 달 전 |
common
|
2242958d91
fix: sequence breaker ids are a list of int
|
1 개월 전 |
distributed
|
0f1af04cf5
frontend: minor logging improvements (#787)
|
2 달 전 |
endpoints
|
22428f934d
formatting
|
1 개월 전 |
engine
|
3d83e64f8e
feat: add metrics for prefix cache hit rate (#829)
|
1 개월 전 |
executor
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
inputs
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
kv_quant
|
8a71788372
Add OLMoE (#772)
|
2 달 전 |
lora
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
modeling
|
2242b356a0
apply dry first
|
1 개월 전 |
multimodal
|
89a2c6dee1
chore: refactor `MultiModalConfig` initialization and profiling (#745)
|
3 달 전 |
platforms
|
81c28d2a7f
fix: use nvml to get consistent device names (#739)
|
3 달 전 |
plugins
|
f76f2a5af0
feat: add aphrodite plugin system (#705)
|
4 달 전 |
processing
|
3d83e64f8e
feat: add metrics for prefix cache hit rate (#829)
|
1 개월 전 |
prompt_adapter
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
quantization
|
f98e7b2f8c
feat: add HQQ quantization support (#795)
|
2 달 전 |
server
|
0256ed236b
feat: windows support (#790)
|
2 달 전 |
spec_decode
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
task_handler
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
transformers_utils
|
fb96041ae3
fix: demote skip_special_tokens assertion to logger error (#778)
|
2 달 전 |
triton_utils
|
f1d0b77c92
[0.6.0] Release Candidate (#481)
|
4 달 전 |
__init__.py
|
f1d0b77c92
[0.6.0] Release Candidate (#481)
|
4 달 전 |
_core_ext.py
|
9296d4b25d
feat: dynamo support for ScalarType (#733)
|
3 달 전 |
_custom_ops.py
|
bfc8988116
feat: add cuda sampling kernels for top_k and top_p (#828)
|
1 개월 전 |
_ipex_ops.py
|
f1d0b77c92
[0.6.0] Release Candidate (#481)
|
4 달 전 |
connections.py
|
c6c91edab7
ci: update & overhaul test units (#769)
|
1 개월 전 |
constants.py
|
2f61644f6e
SPMD optimizations (#824)
|
1 개월 전 |
py.typed
|
1c988a48b2
fix logging and add py.typed
|
1 년 전 |
scalar_type.py
|
f1d0b77c92
[0.6.0] Release Candidate (#481)
|
4 달 전 |
version.py
|
f0e00f1b43
ci: bump to 0.6.3.post1 (#801)
|
2 달 전 |