AlpinDale 5884e0b904 add bitnetforcausallm support 6 месяцев назад
..
fused_moe 1e35cef979 feat: add arctic snowflake model (#551) 6 месяцев назад
ops fca911ee0a vLLM Upstream Sync (#526) 7 месяцев назад
__init__.py 07aa2a492f upstream: add option to specify tokenizer 1 год назад
activation.py 6fc1ec6e9a fix redirects and improve low level debugging 6 месяцев назад
layernorm.py 6fc1ec6e9a fix redirects and improve low level debugging 6 месяцев назад
linear.py 5884e0b904 add bitnetforcausallm support 6 месяцев назад
logits_processor.py e8b7f53321 allow prompt token IDs in the logits processor api 6 месяцев назад
pooler.py be8154a8a0 feat: proper embeddings API with e5-mistral-7b support 6 месяцев назад
rejection.py 197a6d2c16 auto disable speculative decoding by the running queue size 6 месяцев назад
rotary_embedding.py 9e73559eba make use of batched rotary embedding kernels to support long context lora 6 месяцев назад
sampler.py be8154a8a0 feat: proper embeddings API with e5-mistral-7b support 6 месяцев назад
vocab_parallel_embedding.py 6fc1ec6e9a fix redirects and improve low level debugging 6 месяцев назад