AlpinDale 3d83e64f8e feat: add metrics for prefix cache hit rate (#829) 1 månad sedan
..
async_aphrodite c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
basic_correctness 2f61644f6e SPMD optimizations (#824) 1 månad sedan
benchmarks bfc8988116 feat: add cuda sampling kernels for top_k and top_p (#828) 1 månad sedan
compile c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
core 3d83e64f8e feat: add metrics for prefix cache hit rate (#829) 1 månad sedan
distributed 2f61644f6e SPMD optimizations (#824) 1 månad sedan
endpoints 262cbc63b7 fix: vision api test template path 1 månad sedan
engine c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
kernels c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
lora 68f050129d fix: lora worker manager test import 1 månad sedan
metrics c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
modeling c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
models c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
multimodal c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
plugins c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
prefix_caching 3d83e64f8e feat: add metrics for prefix cache hit rate (#829) 1 månad sedan
prompt_adapter c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
prompts e1f3fd1e02 fix: test units (#201) 1 år sedan
quantization 7f1c9af5e2 fix: fp8 quant test 1 månad sedan
samplers 22427602eb feat: add top-nsigma sampling method 1 månad sedan
spec_decode 2f61644f6e SPMD optimizations (#824) 1 månad sedan
tensorizer_loader 32a37e8107 tests: partially fix tensorizer and logprobs tests 1 månad sedan
tokenization c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
weight_loading c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
worker 2f61644f6e SPMD optimizations (#824) 1 månad sedan
__init__.py 2755a48d51 merge dev branch into main (#153) 1 år sedan
conftest.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_cache_block_hashing.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_config.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_embedded_commit.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_inputs.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_logits_processor.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_regression.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_sampling_params.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_scalartype.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_sequence.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_sharded_state_loader.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
test_utils.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan
utils.py c6c91edab7 ci: update & overhaul test units (#769) 1 månad sedan