AlpinDale c41462cfcd feat: exllamav2 quantization (#305) hace 10 meses
..
__init__.py 07aa2a492f upstream: add option to specify tokenizer hace 1 año
block.py ac82b67f75 feat: naive context shift and various QoL changes (#289) hace 10 meses
config.py c41462cfcd feat: exllamav2 quantization (#305) hace 10 meses
grammar.py 0527131e93 fix: grammar logits processor (#268) hace 11 meses
logger.py 3a045ebfde fix: escape tags in loguru (#304) hace 10 meses
logits_processor.py 3df36ee07d fix: logit bias logitproc (#278) hace 10 meses
outputs.py c0aac15421 feat: S-LoRA support (#222) hace 1 año
sampling_params.py ac82b67f75 feat: naive context shift and various QoL changes (#289) hace 10 meses
sequence.py 9810daa699 feat: INT8 KV Cache (#298) hace 10 meses
test_utils.py 641bb0f6e9 feat: add custom allreduce kernels (#224) hace 1 año
utils.py c2d77b1822 chore: logging refactor (#302) hace 10 meses