AlpinDale 72659e5cad separate prompt and genned tokens for enc-dec пре 10 месеци
..
__init__.py 07aa2a492f upstream: add option to specify tokenizer пре 1 година
block.py ac82b67f75 feat: naive context shift and various QoL changes (#289) пре 10 месеци
config.py c41462cfcd feat: exllamav2 quantization (#305) пре 10 месеци
gguf.py e42a78381a feat: switch from pylint to ruff (#322) пре 10 месеци
grammar.py 0527131e93 fix: grammar logits processor (#268) пре 11 месеци
logger.py e42a78381a feat: switch from pylint to ruff (#322) пре 10 месеци
logits_processor.py 3df36ee07d fix: logit bias logitproc (#278) пре 10 месеци
outputs.py e42a78381a feat: switch from pylint to ruff (#322) пре 10 месеци
sampling_params.py e42a78381a feat: switch from pylint to ruff (#322) пре 10 месеци
sequence.py 72659e5cad separate prompt and genned tokens for enc-dec пре 10 месеци
test_utils.py 641bb0f6e9 feat: add custom allreduce kernels (#224) пре 1 година
utils.py e53842bd5d fix: cuda home detection for fp8 kv cache пре 10 месеци