| .. |
|
configs
|
aa23ca6ba9
add dbrx support
|
10 місяців тому |
|
tokenizer_group
|
282d7b7f9c
fix multi-gpu ray tokenizer for trust_remote_code
|
9 місяців тому |
|
tokenizers
|
da223153c6
feat&fix: cohere support and missing GPU blocks (#333)
|
10 місяців тому |
|
__init__.py
|
267c73c5d3
chore: minor tokenizer tweaks
|
1 рік тому |
|
config.py
|
58b0616dd3
feat: support sharded ggufs (#420)
|
9 місяців тому |
|
detokenizer.py
|
c18bf116da
fix stop strings not being excluded from outputs
|
9 місяців тому |
|
tokenizer.py
|
58b0616dd3
feat: support sharded ggufs (#420)
|
9 місяців тому |
sgsdxzy
58b0616dd3
feat: support sharded ggufs (#420)