 AlpinDale
|
c0aac15421
feat: S-LoRA support (#222)
|
11 bulan lalu |
|
AlpinDale
|
e113f3e9bf
feat: spaces between special tokens (#94)
|
1 tahun lalu |
 AlpinDale
|
11c01cfd0a
fix: skip special tokens
|
1 tahun lalu |
|
AlpinDale
|
74604eb252
fix: pylint complaints (#91)
|
1 tahun lalu |
|
AlpinDale
|
2c1d6a8cf2
fix: fast tokenizer latency reduction
|
1 tahun lalu |
|
AlpinDale
|
75c27d3e65
massive overhaul
|
1 tahun lalu |
|
AlpinDale
|
9328091450
Revert a revert.
|
1 tahun lalu |
|
AlpinDale
|
663dd09399
Revert "fix: detokenization with special tokens"
|
1 tahun lalu |
|
AlpinDale
|
cc1d5339dd
fix: detokenization with special tokens
|
1 tahun lalu |
|
AlpinDale
|
6b9561ef07
adapt TGI incremental detokenization
|
1 tahun lalu |
|
AlpinDale
|
45f6d9f923
initial refactor commit
|
1 tahun lalu |
|
AlpinDale
|
267c73c5d3
chore: minor tokenizer tweaks
|
1 tahun lalu |
|
AlpinDale
|
862e48176e
fix: handle special tokens
|
1 tahun lalu |
|
AlpinDale
|
2cdfc45a40
fix: trust_remote_code fixes
|
1 tahun lalu |
|
AlpinDale
|
56077f0f29
upstream: trust remote code
|
1 tahun lalu |
|
AlpinDale
|
5169163403
chore: add tokenizer mode for slow/fast tokenizers
|
1 tahun lalu |
|
AlpinDale
|
5e82533d02
upstream: add option to specify tokenizer
|
1 tahun lalu |
|
AlpinDale
|
07aa2a492f
upstream: add option to specify tokenizer
|
1 tahun lalu |
