 AlpinDale
|
00acf371f9
rocm: fused topk softmax
|
před 7 měsíci |
|
AlpinDale
|
54f4f1e7f3
allow the cutlass kernels to take scales that reside on the GPU
|
před 7 měsíci |
|
AlpinDale
|
52474b8fa9
build: parallelize all build extensions
|
před 7 měsíci |
|
AlpinDale
|
7194047318
remove vllm-nccl
|
před 7 měsíci |
|
AlpinDale
|
f6250c5516
move dockerfiles to root; fix cpu build
|
před 7 měsíci |
|
AlpinDale
|
c6a501f682
add multiprocessing executor; make ray optional
|
před 7 měsíci |
|
AlpinDale
|
0cea453d36
automatically detect tensorized models
|
před 7 měsíci |
|
AlpinDale
|
e3f2ea4850
make punica kernels work with rocm
|
před 8 měsíci |
|
AlpinDale
|
d11d68f4e6
switch to vllm-flash-attn
|
před 8 měsíci |
|
AlpinDale
|
c4a9784795
properly exclude tests
|
před 8 měsíci |
|
AlpinDale
|
69f37f5806
skip compilation properly
|
před 8 měsíci |
|
AlpinDale
|
1b6bc0f379
upgrade tensorizer
|
před 8 měsíci |
 AlpinDale
|
e87c32bed3
feat: full tensor parallel for LoRA layers (#545)
|
před 8 měsíci |
 Naomiusearch
|
893158a4ed
fix: quants installation on ROCm (#469)
|
před 10 měsíci |
|
AlpinDale
|
9d81716bfd
[v0.5.3] Release Candidate (#388)
|
před 10 měsíci |
|
AlpinDale
|
9534fcfb7b
fix: build error
|
před 11 měsíci |
|
AlpinDale
|
29c241c115
fix: explicitly disallow installation on non-linux platforms (#373)
|
před 11 měsíci |
|
AlpinDale
|
3d6695cfbb
feat: add approximate gelu activation kernels (#370)
|
před 11 měsíci |
|
AlpinDale
|
f8dfac6372
chore: attention refactor and upstream sync apr01 (#365)
|
před 11 měsíci |
|
AlpinDale
|
e120404436
Revert "feat: CMake Build System Generator (#332)"
|
před 1 rokem |
|
AlpinDale
|
ad6802690f
feat: CMake Build System Generator (#332)
|
před 1 rokem |
|
AlpinDale
|
e42a78381a
feat: switch from pylint to ruff (#322)
|
před 1 rokem |
|
AlpinDale
|
c41462cfcd
feat: exllamav2 quantization (#305)
|
před 1 rokem |
 sgsdxzy
|
94c1543cae
fix: typo in marlin kernel path (#295)
|
před 1 rokem |
|
AlpinDale
|
e0c35bb353
feat: bitsandbytes and `--load-in{4,8}bit` support (#294)
|
před 1 rokem |
|
AlpinDale
|
705821a7fe
feat: AQLM quantization support (#293)
|
před 1 rokem |
|
AlpinDale
|
13d850334e
fix: navi support (#283)
|
před 1 rokem |
|
AlpinDale
|
7d6ba53602
feat: fused top-k kernels for MoE (#273)
|
před 1 rokem |
|
AlpinDale
|
4360684667
fix: cuda version in wheel
|
před 1 rokem |
|
AlpinDale
|
f99eb2c874
fix: hadamard tensors not included in wheel
|
před 1 rokem |
