Головна сторінка Огляд Довідка
Реєстрація Увійти
david
/
aphrodite-engine
дзеркало https://github.com/PygmalionAI/aphrodite-engine
1
0
Відгалуження 0
Файли Проблеми 0 Wiki
Дерево: 651678d2df
Гілки Теги
aphrodite-engin...
/
aphrodite
/
modeling
/
models
AlpinDale 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
..
__init__.py ec17b6c4d0 fix: Phi3.5 Mini and MoE LoRA inference (#1070) 2 місяців тому
arctic.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
baichuan.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
bart.py a985143768 core: add cuda graph support for encoder-decoder models (#1051) 2 місяців тому
blip.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
blip2.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
bloom.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
chameleon.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
chatglm.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
clip.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
commandr.py 135dfd648b fix: LoRA support for Cohere and Jamba models (#1004) 2 місяців тому
dbrx.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
decilm.py 9022c6d869 remove progress_bar imports 4 місяців тому
deepseek.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
deepseek_v2.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
eagle.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
exaone.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
falcon.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
fuyu.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
gemma.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
gemma2.py b33cf04386 quants: add bitsandbytes support for gemma2 model (#1026) 2 місяців тому
gpt2.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
gpt_bigcode.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
gpt_j.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
gpt_neox.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
granite.py 11f49b5341 fix: granite logit scale in logit computation (#1054) 2 місяців тому
idefics2_vision_model.py f1d0b77c92 [0.6.0] Release Candidate (#481) 6 місяців тому
interfaces.py 0b8b407b6d feat: support profiling with multiple multi-modal inputs per prompt (#712) 6 місяців тому
intern_vit.py f56d6b396a vlm: fallback to SDPA for ViT models on CPU backend (#982) 2 місяців тому
internlm2.py 7632f91429 fix: InternLM2 model with Tensor Parallel (#980) 2 місяців тому
internvl.py 41ceb754a6 vlm: fix internvl2 inference with various num_patches (#1030) 2 місяців тому
jais.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
jamba.py 135dfd648b fix: LoRA support for Cohere and Jamba models (#1004) 2 місяців тому
llama.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
llama_embedding.py 9022c6d869 remove progress_bar imports 4 місяців тому
llava.py 4d14bd1fe5 vlm: add multi-input support for LLaVA and InternVL models (#1002) 2 місяців тому
llava_next.py 766ea79b89 vlm: fix feature size calculation for llava-next models (#1079) 2 місяців тому
llava_next_video.py be59e30139 vlm: add support for video modality + llava next video (#1014) 2 місяців тому
mamba.py 3bb0f07461 chore: rename `task_handler` to `worker` (#985) 2 місяців тому
mamba_cache.py a113309876 kernel: add meta functions for ops to prevent graph breaks (#1019) 2 місяців тому
medusa.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
minicpm.py ce7b602f03 model: add support for MiniCPM-3 (#1044) 2 місяців тому
minicpm3.py ce7b602f03 model: add support for MiniCPM-3 (#1044) 2 місяців тому
minicpmv.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
mixtral.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
mixtral_quant.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
mlp_speculator.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
molmo.py acc0c727c8 vlm: add support for molmo vision model (#1069) 2 місяців тому
mpt.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
na_vit.py 9f3e7c86e2 feat: add fused Marlin MoE kernel (#934) 2 місяців тому
nemotron.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
olmo.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
olmoe.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
opt.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
orion.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
paligemma.py 46d577f019 vlm: fix siglip layernorm and paligemma weight loading (#991) 2 місяців тому
persimmon.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
phi.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
phi3.py ec17b6c4d0 fix: Phi3.5 Mini and MoE LoRA inference (#1070) 2 місяців тому
phi3_small.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
phi3v.py 4d14bd1fe5 vlm: add multi-input support for LLaVA and InternVL models (#1002) 2 місяців тому
phimoe.py ec17b6c4d0 fix: Phi3.5 Mini and MoE LoRA inference (#1070) 2 місяців тому
pixtral.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
qwen.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
qwen2.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
qwen2_moe.py 5224389dae chore: skip loading extra bias for qwen2 moe GPTQ (#1011) 2 місяців тому
qwen2_vl.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
siglip.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
solar.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
stablelm.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
starcoder2.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому
ultravox.py 651678d2df VLM: use `SequenceData.from_token_counts` to create dummy data (#1093) 1 місяць тому
utils.py a8bdd488b9 distributed: support pipeline parallelism for internvl and internlm2 (#965) 2 місяців тому
xverse.py 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) 2 місяців тому