AlpinDale 172dee2573 (2/N) Triton Backend: integrate Triton activation kernels (#1126) 3 ngày trước cách đây
..
adapter_commons 2f61644f6e SPMD optimizations (#824) 2 tháng trước cách đây
assets a5bfc2bc3d VLM: add support for LLaVA-Onevision model (#1100) 2 tuần trước cách đây
attention 7fffa507ff build: build flash attention kernels inside aphrodite (#1085) 2 tuần trước cách đây
common 172dee2573 (2/N) Triton Backend: integrate Triton activation kernels (#1126) 3 ngày trước cách đây
compilation 960dee2f97 torch.compile: fix functionalization (#1045) 1 tháng trước cách đây
distributed 76088aa43a distributed: allow IPv6 in APHRODITE_HOST_IP with ZMQ (#1105) 2 tuần trước cách đây
endpoints 3e6addcc2c LLM: enable batched inference for llm.chat() API (#1120) 5 ngày trước cách đây
engine 5b03d67abb Core: add output streaming support to multi-step + async (#1112) 2 tuần trước cách đây
executor 6212072245 api: support LoRA lineage and base model metadata management (#1072) 1 tháng trước cách đây
inputs cc5e185795 VLM: support passing multimodal processor kwargs (#1102) 2 tuần trước cách đây
kv_quant 8a71788372 Add OLMoE (#772) 4 tháng trước cách đây
lora 6d8df254c7 LoRA: skip loading unsupported weight modules (#1109) 2 tuần trước cách đây
modeling 172dee2573 (2/N) Triton Backend: integrate Triton activation kernels (#1126) 3 ngày trước cách đây
multimodal cc5e185795 VLM: support passing multimodal processor kwargs (#1102) 2 tuần trước cách đây
platforms f2b6dc3872 cpu: add support for W8A8 quantization via compressed-tensor (#1017) 1 tháng trước cách đây
plugins 9797d38b24 torch.compile: allow adding custom compile backends via plugins (#1041) 1 tháng trước cách đây
processing f561a54a43 core: fix async postprocessor in case of preemption (#1000) 1 tháng trước cách đây
prompt_adapter 30d02d0747 chore: remove peft as a requirement (#1006) 1 tháng trước cách đây
quantization 349a612338 chore: bump bitsandbytes version to latest; enable cuda graphs for 4bit bnb (#1123) 5 ngày trước cách đây
server 9a7d5514c4 feat: introduce MQAphroditeEngine (#1056) 1 tháng trước cách đây
spec_decode a0f0160b79 spec decode: remove dead code from draft bonus tokens (#1101) 2 tuần trước cách đây
transformers_utils cc5e185795 VLM: support passing multimodal processor kwargs (#1102) 2 tuần trước cách đây
triton_utils 4593a3b306 chore: remove dead code from triton sampling kernels (#1049) 1 tháng trước cách đây
worker 2cd6ef2d5a misc: skip dumping inputs when unpicklable 2 tuần trước cách đây
__init__.py f1d0b77c92 [0.6.0] Release Candidate (#481) 5 tháng trước cách đây
_core_ext.py f1ea7711bd core: do not compile ScalarType for torch < 2.4.0 (#938) 1 tháng trước cách đây
_custom_ops.py fa84f8102e kernels: split marlin kernels for faster compile, fix MoE, temporarily remove HQQ (#1119) 5 ngày trước cách đây
_ipex_ops.py 6951928522 xpu: bump IPEX to 2.3, support GQA (#1042) 1 tháng trước cách đây
connections.py c6c91edab7 ci: update & overhaul test units (#769) 2 tháng trước cách đây
constants.py 2f61644f6e SPMD optimizations (#824) 2 tháng trước cách đây
py.typed 1c988a48b2 fix logging and add py.typed 1 năm trước cách đây
scalar_type.py f1d0b77c92 [0.6.0] Release Candidate (#481) 5 tháng trước cách đây
version.py b20c4570d2 CI: bump aphrodite-engine to v0.6.6 (#1111) 2 tuần trước cách đây