AlpinDale b0a8169b54 core: do not compile for profiling 1 månad sedan
..
adapter_commons 2f61644f6e SPMD optimizations (#824) 2 månader sedan
assets 653d1a08d4 feat: add support for audio models (#891) 1 månad sedan
attention f7f3fed265 feat: add async postprocessor (#925) 1 månad sedan
common d46e70ac98 api: add inline model loading (#928) 1 månad sedan
distributed 2940da2c7b distributed: fix custom allreduce p2p cache file generation (#922) 1 månad sedan
endpoints a3c03db735 fix: inline model loading conflicts with lora (#930) 1 månad sedan
engine 8d9f1fd4e6 feat: add single user mode (#927) 1 månad sedan
executor 0c6d90dade neuron: add support for tensor parallelism (#923) 1 månad sedan
inputs 908ff753a1 fix: phi_3.5_v loading (#896) 1 månad sedan
kv_quant 8a71788372 Add OLMoE (#772) 3 månader sedan
lora 369600855a xpu: disable punica kernels for XPU (#864) 2 månader sedan
modeling 59d1d59028 api: support aphrodite_config.yaml with inline loading (#929) 1 månad sedan
multimodal 653d1a08d4 feat: add support for audio models (#891) 1 månad sedan
platforms 81c28d2a7f fix: use nvml to get consistent device names (#739) 4 månader sedan
plugins 22a4cd4595 core: fix spec decode metrics and envs circular import (#889) 1 månad sedan
processing f7f3fed265 feat: add async postprocessor (#925) 1 månad sedan
prompt_adapter 2f61644f6e SPMD optimizations (#824) 2 månader sedan
quantization f7f3fed265 feat: add async postprocessor (#925) 1 månad sedan
server 22a4cd4595 core: fix spec decode metrics and envs circular import (#889) 1 månad sedan
spec_decode 3b684a8a54 spec decode: streamline batch expansion tensor manipulation (#918) 1 månad sedan
task_handler b0a8169b54 core: do not compile for profiling 1 månad sedan
transformers_utils 132aa2abe4 spec decode: add support for EAGLE (#899) 1 månad sedan
triton_utils f1d0b77c92 [0.6.0] Release Candidate (#481) 5 månader sedan
__init__.py f1d0b77c92 [0.6.0] Release Candidate (#481) 5 månader sedan
_core_ext.py 9296d4b25d feat: dynamo support for ScalarType (#733) 4 månader sedan
_custom_ops.py 93bc863591 feat: Machete Kernels for Hopper GPUs (#842) 2 månader sedan
_ipex_ops.py f1d0b77c92 [0.6.0] Release Candidate (#481) 5 månader sedan
connections.py c6c91edab7 ci: update & overhaul test units (#769) 2 månader sedan
constants.py 2f61644f6e SPMD optimizations (#824) 2 månader sedan
py.typed 1c988a48b2 fix logging and add py.typed 1 år sedan
scalar_type.py f1d0b77c92 [0.6.0] Release Candidate (#481) 5 månader sedan
version.py 8b8d2ce7e2 ci: bump aphrodite version to 0.6.4.post1 (#859) 2 månader sedan