AlpinDale adb6982090 models: add support for IBM Granite (PowerLM) models (#978) před 1 měsícem
..
adapter_commons 2f61644f6e SPMD optimizations (#824) před 2 měsíci
assets 653d1a08d4 feat: add support for audio models (#891) před 1 měsícem
attention 032974a28a tpu: fix TPU type api (#975) před 1 měsícem
common b3f6eeb1d2 vlm: increase the default `max_num_batched_tokens` for multimodal models (#973) před 1 měsícem
compilation 0e5cf7f840 tpu: avoid dynamo guard eval overhead (#949) před 1 měsícem
distributed 61103b92d4 tpu: support single and multi-host TPUs on GKE and RayServe (#970) před 1 měsícem
endpoints 0f72141ca2 api: support multiple input images před 1 měsícem
engine d4e78a428b fix: crash when cancelling a request with multi-step (#977) před 1 měsícem
executor 61103b92d4 tpu: support single and multi-host TPUs on GKE and RayServe (#970) před 1 měsícem
inputs 908ff753a1 fix: phi_3.5_v loading (#896) před 1 měsícem
kv_quant 8a71788372 Add OLMoE (#772) před 3 měsíci
lora bf4a4d8516 fix: do not register punica with torch if using older torch (#948) před 1 měsícem
modeling adb6982090 models: add support for IBM Granite (PowerLM) models (#978) před 1 měsícem
multimodal 2aabf8fcf7 vlm: fix errors on ragged NestedTensors (#953) před 1 měsícem
platforms 9f3e7c86e2 feat: add fused Marlin MoE kernel (#934) před 1 měsícem
plugins 22a4cd4595 core: fix spec decode metrics and envs circular import (#889) před 1 měsícem
processing 5be6225f38 core: support multi-step scheduling w/ async post-processor (#955) před 1 měsícem
prompt_adapter 2f61644f6e SPMD optimizations (#824) před 2 měsíci
quantization 201db10f02 models: add support for Phi3 MoE před 1 měsícem
server 22a4cd4595 core: fix spec decode metrics and envs circular import (#889) před 1 měsícem
spec_decode 0dfa6b60ec core: support logprobs with multi-step scheduling (#963) před 1 měsícem
task_handler b3f6eeb1d2 vlm: increase the default `max_num_batched_tokens` for multimodal models (#973) před 1 měsícem
transformers_utils adb6982090 models: add support for IBM Granite (PowerLM) models (#978) před 1 měsícem
triton_utils f1d0b77c92 [0.6.0] Release Candidate (#481) před 4 měsíci
__init__.py f1d0b77c92 [0.6.0] Release Candidate (#481) před 4 měsíci
_core_ext.py f1ea7711bd core: do not compile ScalarType for torch < 2.4.0 (#938) před 1 měsícem
_custom_ops.py fcfcfc65e1 quants: add triton kernels for AWQ (#946) před 1 měsícem
_ipex_ops.py f1d0b77c92 [0.6.0] Release Candidate (#481) před 4 měsíci
connections.py c6c91edab7 ci: update & overhaul test units (#769) před 2 měsíci
constants.py 2f61644f6e SPMD optimizations (#824) před 2 měsíci
py.typed 1c988a48b2 fix logging and add py.typed před 1 rokem
scalar_type.py f1d0b77c92 [0.6.0] Release Candidate (#481) před 4 měsíci
version.py cbd51a208a ci: bump to 0.6.5 (#964) před 1 měsícem