Together AI Blog·2026-07-31 08:00· 2026-07-31AI 评分57Together AI 推出面向大模型推理的自动扩缩容端点Autoscaling endpoints for LLM inferenceAI 导读Together AI 为专用模型推理平台推出基于推理原生指标的自动扩缩容功能,允许用户根据 inflight_requests、TTFT 和 GPU 利用率等动态调整副本数量。来源:Together AI Blog · together.ai#产品更新#部署/工程#推理