岗位描述(节选)
推理方向:
负责模型推理引擎的选型、优化与定制开发,探索PD分离(Prefill-Decode Disaggregation)架构,保障线上推理服务的高吞吐、低延迟和高可用。
推进推理侧的关键技术优化,包括KV Cache管理(PagedAttention、多级缓存、KV Cache Offload)、量化压缩(FP8/INT8/INT4)、Continuous Batching、Chunked Prefill、Speculative Decoding、CUDA Graph优化等,持续提升推理效率和资源利用率。
设计和构建模型部署服务平台,涵盖模型版本管理、灰度发布、任务分发与路由、负载均衡、弹性扩缩容、资源池化与应用混部等能力。
管理高性能GPU计算集群,负责集群资源调度、监控告警、故障恢复等运维保障工作。
与医学算法、产品、运营以及业务工程团队通力合作,推进医学AI产品和技术的发展和应……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。
本站当前在招 6843 个杭州岗位(全城各职能合计),其中 744 个公开标注了薪资。按这些标注统计:月薪(税前)主流区间 9K ~ 20K(25~75 分位),中位约 12K,最低 1K、最高 250K。
在招岗位较多的企业:阿里巴巴集团(含高德/阿里云) 1231 个海康威视 1108 个字节跳动 603 个零跑科技 525 个阿里巴巴控股集团 228 个
统计口径:求职者营地实时在招岗位的公开薪资标注,未标注者不计入;区间为 25~75 分位,非薪酬承诺。