如何使用云原生的方式做模型服务自动化?结合HP云模型实践看看内部结构详细方案

Kubernetes

AI云原生本质来讲就是结合K8s实现服务部署自动化,结合Istio来做流量治理,实现应用全面部署及管控。

AI模型对外提供服务肯定离不开模型部署,那么刚好可以借助K8s的能力来实现自动化。而对外提供出的API肯定离不开流量治理与限速相关的功能,这也恰好是Istio的能力。

本文结合HP云,看看在实践过程中应该怎么,以及应该注意的事项。

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

picture.image

0
0
0
0
关于作者
关于作者

文章

0

获赞

0

收藏

0

相关资源
如何利用云原生构建 AIGC 业务基石
AIGC即AI Generated Content,是指利用人工智能技术来生成内容,AIGC也被认为是继UGC、PGC之后的新型内容生产方式,AI绘画、AI写作等都属于AIGC的分支。而 AIGC 业务的部署也面临着异构资源管理、机器学习流程管理等问题,本次分享将和大家分享如何使用云原生技术构建 AIGC 业务。
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论