HarmonyOS开发者限时福利来啦!最高10w+现金激励等你拿~ 了解详情
写点什么

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成

Robbie Haertel & Bhupesh Chandra

  • 2020-12-10
  • 本文字数:1343 字

    阅读完需:约 4 分钟

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成

机器学习 (ML) 正在转变企业业务运营以及人们的生活方式。无论是查找共乘同伴、推荐产品或者播放列表、识别图像中的对象,还是优化市场营销活动,ML 和预测是这些体验的核心所在。AIPlatform 旨在提供一个世界级的企业就绪平台以托管您的所有变革性的 ML 模型,从而为像您这样致力于利用 ML 改造世界的企业提供支持。


作为我们持续承诺的一部分,我们高兴的宣布全面开通基于 Google Kubernetes Engine (GKE) 后端的 AI Platform Prediction。新的后端架构旨在通过新的硬件选项(Compute Engine 机器类型NVIDIA 加速器)提高可靠性和灵活性、减少开销延迟,改进长尾延迟。除了产品 Beta 测试期间就可用的标准功能(例如,自动伸缩、访问日志以及请求/响应日志)之外,我们还提供几项有助于提升健壮性、灵活性和可用性的更新:


  • 高内存/高 CPU 机器类型中的 XGBoost/ scikit learn 模型:许多数据科学家喜欢 XGBoost 和 scikit learn 模型对于生产预测所具有的简便性和强大性。借助 AIPlatform,只需几下点击即可便捷地部署使用这些框架训练的模型—— 我们将在您选择的硬件上处理服务基础架构的复杂性。

  • 资源指标:维护生产环境中的模型的一个重要部分是了解其性能特点,例如,GPU、CPU、RAM 和网络利用率。这些指标能够帮助制定有关使用什么硬件的决策,来最大限度减少延迟和优化性能。例如,您可以查看一段时间的模型副本总数,以帮助您了解您的自动伸缩模型如何响应流量变化以及如何更改最小副本(minReplicas)以优化成本和/或延迟。对于在 GCE 机器类型中部署的模型,现在可从 Cloud Console 和 Stackdriver Metrics 查看资源指标。

  • 区域端点:我们在三个区域(us-central1、europe-west4 和 asia-east1)引入了新的端点,并通过更好的区域隔离来提高可靠性。在区域端点部署的模型位于指定区域内。

  • VPC 服务控件 (Beta):用户可以定义一个安全范围并且部署仅限访问该范围内或者另一个桥接范围内的资源和服务的在线预测模型。可从该范围内调用 CAIP 在线预测 API。只允许受限网络或者安全范围内的 VM 和服务的内网 IP 地址访问 CMLE 的 API,而不必经过公共互联网。


但预测并非仅止于使用训练好的模型。典型的 ML 工作流涉及分析和了解模型和预测。我们的平台集成了其他重要的 AI 技术以简化您的 ML 工作流并让您更加高效:


  • Explainable AI(可解释的 AI)。要更好地了解您的业务,您需要更好地了解您的模型。Explainable AI 提供有关每个请求的预测的信息,并且仅在 AI Platform 提供。

  • What-if Tool。可视化您的数据集,并更好地理解在平台部署的您的模型的输出。

  • 持续评估。基于对发送至您的模型的请求的正确标注,获得有关您的模型的性能指标。制定决策以基于一段时间的性能状况重新训练或者改进模型。


Waze 数据科学家技术主管 PhilippeAdjiman 指出:“通过为我们提供一个适用于我们的模型的即时、托管和健壮的服务层,[AI Platform Prediction] 显著提高了我们的速度,并使我们能够专注于改进特征和建模。”


所有这些功能均在一个具有企业支持的完全托管的无集群环境中提供 —— 无需支持或者管理您自己的高度可用的 GKE 集群。我们还负责配额管理并负责保护您的模型免受来自客户端发送过多流量导致的过载的影响。我们托管平台的这些功能使您的数据科学家和工程师能够专注于业务问题而不是管理基础设施。


2020-12-10 00:35946

评论

发布
暂无评论
发现更多内容

云算力挖矿平台APP,算力挖矿建设开发

13530558032

架构设计开学第一天

escray

学习 从零开始学架构 架构师预科班

Week 12 命题作业

Jeremy

互联网人必备知识cookie和session认证

架构师修行之路

分布式 身份认证 session Cookie

架构师训练营 -- 第 12 周作业

stardust20

听说,阿里云给它的 OpenAPI 开发了一套编程语言

郭旭东

阿里云 OpenAPI

架构师训练营第十二周作业

Hanson

42图揭秘,「后端技术学些啥」

我是程序员小贱

Week 12 学习总结

Jeremy

Atlassian Team Playbook | 用户体验画布挖掘业务价值

Atlassian

团队管理 敏捷开发 Atlassian

3种 Springboot 全局时间格式化方式,别再写重复代码了

程序员小富

Java springboot

kubernetes node affinity 写法

Geek_f24c45

Kubernetes

2020-08-29-第十二周作业

路易斯李李李

甲方日常 5

句子

工作 随笔杂谈 日常

你真的知道什么是线程安全吗?

老胡爱分享

并发编程 线程 java 并发

Docker 私有镜像仓库的搭建及认证

哈喽沃德先生

Docker 容器 微服务 镜像

大数据解答(一)

dony.zhang

大数据 mapreduce

FlinkX 如何读取和写入 Clickhouse?

Apache Flink

flink

我所在公司和大数据

2流程序员

cookie和session的关系看这一篇就够了

架构师修行之路

session Cookie

oeasy教您玩转linux010201持续输出yes

o

区块链支付新模式开发,USDT支付系统搭建

13530558032

大数据应用场景

dongge

AtlassianTeam Playbook | 用户体验中的移情地图

Atlassian

团队管理 敏捷开发 Atlassian

计算机网络基础(二十二)---传输层-套接字与套接字编程

书旅

TCP 计算机网络 TCP/IP

【Spring Boot系列】之多种依赖集成方式

语霖

2020-08-29-第十二周学习总结

路易斯李李李

Flink SQL FileSystem Connector 分区提交与自定义小文件合并策略

Apache Flink

flink

第九周

Acker飏

微服务架构下的系统集成

码猿外

架构 微服务 系统集成

所按非所得——聊一聊StandHogg漏洞

OPPO安全

安全攻防 安全 安全开发 漏洞

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成_架构_InfoQ精选文章