写点什么

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成

Robbie Haertel & Bhupesh Chandra

  • 2020-12-10
  • 本文字数:1343 字

    阅读完需:约 4 分钟

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成

机器学习 (ML) 正在转变企业业务运营以及人们的生活方式。无论是查找共乘同伴、推荐产品或者播放列表、识别图像中的对象,还是优化市场营销活动,ML 和预测是这些体验的核心所在。AIPlatform 旨在提供一个世界级的企业就绪平台以托管您的所有变革性的 ML 模型,从而为像您这样致力于利用 ML 改造世界的企业提供支持。


作为我们持续承诺的一部分,我们高兴的宣布全面开通基于 Google Kubernetes Engine (GKE) 后端的 AI Platform Prediction。新的后端架构旨在通过新的硬件选项(Compute Engine 机器类型NVIDIA 加速器)提高可靠性和灵活性、减少开销延迟,改进长尾延迟。除了产品 Beta 测试期间就可用的标准功能(例如,自动伸缩、访问日志以及请求/响应日志)之外,我们还提供几项有助于提升健壮性、灵活性和可用性的更新:


  • 高内存/高 CPU 机器类型中的 XGBoost/ scikit learn 模型:许多数据科学家喜欢 XGBoost 和 scikit learn 模型对于生产预测所具有的简便性和强大性。借助 AIPlatform,只需几下点击即可便捷地部署使用这些框架训练的模型—— 我们将在您选择的硬件上处理服务基础架构的复杂性。

  • 资源指标:维护生产环境中的模型的一个重要部分是了解其性能特点,例如,GPU、CPU、RAM 和网络利用率。这些指标能够帮助制定有关使用什么硬件的决策,来最大限度减少延迟和优化性能。例如,您可以查看一段时间的模型副本总数,以帮助您了解您的自动伸缩模型如何响应流量变化以及如何更改最小副本(minReplicas)以优化成本和/或延迟。对于在 GCE 机器类型中部署的模型,现在可从 Cloud Console 和 Stackdriver Metrics 查看资源指标。

  • 区域端点:我们在三个区域(us-central1、europe-west4 和 asia-east1)引入了新的端点,并通过更好的区域隔离来提高可靠性。在区域端点部署的模型位于指定区域内。

  • VPC 服务控件 (Beta):用户可以定义一个安全范围并且部署仅限访问该范围内或者另一个桥接范围内的资源和服务的在线预测模型。可从该范围内调用 CAIP 在线预测 API。只允许受限网络或者安全范围内的 VM 和服务的内网 IP 地址访问 CMLE 的 API,而不必经过公共互联网。


但预测并非仅止于使用训练好的模型。典型的 ML 工作流涉及分析和了解模型和预测。我们的平台集成了其他重要的 AI 技术以简化您的 ML 工作流并让您更加高效:


  • Explainable AI(可解释的 AI)。要更好地了解您的业务,您需要更好地了解您的模型。Explainable AI 提供有关每个请求的预测的信息,并且仅在 AI Platform 提供。

  • What-if Tool。可视化您的数据集,并更好地理解在平台部署的您的模型的输出。

  • 持续评估。基于对发送至您的模型的请求的正确标注,获得有关您的模型的性能指标。制定决策以基于一段时间的性能状况重新训练或者改进模型。


Waze 数据科学家技术主管 PhilippeAdjiman 指出:“通过为我们提供一个适用于我们的模型的即时、托管和健壮的服务层,[AI Platform Prediction] 显著提高了我们的速度,并使我们能够专注于改进特征和建模。”


所有这些功能均在一个具有企业支持的完全托管的无集群环境中提供 —— 无需支持或者管理您自己的高度可用的 GKE 集群。我们还负责配额管理并负责保护您的模型免受来自客户端发送过多流量导致的过载的影响。我们托管平台的这些功能使您的数据科学家和工程师能够专注于业务问题而不是管理基础设施。


2020-12-10 00:35997

评论

发布
暂无评论
发现更多内容

倒计时1天,苏州,和麦杰聊聊工业数据底座!

麦杰研究院

Java类是如何加载的?

江南一点雨

速卖通获得aliexpress商品详情API接口的开发、应用与收益。

科普小能手

跨境电商 API 接口 API 开发 速卖通API接口 速卖通

为什么Java面试中有高并发经验的会被优先录取?

了不起的程序猿

程序员 后端 高并发 架构师 java面试

英特尔展示互连微缩技术突破性进展

E科讯

目前Java后端就业前景到底怎么样?

了不起的程序猿

程序员 后端 架构师 java面试 Java八股文

矢量动画制作软件Animate 2024 for mac(An2024)激活版 mac/win

iMac小白

如何高效学习Redis?

了不起的程序猿

Java redis 程序员 后端 架构师

vm虚拟机VMware Fusion Pro 12 Mac激活版

iMac小白

我在腾讯云遇到真 AI 了

cloud studio AI应用

从感知到认知:解读人工智能技术的核心突破

天津汇柏科技有限公司

AI 人工智能

电商API接口全解析:常用接口一网打尽

代码忍者

API 接口 pinduoduo API

项目时间线图表如何制作?10个时间线模板案例推荐!

职场工具箱

项目管理 在线白板 时间线 办公软件 绘图软件

Logic Pro X for Mac(苹果专业音频制作软件)中文版

Mac相关知识分享

Alfred 5 for Mac(苹果效率提升工具)中英文版

Mac相关知识分享

子公司增资30亿元,华为继续加码具身智能领域布局!

机器人头条

华为 英伟达 人形机器人 具身智能 optimus

从0到1实现项目Docker编排部署

EquatorCoco

Docker 容器

分享4个超好用的Mac软件下载站,赶紧收藏

iMac小白

2024年牛客网上最火Java面试八股文,面试必备

采菊东篱下

编程 计算机 java面试

AD域管理PowerShell常用命令总结

运维有小邓

PowerShell AD域 IT自动化运维

Microsoft Excel 2019 for Mac(excel电子表格)中文版

Mac相关知识分享

CAD迷你看图 for Mac(强大的cad看图软件)

Mac相关知识分享

Spring AOP基础、快速入门

不在线第一只蜗牛

Java spring 后端

提高预算管理问责制,打造商业伙伴关系

智达方通

企业管理 全面预算管理 财务管理 业务合作 财务规划

Axure RP 10 for Mac(交互式原型设计)v10.0.0.3924中文激活版

iMac小白

AI Platform Prediction(平台预测服务)全面开通,具备更出色的可靠性和 ML 工作流集成_架构_InfoQ精选文章