写点什么

京东如何基于容器打造高性能及效率的大数据平台

  • 2019-08-17
  • 本文字数:632 字

    阅读完需:约 2 分钟

京东如何基于容器打造高性能及效率的大数据平台

QCon北京2018大会上,范振、陈韦廷讲师做了《京东如何基于容器打造高性能及效率的大数据平台》主题演讲,主要内容如下。


演讲简介


容器化后已经成为云端平台的技术趋势,但其性能表现常常是人们却步或怀疑的。这个主题,我们将介绍京东如何透过 Docker 及 Kubernetes 为基底,打造完整且高性能高效率的大数据平台服务。我们将从多个不同的面向让听众深入了解大数据的应用在容器化后对性能和整体服务所带来的影响:从基础的硬件测试包括 fio,iperf 等等,到真实的应用场景测试如 Spark Streaming or Machine Learning 的工作,再到容器化后资源的利用率和效率所带来的影响。

听众受益

  1. 如何基于容器打造高性能高效率的大数据平台;

  2. 透过 fio,iperf…等等简单的测试工具得到平台的基础性能报告及比较;

  3. 真实大数据工作量(包括 Streaming 和机器学习)的比较结果;

  4. 高性能基础设施的打造经验分享。


讲师介绍


范振


京东 软件开发工程师


范振是服务于京东 AI 与大数据部的软件开发工程师。2014 年加入京东,从事基础平台架构、开发工作;反比价项目、机器学习平台项目的负责人;在高性能服务器、大数据领域有着丰富的经验和视野。


陈韦廷


Intel 资深软件工程师


陈韦廷是一名英特尔资深软件工程师。他致力于大数据及云计算相关领域的解决方案达 6 年以上的时间。他的主要工作为大数据在云计算解决方案的研发,效能调优及客户的支持。目前主要专注于大数据在 Docker 及 Container 技术的研究与发展。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/beijing/schedule


2019-08-17 00:005468

评论

发布
暂无评论
发现更多内容

Dify 用户直面会:「Dify x 开源模型」的无限可能 & Baichuan 模型详解

Dify

LLMs LLMOps

独家首发!openEuler 主线集成 LuaJIT RISC-V JIT 技术

openEuler

lua Linux 操作系统 openEuler risc-v

Footprint Analytics 与 COMBO 携手合作,将推动 GameFi 和 Web3 领域的数据驱动革命

Footprint Analytics

区块链 gamefi web3

深度 | 突破AI大模型工业化开发,生成式AI迎来全链条服务商

澳鹏Appen

人工智能 数据标注 大模型 生成式AI LLM

软件测试/测试开发丨文件上传与弹窗处理 学习笔记

测试人

Python 程序员 软件测试 自动化测试 测试开发

Java并发编程(线程池篇)

java易二三

Java 程序员 线程池 计算机 科技

Apache Airflow Spark Provider 反序列化漏洞 (CVE-2023-40195)

墨菲安全

Apache 安全 漏洞情报

Commander One PRO Pack for Mac(双窗口文件管理软件) 3.6.3787简体中文版

mac

苹果mac Windows软件 文件管理器 Commander One PRO Pack

Microsoft Remote Desktop for Mac 远程连接工具推荐

胖墩儿不胖y

远程连接 微软远程桌面连接工具 Mac软件推荐 远程连接工具

Java单元测试及常用语句

java易二三

Java 编程 程序员 计算机

mac电脑推荐显示器校准软件 BetterDisplay Pro 激活下载

mac大玩家j

Mac软件 显示器校准软件 显示器管理

FactoryBean 和它的兄弟SmartFactoryBean!

江南一点雨

Java spring

生成式AI:AI赋能新时代

百度开发者中心

人工智能 生成式AI 文心一言

Footprint Analytics 已加入 Paima Web3 Engine 生态系统,帮助促进 Paima Engine 增长和采用

Footprint Analytics

区块链 web3

MES在人工智能方面的应用

万界星空科技

人工智能 MES系统

谁家面试往死里问 Swagger 啊?

程序员小富

Java springboot

京东如何基于容器打造高性能及效率的大数据平台_QCon_陈韦廷_InfoQ精选文章