报名参加CloudWeGo黑客松,奖金直推双丰收! 了解详情
写点什么

亚马逊云科技案例研究:焦点科技

  • 2022-07-26
  • 本文字数:2599 字

    阅读完需:约 9 分钟

亚马逊云科技案例研究:焦点科技

“ 焦点科技 TTNET 站点全站使用亚马逊云科技的服务,台湾站点从传统的租用 IDC 机房的方式迁移上云,人力成本降低了 50%左右。中国制造网 70%以上图片需要回源访问,通过在全球使用 Amazon S3 服务部署四个图片缓存站点,大幅提升了用户访问站点的速度。”

陶延 焦点科技 运维总监

 

焦点科技成立于 1996 年,总部位于南京。公司始终致力于将传统行业与互联网深度融合,先后将互联网引入外贸、保险、企业采购、教育、医疗等多个领域,研发并运营了中国制造网(Made-in-China.com)、开锣(Crov.com)、百卓采购网(Abiz.com)、新一站保险网(xyz.cn)等电子商务平台,以及智慧教育、移动医疗等互联网项目。凭借多年来的不断积累,旗下中国制造网已成为全球采购商寻找中国供应商以及贸易伙伴的重要网络渠道。

全球多站点部署,实现大幅降本提速


中国制造网(Made-in-China.com)创立于 1998 年,由焦点科技开发及运营。作为全链路外贸服务综合平台,中国制造网致力于为中国供应商和海外采购商挖掘全球商机,为双方国际贸易的达成提供一站式外贸服务,现已成为中国外贸企业走向国际市场的重要桥梁和海外采购商采购中国产品的重要网络渠道。在使用亚马逊云科技前,焦点科技的 IT 系统环境在国内使用 IDC 托管服务,国外采用硬件租用服务,并没有使用云。

但由于焦点科技的客户在全球广泛分布,且占页面 70%以上容量的图片都需要回源访问,因此,这样的方式直接影响用户页面访问速度。此外,原 TTNET 站点部署在台湾机房,随着服务器使用年限的增加,硬件故障率不断上升,已进入硬件的淘汰更换阶段。


业务层面如何降低人力、时间、硬件维护等成本;技术层面如何实现系统的全球数据传输,保证用户访问体验,以及如何实现多可用区的部署和负载均衡配置,成为焦点科技亟待解决的问题。在尝试使用第三方 CDN,仍不能解决因距离导致的访问速度下降的问题后,云成了唯一的解决问题途径。


决定上云后,焦点科技对比了多家云服务商。一方面,考虑到亚马逊云科技的基础服务架构多区域可用,且能够满足自身备份容灾的需求;另一方面,考虑到亚马逊云科技原生服务丰富,结合之前使用的Amazon Relational Database Service (Amazon RDS),可减少焦点科技在数据库方向的人力成本投入,最终,焦点科技选择与亚马逊云科技进行合作。


焦点科技和亚马逊云科技的技术服务团队结合具体的业务需求共同商议后,决定采用Amazon Simple Storage Service (Amazon S3) 部署四个图片缓存站点,分别位于法兰克福、孟买、新加坡和圣保罗。

通过在全球使用 Amazon S3 服务,焦点科技实现了站点图片在全球缓存系统的部署,并实现了数据的多点同步,互为备份,同时也大大提升了中国制造网的用户访问速度和平台稳定性。在使用亚马逊云科技后,焦点科技不再需要考虑硬件故障及更换的费用,减少了原 IDC 机房的人力成本。据陶延介绍:“焦点科技 TTNET 站点全站使用亚马逊云科技云服务,台湾站点从传统的租用 IDC 机房的方式迁移上云,人力成本降低了 50%左右。”图 1 是焦点科技基于亚马逊云科技的全站架构示意图,所使用的亚马逊云科技服务包括:Amazon Aurora、Amazon S3、Amazon CloudFront等。



图 1 焦点科技基于亚马逊云科技的全站架构示意图 

尝鲜 Amazon Snowball,短时间完成大规模数据迁移


在使用 Amazon S3 时,焦点科技面临着一个巨大的挑战。有接近 70TB 的大数据需要迁移,并且业务方要求在三个月内必须完成上线。由于时间紧迫,数据规模庞大,整个焦点科技团队承受着非常大的压力。采用网络的方式,不仅技术上行不通,而且没办法按照约定的时间上线。于是,他们找到了亚马逊云科技。在与亚马逊云科技技术团队几番沟通后,焦点科技决定采用Snowball来完成迁移任务,做“吃螃蟹的人”。回忆起那次数据迁移经历,陶延表示:“我记得非常清楚,当时亚马逊云的工程师跟我说,这是国内的用户率先使用 Snowball 服务”


Snowball 是一种边缘计算、数据迁移和边缘存储设备,非常适合完成焦点科技短时间迁移大规模数据的任务。Snowball Edge Storage Optimized 设备同时提供数据块存储和兼容 Amazon S3 的对象存储以及 40 个 vCPU,可以在大约一周内迁移数 TB 的数据。这样的功能非常适合完成焦点科技短时间迁移大规模数据的任务。


亚马逊云科技技术工程师提供的方案是,通过 Snowball 到焦点科技美国的数据中心拷贝数据,完成拷贝后由亚马逊云科技的团队完成运输,将数据导入指定的 Amazon S3 中,然后从美国的 Amazon S3 节点,利用内部专线网络,同步到全球其他的三个站点。


陶延说:“在讨论的时候,我们的内心还是存疑的,因为整个过程涉及数据间的各种导入和转换,我们从来没有这么做过。但是亚马逊云科技的工程师对整个数据导入解决方案非常熟悉,帮助我们与美国数据中心对接,仅 3 天就开始数据导入,仅用了 15 天左右就顺利地完成了全部数据的导入。如果采用网络传输的方式,即使技术上行得通,也至少要一个半月时间” 。

弹性扩容、防盗链,完美适配跨境电商需求 


除中国制造网、TTNET 站点之外,焦点科技旗下还拥有众多子公司,焦点领动云计算就是其中的一家,也是整个焦点科技中最早采用亚马逊云科技的先锋。


焦点领动云计算是一家依托云计算 SaaS 技术,专注为中小企业提供云建站和云营销服务的创新型高科技企业。早在 2017 年,所有系统就已经全部上云。在采用 Amazon S3 前,领动云计算主要利用第三方厂商提供的 CDN 进行边缘节点缓存。但随着业务的扩大,缓存的方式命中率甚至会降低至 30%以下。由于图片数量高达数亿张,如果自己部署、扩容、维护,成本将非常高。经过几番权衡,焦点领动云计算选择与亚马逊云科技进行合作。


焦点领动云计算主要为客户提供跨境电商独立站相关的服务。由于业务特性,经常会遇到黑五、秒杀活动等场景需要临时扩容。通过采用 Amazon EC2、Amazon RDS 等服务,焦点领动云计算实现了容量的自动化弹性伸缩。其扩容速度从原先的数天减少到 30 分钟。


除 Amazon EC2 等服务外,在使用亚马逊云科技的服务过程中,Amazon CloudFront 也令任睿印象非常深刻。焦点领动云计算副总经理任睿表示:“在边缘节点可编程上,亚马逊云科技是行业内非常卓越的”。通过这个功能,焦点领动云计算提供的服务在安全性方面得到了提升,极大地降低了盗链等行为的发生概率。


未来,焦点科技将考虑大规模使用Amazon SageMaker,实现智能推荐方面的功能。 “采用亚马逊云科技的服务后,我们大幅提升了系统的可扩展性、稳定性和用户的访问速度,使用体验令人满意。” 焦点科技运维总监陶延总结道。

2022-07-26 11:004887
用户头像

发布了 1856 篇内容, 共 129.5 次阅读, 收获喜欢 81 次。

关注

评论

发布
暂无评论
发现更多内容

火山引擎DataTester 3大功能升级:聚焦敏捷、智能与易用,帮助企业降本增效

字节跳动数据平台

大数据 AB testing实战 A/B 测试 对比实验

WordPress 使用 TiDB Cloud 替换 MySQL

TiDB 社区干货传送门

迁移 实践案例 版本测评 应用适配

python正则 | python小知识

AIWeker

Python python小知识 三周年连更

4 月 25 日直播预告 | 深入解读 Flink 1.17

Apache Flink

大数据 flink 实时计算

TiDB迁移、升级与案例分享(TiDB v4.0.11 → v6.5.1)

TiDB 社区干货传送门

迁移 版本升级 安装 & 部署 扩/缩容 6.x 实践

新特性解析丨TiDB 资源管控的设计思路与场景解析

TiDB 社区干货传送门

版本测评

maya软件在建模上有什么优势?

Finovy Cloud

maya 3D软件

Neuron 2.4.0发布:体验下一代工业物联网连接和管理

EMQ映云科技

UI 物联网 IoT neuron 企业号 4 月 PK 榜

全平台数据(数据库)管理工具 DataCap 管理 Rainbond 上的所有数据库

北京好雨科技有限公司

数据库 Kubernetes 云原生 rainbond 企业号 4 月 PK 榜

HummerRisk V1.0 开发手册(微服务版)

HummerCloud

开源 微服务 云原生安全

Karmada 多云容器编排引擎支持多调度组,助力成本优化

华为云开发者联盟

云原生 后端 华为云 华为云开发者联盟 企业号 4 月 PK 榜

阿里P8推荐学习的44个微服务架构设计模式,真的太香了!

做梦都在改BUG

Java 架构 微服务 设计模式

迁移prometheus数据

TiDB 社区干货传送门

迁移 实践案例 集群管理

迁移PD坑-cdc任务全部stop

TiDB 社区干货传送门

实践案例 集群管理 故障排查/诊断

tidb-loadbalance 客户端方式软负载均衡配置实践

TiDB 社区干货传送门

数据库架构设计 数据库连接

谷歌 Chrome 正式发布 WebGPU!Orillusion开源倒计时!

Orillusion

开源 WebGL 元宇宙 web3d #WebGPU

ChatGPT 真能带货吗?晒一下 SQL Chat 上线 3 周以来的真实运营数据📊

Bytebase

MySQL sql postgres ChatGPT SQL Server

膜拜!华为内部都在强推的783页大数据处理系统:Hadoop源代码

做梦都在改BUG

Java 大数据 hadoop

Mysql 连接查询

用数据分析的方法去做dba,维护好tidb数据库。

TiDB 社区干货传送门

6.x 实践

微服务 - 注册中心和配置中心(Consul)

做梦都在改BUG

Java 微服务 注册中心 配置中心

chatGPT衣食住行10种场景系列教程(01)chatGPT热点事件汇总+开发利器

非喵鱼

java openai AIGC ChatGPT 三周年连更

零样本文本分类应用:基于UTC的医疗意图多分类,打通数据标注-模型训练-模型调优-预测部署全流程。

汀丶人工智能

人工智能 自然语言处理 深度学习 文本分类 小样本学习

【Linux】之创建普通用户并禁止root用户远程登陆

A-刘晨阳

Linux 三周年连更 用户名

面试官:Redis有什么持久化策略?

做梦都在改BUG

Java redis 缓存 面试 持久化

亚马逊云科技案例研究:焦点科技_架构_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章