1 月 25 日,微软在 GitHub 上发布了其深度学习工具包—— Computational Network Toolkit(简称 CNTK)。
CNTK 是一个统一的深度学习工具包,它通过一个有向图将神经网络描述为一系列计算步骤。在有向图中,叶节点表示输入值或网络参数,边表示输入之上的矩阵运算。CNTK 使得实现和组合前馈型神经网络 DNN、卷积神经网络(CNN)和循环神经网络 (RNNs/LSTMs) 变得非常容易。实现了支持跨多个 GPU 和服务器自动分化和并行化的随机梯度下降(SGD)学习。
微软首席语音科学家黄学东提到,已经证明 CNTK 比开发者在创建语音和图像识别的深度学习模型时常用的其他四个工具包性能要好,具体如下图所示。
在快速变化的深度学习领域,这种性能优势非常重要,因为很多复杂的深度学习任务往往要花掉数周时间。
CNTK 的优势是,不管是一台计算机,还是大规模 GPU 集群,都能使用。在内部,微软是在使用了 GPU 的一组强大的计算机上使用 CNTK。
Hacker News 上有人评论说:
先是 TensorFlow,然后是百度的 Warp-CTC,现在有了微软的 CNTK,对于开源机器学习而言,真是一个激动人心的时代。”
InfoQ 曾报道过百度的 Warp-CTC ,感兴趣的读者可以查阅。
更多内容推荐
填问卷抽大奖,中奖绝缘体的跨年福利快来领取!
作为科技行业的扛把子,相信无论你是开发者还是微软的忠实用户,都应该对 Ignite China 大会早有耳闻,作为 IT 行业盛会,微软每年都会发布前沿科技创新、分享实践经验。
2021-12-30
16|ChatGPT:是什么让 LLM 走向舞台中央?
在今天的课程中,我将带你深入理解 OpenAI 是如何逐步“试”出ChatGPT 的,让你从这个经典的颠覆式创新中得到一些启示。
2023-09-15
13|前浪 DALL-E 2:帮你魔改经典画作
我们只有真正理解了DALL-E 2,才算拿到了进入AI绘画世界的钥匙。
2023-08-16
从 Microsoft Build ,我们看到了开发者的新机遇
身处智能化的时代,无论是企业还是开发者,大家都额外关注如何能够把握机遇,迎接时代浪潮。
如虎添翼!微软 OneNote 迎来新利器!
程序员宝藏库:https://github.com/Jackpopc/CS-Books-Store
2022-11-04
谈谈对微软 Dapr 的理解
Dapr的全称是 “Distributed Application Runtime”,即 “分布式应用运行时”。Dapr 是一个开源项目,由微软发起,目前已加入CNCF孵化器项目。
2021-12-08
深度学习先驱者 Geoffrey Hinton 发布新深度学习算法
多伦多大学教授兼谷歌大脑工程研究员Geoffrey Hinton近期发布的论文中提出了一种神经网络训练技术,前向-前向算法(FF),用两次通过网络的前向数据取代反向传播来更新模型权重。
微软提出通用解码器 X-Decoder,支持图像分割和语言分词
微软提出通用解码器 X-Decoder,支持图像分割和语言分词
2023-01-09
14|挑战者 Imagen:为什么会后来居上?
今天这一讲我们来探讨Imagen背后的技术。Imagen这个AI绘画模型比DALL-E 2晚一个月推出,在效果上明显优于DALL-E 2,颇有后来居上的气势。
2023-08-18
04|游目骋怀:工业级的大模型系统强在哪?
工业级 AI 大模型系统最鲜明的一个特征,就是针对自己的业务场景,基于数据驱动的业务系统框架去定制大模型。
2023-08-15
Microsoft Remote Desktop mac(微软远程连接软件) 中文版软件介绍
Microsoft Remote Desktop mac是一款远程桌面连接工具,它可以让用户通过互联网远程连接到其他计算机,并在远程计算机上访问本地文件、应用程序和网络资源。
2023-08-20
揭秘 ChatGPT 背后天价超算!上万颗英伟达 A100,烧光微软数亿美元
ChatGPT能成为如今火遍全球的顶流模型,少不了背后超强的算力。 数据显示,ChatGPT的总算力消耗约为3640PF-days(即假如每秒计算一千万亿次,需要计算3640天)。 那么,作为依托的那台微软专为OpenAI打造的超级计算机,又是如何诞生的呢?
2023-03-22
GPT-4 将于下周发布,微软德国 CEO:不会用客户数据训练模型
下周,GPT-4就要来了。
开篇词|带你亲证 AI 应用开发的“奇点”时刻
面向 AI 时代,所有产品都值得用大模型重新升级。
2023-09-11
阿里等大厂豪掷 50 亿美元买英伟达芯片;寒武纪被爆裁员,硬件部分只保留少数员工;小米曝光 64 亿参数 AI 大模型|AI 一周资讯
这周又有大事儿了。
PaddleBox:百度基于 GPU 的超大规模离散 DNN 模型训练解决方案
本文介绍百度基于GPU的超大规模离散DNN训练框架PaddleBox。PaddleBox 打造了业界首个层次化GPU稀疏参数服务器,结合高效的流水线调度架构,以及多机多卡的分布式架构,支持单机10TB级/多机数十TB模型训练,具备低成本、高性能、高稳定、灵活易用的多重优势。
2022-11-01
美股科技巨头新变局:微软超苹果重回市值第一
微软市值超过苹果,成为全球市值最高的上市公司。
03|原型系统:开源工具自建 AI 大模型底座
这节课的重点是如何使用 Langchain 将你的 LLM 应用组合起来,以及如何快速使用 Flowise 零代码平台构建你的应用。
2023-08-15
英伟达发布第三季度财报:营收近 60 亿美元,将与微软共同开发 AI 超级计算机
InfoQ 获悉,11 月 16 日,英伟达正式发布第三季度财务报告。数据显示,截至2022年10月30日,第三季度收入为59.3亿美元,较去年同期下降17%,较上一季度下降12%。
特尔携手微软发挥边云协同势能,推动 AI 规模化部署
2022年6月23日,北京——今日,英特尔携手微软在线上举办了2022中国AI开发者峰会。英特尔OpenVINO™开发者生态高级总监Matthew Formica、微软亚洲研究院邱锂力副院长,以及来自英特尔、英特尔AI开发者社区、微软人工智能和物联网实验室、微软、EdgeX Foundry
2022-06-24
略懂技术的运营同学。
推荐阅读
17|HuggingFace 与 Pre-trained Model:借助 AI 社区的力量
2023-10-25
比特币有助减少腐败;微软 Copilot 每月赔 20 美元;AIGC 明年会“洗冷水澡”丨 RTE 开发者日报 Vol.64
2023-10-11
第 5 章 人工智能简史
2023-12-01
微软发布两款自研 5nm 芯片,AI 和云计算两大市场都想要!网友:科技巨头从来不做选择题
06|调用模型:使用 OpenAI API 还是微调开源 Llama2/ChatGLM?
2023-09-18
微软曝光!ChatGPT 真实参数只有 200 亿?大模型评测基准已经失去意义?丨 RTE 开发者日报 Vol.76
2023-11-02
微软首款 AI 芯片代号“雅典娜”;马斯克四年内将让“星舰”上火星丨 RTE 开发者日报 Vol.61
2023-10-08
电子书
大厂实战PPT下载
换一换 王峰 | Jina AI 高级算法工程师、Jina 核心贡献者
张松然 | 阿里云 云通信架构师
雪梅 | 雪梅 前阿里技术总监 程序员职业规划手册
推荐阅读
17|HuggingFace 与 Pre-trained Model:借助 AI 社区的力量
2023-10-25
比特币有助减少腐败;微软 Copilot 每月赔 20 美元;AIGC 明年会“洗冷水澡”丨 RTE 开发者日报 Vol.64
2023-10-11
第 5 章 人工智能简史
2023-12-01
微软发布两款自研 5nm 芯片,AI 和云计算两大市场都想要!网友:科技巨头从来不做选择题
06|调用模型:使用 OpenAI API 还是微调开源 Llama2/ChatGLM?
2023-09-18
微软曝光!ChatGPT 真实参数只有 200 亿?大模型评测基准已经失去意义?丨 RTE 开发者日报 Vol.76
2023-11-02
微软首款 AI 芯片代号“雅典娜”;马斯克四年内将让“星舰”上火星丨 RTE 开发者日报 Vol.61
2023-10-08
评论