点击围观!腾讯 TAPD 助力金融行业研发提效、敏捷转型最佳实践! 了解详情
写点什么

深度迁移学习在 NLP 中的应用及实践

  • 2020-02-12
  • 本文字数:986 字

    阅读完需:约 3 分钟

深度迁移学习在NLP中的应用及实践

AICon 北京 2019 大会上,苏海波讲师做了《深度迁移学习在 NLP 中的应用及实践》主题演讲,主要内容如下。


演讲简介


预训练模型 BERT 基于深度迁移学习的思想,目前已经成为业界 NLP 领域的主流技术。百分点科技在各种 NLP 任务中也广泛使用 BERT 技术,并进行持续的优化和改进,包括采用 Google TPU 解决算力的瓶颈、采用 BERT 和上层神经网络进行联合参数调优、采用 BERT 的各种扩展模型和数据增强进行效果提升等等。另外,我们在 NLP 方面有多年的技术和业务实践经验,服务了几百家企业级客户,并且成功采用深度迁移学习技术解决各个行业客户的 NLP 实际业务问题。本讲座将分享深度迁移学习模型在各种 NLP 任务中(包括智能问答、智能校对、情感分析等)的应用实践,具体内容包括模型的技术原理、Google TPU 的使用经验、模型的参数调优和数据增强等优化技巧,同时展示对应的使用场景、业务案例和应用价值。


提纲


1)NLP 中的深度迁移学习模型原理


2)Google TPU 的实际使用经验


3)模型的参数调优、数据增强等优化实践


4)各种模型的效果对比


5)多个行业客户的使用场景及案例


听众受益点


听众将会了解深度迁移学习在各种 NLP 业务场景中的应用和实践经验,包括如何采用 Google TPU 解决算力的瓶颈、如何采用 BERT 和上层神经网络进行联合参数调优、如何进行数据增强等技术,同时,听众还可以了解多个行业(包括媒体出版、公检法、快消零售等)客户的 NLP 实际使用场景和业务案例。


前言亮点:


1、预训练模型的各种优化和实际使用经验;


2、Google TPU 的实际使用经验;


3、数据增强的实践经验。


听懂我的演讲,需要具备这些知识储备:


1、自然语言处理的技术基础


2、深度学习的技术基础


讲师介绍


苏海波,百分点首席算法科学家。


苏海波,清华大学电子工程系博士,百分点集团首席算法科学家,擅长人工智能领域的自然语言理解、动态知识图谱、深度学习、个性化推荐以及计算广告学技术;多篇论文发表于 GLOBECOM、ICC、IEICE Transactions 等国外顶尖学术会议和期刊;曾就职于新浪微博,负责广告系统的算法效果优化,以及信息流产品整体算法策略的设计及研发;现负责百分点自然语言处理、知识图谱以及智能问答等认知智能方面的算法研发,带领团队成功开发了智能问答、智能校对、智能翻译、AI 李白等多款 NLP 应用产品,并在多个行业的客户中成功落地使用。












完整演讲 PPT 下载链接


https://aicon.infoq.cn/2019/beijing/schedule


2020-02-12 19:30467

评论

发布
暂无评论
发现更多内容

不得利用算法从事垄断行为:防范利用算法和大数据进行杀熟

石头IT视角

50行代码串行Promise,koa洋葱模型原来是这么实现?

若川

JavaScript 前端 Node Jest koa2

从小到大为何一谈学习就愁眉苦脸

宇宙之一粟

学习 6月月更

面试官问:JS的this指向

若川

JavaScript 前端 前端开发

剑指 Offer 65. 不用加减乘除做加法

未见花闻

6月月更

K8S学习笔记--《容器化的应用:会了这些你就是Docker高手》

IT蜗壳-Tango

IT蜗壳教学 6月月更

【使用Python实现算法】01 语言特性

★忆先★

Python 算法 算法题

COSCon'22 讲师征集令

开源社

开源

去哪儿网(Qunar) DevOps 实践分享

laofo

DevOps cicd 研发效能 持续交付 工程效率

面对 this 指向丢失,尤雨溪在 Vuex 源码中是怎么处理的

若川

JavaScript Vue 前端 前端开发 vuex

SpringBoot-入门

zarmnosaj

6月月更

初学者也能看懂的 Vue2 源码中那些实用的基础工具函数

若川

JavaScript Vue 前端 前端开发

深入理解 Jetpack Compose SlotTable 系统

fundroid

android Compose android jetpack SlotTable gap buffer

云厂商为什么都在冲这个KPI?

脑极体

Java Core「18」JCF 及常见问题

Samson

学习笔记 Java core 6月月更

攻防演练中蓝队针对攻击方式复盘总结

穿过生命散发芬芳

6月月更 攻防演练

面试官问:能否模拟实现JS的new操作符

若川

JavaScript 前端 前端开发

Java中数组参考指南

okokabcd

Java’

模块化开发

Jason199

js 模块化 6月月更

JavaScript 对象所有API解析

若川

JavaScript 前端 前端开发

Prometheus 2.35.0 新特性

耳东@Erdong

release Prometheus 6月月更

云原生运维文章计划

boaker

运维 云原生

怎样能低成本构建一个电商平台

Geek_99967b

小程序 电商

声网 VQA:将实时互动中未知的视频画质用户主观体验变可知

声网

人工智能 音视频

每次启动项目的服务,电脑竟然乖乖的帮我打开了浏览器,100行源码揭秘!

若川

JavaScript 前端 前端开发 Node

Flutter SliverAppBar全解析,你要的效果都在这了!

yechaoa

flutter android 6月月更 SliverAppBar

面试官问:JS的继承

若川

JavaScript 前端 前端开发

Scala 基础 (三):运算符和流程控制

百思不得小赵

scala 大数据 6月月更

为什么 Vue2 this 能够直接获取到 data 和 methods,源码揭秘

若川

JavaScript Vue 前端 前端开发 源码解析

要搞清楚什么是同步,异步,串行,并行,并发,进程,线程,协程

乌龟哥哥

6月月更

【使用Python实现算法】02 原生类型与内置函数

★忆先★

Python 算法题

深度迁移学习在NLP中的应用及实践_AICon_苏海波_InfoQ精选文章