何晓冬

京东集团技术副总裁、IEEE Fellow、京东科技智能服务业务部负责人

何晓冬,IEEE Fellow、京东集团副总裁、京东探索研究院院长、京东科技智能服务业务部负责人。何晓冬博士二十多年来从事自然语言处理和语言与视觉多模态智能等人工智能领域的研究,是本领域世界级科学家之一,吴文俊人工智能杰出贡献奖获得者。他发表了200多篇论文,引用4万余次,并多次获得ACL杰出论文奖、IEEE SPS Best Paper等奖项。2018年加入京东后,他领导团队聚焦智能技术的前沿突破及产品创新,打造了 “言犀”人工智能应用平台,孵化了京东智能客服、交互式营销业务,大规模应用在政务、医疗、零售、金融等行业。

人物经历
何晓冬本科毕业于清华大学,硕士毕业于中国科学院,后赴美国密苏里大学哥伦比亚分校学习,获得博士学位后加入微软。从2012年至今任西雅图的华盛顿大学电机与计算机系兼任教授、博士生导师。
二十载学术生涯中,何晓冬的研究贯穿语音识别、语言理解、图像与语言多模态信息处理等领域。
何晓冬曾就职于美国微软雷德蒙研究院十余年,担任首席研究员及深度学习技术中心负责人。
2018年加入京东至今,现任京东集团副总裁、京东探索研究院院长。加盟京东后,何晓冬一方面在北京、成都、硅谷等地组建语音语义与智能人机交互技术实验室,聚焦多模态人机对话等前沿课题,另一方面组建智能客服产品部门推动实验室产出的前沿技术落地到大规模产业应用。
基于其对自然语言理解和语言与视觉多模态信息处理的贡献,2018年底何晓冬当选IEEE Fellow。
社会任职
何晓冬是IEEE Fellow,京东集团技术副总裁,京东人工智能研究院常务副院长,深度学习及语音和语言实验室的负责人。他还担任香港中文大学(深圳),华盛顿大学(西雅图),和同济大学(上海)兼职教授,以及中央美术学院(北京)的荣誉教授。在加入京东集团之前,他曾担任微软雷德蒙德研究院深度学习技术中心的首席研究员和负责人。他的研究主要集中在人工智能领域,包括深度学习,自然语言处理,语音识别,计算机视觉,信息检索和多模态智能。他发表100余篇论文, 谷歌学术统计引用数过万次。他的工作包括深层结构化语义模型(DSSM),分层注意力网络(HAN),AttnGAN等,广泛应用于语言,视觉,IR和知识表示等任务。他于2019年入选国际电气和电子工程师协会院士(IEEE Fellow)。他于1996年获得清华大学(北京)学士学位,1999年获得中国科学院(北京)硕士学位,2003年获得美国密苏里大学哥伦比亚分校博士学位。
学术贡献
何晓冬发表了200多篇论文,引用4万余次。多次获得ACL杰出论文奖、IEEE SPS最佳论文奖等奖项。提出多个基础方法和经典模型,推动和启发了众多国内外科技创新:
2013年,提出了深度结构化语义模型DSSM(Deep Structured Semantic Models),将多样化的自然语言所表达的含义表示成为一个多维度连续语义空间中的向量,以此来帮助搜索、推荐、分类、问答等实际应用。时至今日,几乎所有做搜索推荐场景的大厂仍在使用DSSM及其衍生模型。
2014年,他与深度学习三巨头之一Yoshua Bengio等人给IEEE TASLP投稿的《Using RNN for Slot Filling in Spoken Language Understanding》,提出了基于深度循环神经网络的口语理解模型,为口语理解领域带来突破。
2018年的时候,何晓冬就提出了语言 - 视觉深度多模态语义模型(DMSM),以及在 2018 年进一步提出了现在业界广为采用的 Bottom-Up and Top-Down attention(BUTD)跨模态注意力机制,单篇引用量已超过 4128 次,一直推动和见证了多模态技术的实用化。
2018年,何晓冬与沈向洋、李笛等人在中国工程院刊FITEE发表论文《From Eliza to XiaoIce: Challenges and Opportunities with Social Chatbots》,深度探讨了构建先进人机对话系统的设计原则,获得业界广泛关注,并获得2018年度优秀论文奖。
产业贡献
何晓冬团队研发的语言和视觉多模态智能机器人三部曲,包括Caption Bot、Attentive VQA、Drawing Bot,为行业贡献了大量的技术实例。其研究成果对微软产品如 Office、Seeing AI、搜索及广告、智能云服务、微软小冰等有着重要价值。
加入京东后,他先后在北京、成都、硅谷等地组建智能人机交互技术实验室,并组建了智能客服产品部推动技术的产业化落地。他领导团队研发了业界第一个大规模商用情感智能客服系统,服务超过5亿用户,并在多个行业落地大型企业标杆案例与成功实践。
何晓冬延续了此前在对话式 AI、多模态等领域的研究,牵头搭建了京东内部大规模对话式 AI 系统的搭建工作,聚焦于To B为主的真实场景的具体问题和任务驱动型的对话。并带领团队将一系列研究成果迅速转化,应用在京东的智能服务业务中,包括知识融合的预训练模型 K-PLUG、长文本阅读 Read-over-Read 模型、数值推理 OPERA 模型、时序知识图谱 TSQA 模型等。
何晓冬和团队研发了产业界第一个大规模商用的情感智能客服系统—言犀,涵盖客户服务、营销导购、流程自动化等客户全生命周期管理与服务的智能化解决方案。言犀是业界首个大规模商用的情感机器人,依托前沿AI技术,实现了从文字、语音到多模态,从对话智能到情感智能的多元交互模式,通过“在线咨询机器人”、“语音外呼”、“语音导航”、“语音应答”、“数字人”等在内的产品及服务矩阵,在京东内部,言犀早在强有力的研发力量与京东无可比拟的场景优势加持下,言犀有足够的底气,打磨出业内更出色的智能服务系统——服务5.5亿用户,覆盖近1000万自营商品SKU,沉淀超过3000万知识点、7*24小时全渠道秒级响应能力,识别率超过95%。
2022年,何晓冬带领团队推出言犀2.0,伴随着产业数字化的浪潮,作为京东集团最佳实践的言犀也将自身成熟的能力开放出来,为政务、金融、零售、制造、物流、医疗等千行百业,提供以用户为中心的、涵盖客户服务、营销导购、流程自动化的整体智能化解决方案,助力政企客户实现服务和营销数智化转型升级。
在政务行业,推出了京东云智能政务热线解决方案,以科技力量助力全国各地政务热线数智化升级。
在金融行业,江南农商银行与京东智能客服言犀共同合作推出的VTM数字员工正式“上岗“,是全国第一个能独立、全程办理银行真实交易的数字人。
在制造行业,京东云与中联重科联手打造的业内首个“泵送机械AI专家诊断系统”,依托京东智能客服团队成熟的技术能力,以人工智能技术为驱动实现工业自动化与智能化,极大提升了设备故障诊断效率,有效保障了客户施工的连续性,每年可帮助售后团队节省故障排查时间4200小时,单次设备维修时间缩短了20%以上,为单产品线创造间接经济效益超过230万元。
2023年7月,何晓冬所带领研发的言犀大模型正式对外发布,言犀大模型融合了70%的通用数据与30%京东数智供应链原生数据,具有“更高产业属性、更强泛化能力、更多安全保障”的优势,致力于面向知识密集型、任务型产业场景,解决真实产业问题。
所获荣誉
ACL杰出论文奖
IEEE SPS最佳论文奖
2019年获得多跳推理机器阅读理解(Wikihop)第一名(Tu, et al. ACL 2019)
2020年文档级关系抽取DocRED第一名(Zhou, et al. AAAI21)
2021年获得可解释的多跳推理机器阅读理解(HotpotQA)第一名(Tu, et al. AAAI 2020)
2021年获得多轮对话式机器阅读理解(QuAC)第一名(Zhao, et al. EMNLP 2021)
2022年离散推理型阅读理解榜单DROP Leaderboard冠军
2023年5月6日,中国智能科学技术最高奖“吴文俊人工智能科学技术奖”颁奖典礼在北京举行,60个获奖项目及个人受到表彰奖励。京东集团副总裁、京东探索研究院院长何晓冬获颁“吴文俊人工智能杰出贡献奖”。
人物观点
产业AI的核心是服务实体行业,在复杂、真实场景中最大化AI价值。
何晓冬指出:“在多年的技术落地实践中,我们意识到,用AI来提升、赋能传统实体行业才能最大化影响力和应用价值,传统实体行业的体量足够大,提升1%就能创造巨大的应用价值。”
首先,传统实体产业体量大,新增价值更显规模化效应。传统实体行业是国民经济的重要支柱,已积累的大规模数据可以为Al嵌入提供充足燃料,简单提升即可创造巨大价值;其次,传统产业能带动技术升级的生态链裂变,传统行业已经形成规模化上下游生态,技术变革将牵动整体生态链价值提升。
除此之外,传统实体产业转型积淀深、门槛高、场景复杂,企业需求各异,定制化程度高。传统实体行业各有特点,需要采集数据、清洗数据等,一个综合性AI系统迁移成本低、适用能力强,更核心的能够产生一些实际的价值。
产业智能时代,企业应坚定长期投入
相比于通用大模型,何晓冬更看好有产业应用价值的大模型,强调“布局大模型应结合具体场景,从产业价值出发”。
“大模型应该产业化才能产生价值,而且在落地产业的时候必然会遇到很多问题,这样才能不断迭代进步。”何晓冬表示。在他看来,“企业拥抱大模型产业机遇,还是要坚持长期主义,坚定长期投入。”
下一步AGI将走向多模态和具身智能
“理论上视觉信息中每个物体和物体之间的关系动作,甚至包括颜色、姿态、空间关系以及时间关系,都蕴含着大量的知识。但目前的知识网络还是在文字层面,通过调用一个简单的API实现的多模态,并没有真正实现语言信息和视觉信息的融合,所以从智能涌现角度来说,深层次融合的程度”,何晓冬表示。
何晓冬预测,也许明年或下一代的GPT大模型就能够做到。多模态的智能涌现一旦突破了,将会有一个很惊艳的效果。“自然语言处理是有语义的,但其实视觉也有语义,从视觉最底层的像素,再往上构造成物体,再往上就变成语义,然后再往上就是整体的融合。我感觉是如果能达到那一步应该会有很多的想象空间,可能真的能够把整个宇宙数字化了。”
全国各地天气预报查询

上海市

  • 市辖区
  • 云南省

  • 临沧市
  • 云南省

  • 丽江市
  • 云南省

  • 保山市
  • 云南省

  • 大理白族自治州
  • 云南省

  • 德宏傣族景颇族自治州
  • 云南省

  • 怒江傈僳族自治州
  • 云南省

  • 文山壮族苗族自治州
  • 云南省

  • 昆明市
  • 云南省

  • 昭通市
  • 云南省

  • 普洱市
  • 云南省

  • 曲靖市
  • 云南省

  • 楚雄彝族自治州
  • 云南省

  • 玉溪市
  • 云南省

  • 红河哈尼族彝族自治州
  • 云南省

  • 西双版纳傣族自治州
  • 云南省

  • 迪庆藏族自治州
  • 内蒙古自治区

  • 乌兰察布市
  • 内蒙古自治区

  • 乌海市
  • 内蒙古自治区

  • 兴安盟
  • 内蒙古自治区

  • 包头市
  • 内蒙古自治区

  • 呼伦贝尔市
  • 内蒙古自治区

  • 呼和浩特市
  • 内蒙古自治区

  • 巴彦淖尔市
  • 内蒙古自治区

  • 赤峰市
  • 内蒙古自治区

  • 通辽市
  • 内蒙古自治区

  • 鄂尔多斯市
  • 内蒙古自治区

  • 锡林郭勒盟
  • 内蒙古自治区

  • 阿拉善盟
  • 北京市

  • 市辖区
  • 吉林省

  • 吉林市
  • 吉林省

  • 四平市
  • 吉林省

  • 延边朝鲜族自治州
  • 吉林省

  • 松原市
  • 吉林省

  • 白城市
  • 吉林省

  • 白山市
  • 吉林省

  • 辽源市
  • 吉林省

  • 通化市
  • 吉林省

  • 长春市
  • 四川省

  • 乐山市
  • 四川省

  • 内江市
  • 四川省

  • 凉山彝族自治州
  • 四川省

  • 南充市
  • 四川省

  • 宜宾市
  • 四川省

  • 巴中市
  • 四川省

  • 广元市
  • 四川省

  • 广安市
  • 四川省

  • 德阳市
  • 四川省

  • 成都市
  • 四川省

  • 攀枝花市
  • 四川省

  • 泸州市
  • 四川省

  • 甘孜藏族自治州
  • 四川省

  • 眉山市
  • 四川省

  • 绵阳市
  • 四川省

  • 自贡市
  • 四川省

  • 资阳市
  • 四川省

  • 达州市
  • 四川省

  • 遂宁市
  • 四川省

  • 阿坝藏族羌族自治州
  • 四川省

  • 雅安市
  • 天津市

  • 市辖区
  • 宁夏回族自治区

  • 中卫市
  • 宁夏回族自治区

  • 吴忠市
  • 宁夏回族自治区

  • 固原市
  • 宁夏回族自治区

  • 石嘴山市
  • 宁夏回族自治区

  • 银川市
  • 安徽省

  • 亳州市
  • 安徽省

  • 六安市
  • 安徽省

  • 合肥市
  • 安徽省

  • 安庆市
  • 安徽省

  • 宣城市
  • 安徽省

  • 宿州市
  • 安徽省

  • 池州市
  • 安徽省

  • 淮北市
  • 安徽省

  • 淮南市
  • 安徽省

  • 滁州市
  • 安徽省

  • 芜湖市
  • 安徽省

  • 蚌埠市
  • 安徽省

  • 铜陵市
  • 安徽省

  • 阜阳市
  • 安徽省

  • 马鞍山市
  • 安徽省

  • 黄山市
  • 山东省

  • 东营市
  • 山东省

  • 临沂市
  • 山东省

  • 威海市
  • 山东省

  • 德州市
  • 山东省

  • 日照市
  • 山东省

  • 枣庄市
  • 山东省

  • 泰安市
  • 山东省

  • 济南市
  • 山东省

  • 济宁市
  • 山东省

  • 淄博市
  • 山东省

  • 滨州市
  • 山东省

  • 潍坊市
  • 山东省

  • 烟台市
  • 山东省

  • 聊城市
  • 山东省

  • 菏泽市
  • 山东省

  • 青岛市
  • 山西省

  • 临汾市
  • 山西省

  • 吕梁市
  • 山西省

  • 大同市
  • 山西省

  • 太原市
  • 山西省

  • 忻州市
  • 山西省

  • 晋中市
  • 山西省

  • 晋城市
  • 山西省

  • 朔州市
  • 山西省

  • 运城市
  • 山西省

  • 长治市
  • 山西省

  • 阳泉市
  • 广东省

  • 东莞市
  • 广东省

  • 中山市
  • 广东省

  • 云浮市
  • 广东省

  • 佛山市
  • 广东省

  • 广州市
  • 广东省

  • 惠州市
  • 广东省

  • 揭阳市
  • 广东省

  • 梅州市
  • 广东省

  • 汕头市
  • 广东省

  • 汕尾市
  • 广东省

  • 江门市
  • 广东省

  • 河源市
  • 广东省

  • 深圳市
  • 广东省

  • 清远市
  • 广东省

  • 湛江市
  • 广东省

  • 潮州市
  • 广东省

  • 珠海市
  • 广东省

  • 肇庆市
  • 广东省

  • 茂名市
  • 广东省

  • 阳江市
  • 广东省

  • 韶关市
  • 广西壮族自治区

  • 北海市
  • 广西壮族自治区

  • 南宁市
  • 广西壮族自治区

  • 崇左市
  • 广西壮族自治区

  • 来宾市
  • 广西壮族自治区

  • 柳州市
  • 广西壮族自治区

  • 桂林市
  • 广西壮族自治区

  • 梧州市
  • 广西壮族自治区

  • 河池市
  • 广西壮族自治区

  • 玉林市
  • 广西壮族自治区

  • 百色市
  • 广西壮族自治区

  • 贵港市
  • 广西壮族自治区

  • 贺州市
  • 广西壮族自治区

  • 钦州市
  • 广西壮族自治区

  • 防城港市
  • 新疆维吾尔自治区

  • 乌鲁木齐市
  • 新疆维吾尔自治区

  • 伊犁哈萨克自治州
  • 新疆维吾尔自治区

  • 克孜勒苏柯尔克孜自治州
  • 新疆维吾尔自治区

  • 克拉玛依市
  • 新疆维吾尔自治区

  • 博尔塔拉蒙古自治州
  • 新疆维吾尔自治区

  • 吐鲁番市
  • 新疆维吾尔自治区

  • 和田地区
  • 新疆维吾尔自治区

  • 哈密市
  • 新疆维吾尔自治区

  • 喀什地区
  • 新疆维吾尔自治区

  • 塔城地区
  • 新疆维吾尔自治区

  • 巴音郭楞蒙古自治州
  • 新疆维吾尔自治区

  • 昌吉回族自治州
  • 新疆维吾尔自治区

  • 自治区直辖县级行政区划
  • 新疆维吾尔自治区

  • 阿克苏地区
  • 新疆维吾尔自治区

  • 阿勒泰地区
  • 江苏省

  • 南京市
  • 江苏省

  • 南通市
  • 江苏省

  • 宿迁市
  • 江苏省

  • 常州市
  • 江苏省

  • 徐州市
  • 江苏省

  • 扬州市
  • 江苏省

  • 无锡市
  • 江苏省

  • 泰州市
  • 江苏省

  • 淮安市
  • 江苏省

  • 盐城市
  • 江苏省

  • 苏州市
  • 江苏省

  • 连云港市
  • 江苏省

  • 镇江市
  • 江西省

  • 上饶市
  • 江西省

  • 九江市
  • 江西省

  • 南昌市
  • 江西省

  • 吉安市
  • 江西省

  • 宜春市
  • 江西省

  • 抚州市
  • 江西省

  • 新余市
  • 江西省

  • 景德镇市
  • 江西省

  • 萍乡市
  • 江西省

  • 赣州市
  • 江西省

  • 鹰潭市
  • 河北省

  • 保定市
  • 河北省

  • 唐山市
  • 河北省

  • 廊坊市
  • 河北省

  • 张家口市
  • 河北省

  • 承德市
  • 河北省

  • 沧州市
  • 河北省

  • 石家庄市
  • 河北省

  • 秦皇岛市
  • 河北省

  • 衡水市
  • 河北省

  • 邢台市
  • 河北省

  • 邯郸市
  • 河南省

  • 三门峡市
  • 河南省

  • 信阳市
  • 河南省

  • 南阳市
  • 河南省

  • 周口市
  • 河南省

  • 商丘市
  • 河南省

  • 安阳市
  • 河南省

  • 平顶山市
  • 河南省

  • 开封市
  • 河南省

  • 新乡市
  • 河南省

  • 洛阳市
  • 河南省

  • 漯河市
  • 河南省

  • 濮阳市
  • 河南省

  • 焦作市
  • 河南省

  • 省直辖县级行政区划
  • 河南省

  • 许昌市
  • 河南省

  • 郑州市
  • 河南省

  • 驻马店市
  • 河南省

  • 鹤壁市
  • 浙江省

  • 丽水市
  • 浙江省

  • 台州市
  • 浙江省

  • 嘉兴市
  • 浙江省

  • 宁波市
  • 浙江省

  • 杭州市
  • 浙江省

  • 温州市
  • 浙江省

  • 湖州市
  • 浙江省

  • 绍兴市
  • 浙江省

  • 舟山市
  • 浙江省

  • 衢州市
  • 浙江省

  • 金华市
  • 海南省

  • 三亚市
  • 海南省

  • 三沙市
  • 海南省

  • 儋州市
  • 海南省

  • 海口市
  • 海南省

  • 省直辖县级行政区划
  • 湖北省

  • 十堰市
  • 湖北省

  • 咸宁市
  • 湖北省

  • 孝感市
  • 湖北省

  • 宜昌市
  • 湖北省

  • 恩施土家族苗族自治州
  • 湖北省

  • 武汉市
  • 湖北省

  • 省直辖县级行政区划
  • 湖北省

  • 荆州市
  • 湖北省

  • 荆门市
  • 湖北省

  • 襄阳市
  • 湖北省

  • 鄂州市
  • 湖北省

  • 随州市
  • 湖北省

  • 黄冈市
  • 湖北省

  • 黄石市
  • 湖南省

  • 娄底市
  • 湖南省

  • 岳阳市
  • 湖南省

  • 常德市
  • 湖南省

  • 张家界市
  • 湖南省

  • 怀化市
  • 湖南省

  • 株洲市
  • 湖南省

  • 永州市
  • 湖南省

  • 湘潭市
  • 湖南省

  • 湘西土家族苗族自治州
  • 湖南省

  • 益阳市
  • 湖南省

  • 衡阳市
  • 湖南省

  • 邵阳市
  • 湖南省

  • 郴州市
  • 湖南省

  • 长沙市
  • 甘肃省

  • 临夏回族自治州
  • 甘肃省

  • 兰州市
  • 甘肃省

  • 嘉峪关市
  • 甘肃省

  • 天水市
  • 甘肃省

  • 定西市
  • 甘肃省

  • 平凉市
  • 甘肃省

  • 庆阳市
  • 甘肃省

  • 张掖市
  • 甘肃省

  • 武威市
  • 甘肃省

  • 甘南藏族自治州
  • 甘肃省

  • 白银市
  • 甘肃省

  • 酒泉市
  • 甘肃省

  • 金昌市
  • 甘肃省

  • 陇南市
  • 福建省

  • 三明市
  • 福建省

  • 南平市
  • 福建省

  • 厦门市
  • 福建省

  • 宁德市
  • 福建省

  • 泉州市
  • 福建省

  • 漳州市
  • 福建省

  • 福州市
  • 福建省

  • 莆田市
  • 福建省

  • 龙岩市
  • 西藏自治区

  • 山南市
  • 西藏自治区

  • 拉萨市
  • 西藏自治区

  • 日喀则市
  • 西藏自治区

  • 昌都市
  • 西藏自治区

  • 林芝市
  • 西藏自治区

  • 那曲市
  • 西藏自治区

  • 阿里地区
  • 贵州省

  • 六盘水市
  • 贵州省

  • 安顺市
  • 贵州省

  • 毕节市
  • 贵州省

  • 贵阳市
  • 贵州省

  • 遵义市
  • 贵州省

  • 铜仁市
  • 贵州省

  • 黔东南苗族侗族自治州
  • 贵州省

  • 黔南布依族苗族自治州
  • 贵州省

  • 黔西南布依族苗族自治州
  • 辽宁省

  • 丹东市
  • 辽宁省

  • 大连市
  • 辽宁省

  • 抚顺市
  • 辽宁省

  • 朝阳市
  • 辽宁省

  • 本溪市
  • 辽宁省

  • 沈阳市
  • 辽宁省

  • 盘锦市
  • 辽宁省

  • 营口市
  • 辽宁省

  • 葫芦岛市
  • 辽宁省

  • 辽阳市
  • 辽宁省

  • 铁岭市
  • 辽宁省

  • 锦州市
  • 辽宁省

  • 阜新市
  • 辽宁省

  • 鞍山市
  • 重庆市

  • 重庆市

  • 市辖区
  • 陕西省

  • 咸阳市
  • 陕西省

  • 商洛市
  • 陕西省

  • 安康市
  • 陕西省

  • 宝鸡市
  • 陕西省

  • 延安市
  • 陕西省

  • 榆林市
  • 陕西省

  • 汉中市
  • 陕西省

  • 渭南市
  • 陕西省

  • 西安市
  • 陕西省

  • 铜川市
  • 青海省

  • 果洛藏族自治州
  • 青海省

  • 海东市
  • 青海省

  • 海北藏族自治州
  • 青海省

  • 海南藏族自治州
  • 青海省

  • 海西蒙古族藏族自治州
  • 青海省

  • 玉树藏族自治州
  • 青海省

  • 西宁市
  • 青海省

  • 黄南藏族自治州
  • 黑龙江省

  • 七台河市
  • 黑龙江省

  • 伊春市
  • 黑龙江省

  • 佳木斯市
  • 黑龙江省

  • 双鸭山市
  • 黑龙江省

  • 哈尔滨市
  • 黑龙江省

  • 大兴安岭地区
  • 黑龙江省

  • 大庆市
  • 黑龙江省

  • 牡丹江市
  • 黑龙江省

  • 绥化市
  • 黑龙江省

  • 鸡西市
  • 黑龙江省

  • 鹤岗市
  • 黑龙江省

  • 黑河市
  • 黑龙江省

  • 齐齐哈尔市