自然语言处理 NLP 简介

【新】在线运行 Pandas 学习数据管理

【浏览器跑Python】交互式Python学习

【MiniPy】分享你的 Python 小程序

切换视频源:

自然语言处理 NLP 简介

作者: 莫烦 编辑: 莫烦 发布于: 2020-08-16

学习资料:

  • 自然语言处理系列

计算机读懂语言,在如今已经不是什么新鲜的事情了,不过你有没有想过计算机是如何读懂人类语言的呢?欢迎来到莫烦Python,我是周沫凡,今天我们就来聊一聊机器学习当中的自然语言处理NLP技术吧。

生活应用 ¶

nlp

朝着智能音响说声话,他们就可以与你对答如流。用google来搜索莫烦Python时,搜索引擎也能准确地返回你问题的答案。 或者当你炒股,又或者你在做量化交易时,能读懂当前市场变化的语言模型或许也能帮上你的帮。 计算机能够读懂语言的前提是:这种语言是一种可计算的物体,

理解形式 ¶

nlp

意味着我们需要找到一种方式将我们熟知的中文,英文和各种外文转化成数字形式。&比如这些长度一样的数字串,这些数字具体的取值是怎样得来的,我们会在后期的视频中介绍,当前我们只需要了解计算机如果需要理解文字的内容,就必须将文字转换成某种数学表达形式,而一串数字绝对是最方便计算和转换的方式了。自然语言处理中有一个典型的应用,就是翻译。

nlp 我们将一种语言作为输入,一种作为输出,使用NLP作为中间的桥梁,首先将中文通过一种压缩机制转码成机器能理解的数字&,然后用中间这种数字化的语言表达形式,再通过一次英文的解压&,解压出来英文作为输出语言。其实除了中翻英,同一套机制还能被用在更多的地方。

nlp 只要我们保证这个中间态的数字表达形式是计算机能够理解并计算的,那么各种语言的转换就能都兼容起来。更厉害的是,通过这种途径,我们其实创造了专属于计算机自己的语言,&计算机能够直接通过这种特定的数字语言来和我们人类对话。我们举个例子。

对话 ¶

nlp 当你想和计算机对话,计算机在收到你的语言信息后,会翻译成它能理解的数字内容,然后使用这些数字语言,通过一些处理分析,做出行为决策,最终返回人类的语言。一来一回,形成对话,解决具体问题。这就是计算机使用自己的语言和我们交流的一种方式。 可以想象,目前的网络中,存在的都是以人类语言为主的信息源,但是在未来,机器学习,AI系统,将要占据网络通讯的绝大部分。

nlp

未来 ¶

nlp 那个时候,我们的互联网可能就会存在特别多只有机器才能看懂的语言,大多数时候也可能是机器在和机器对话,而不是人和人。因为我们更习惯于把不重要的事物交给机器来完成,由他们来当我们的管家,帮我们订机票,定餐馆,完成一些重复性工作,释放我们人类可贵的注意力和价值。

nlp 回顾历史,人类创造了语言,使得信息得以流传,使得人类社会更加紧密。而现在我们使用自然语言处理技术,让人类也能和非生命体的计算机交流,让它们替我们完成脏活累活。但这并不是技术的天花板,未来的自然语言处理必定会突破语言学的屏障,铸就计算机自己的语言,使它们彼此之间也能交流,那天也就真正开启了人工智能时代。


降低知识传递的门槛

支持莫烦

莫烦经常从互联网上学习知识,开源分享的人是我学习的榜样。 他们的行为也改变了我对教育的态度: 降低知识传递的门槛免费 奉献我的所学正是受这种态度的影响。 【支持莫烦】 能让我感到认同,我也更有理由坚持下去。

我组建了微信群,欢迎大家加入,交流经验,提出问题,互相帮持。 扫码后,请一定备注"莫烦",否则我不会同意你的入群申请。

wechat
    教程目录

    自然语言处理

      简介

    • 莫烦带你NLP六连问
    • 自然语言处理 NLP 简介
      • 生活应用
      • 理解形式
      • 对话
      • 未来
    • NLP 课程怎么学

      搜索

    • 你天天用的搜索引擎是怎么工作的
    • 统计学让搜索速度起飞
    • 搜索的扩展

      理解词语

    • 机器是这样理解语言 - 词向量
    • Continuous Bag of Words (CBOW)
    • Skip-Gram

      理解句子

    • 机器是这样理解语言 - 句向量
    • Seq2Seq 语言生成模型
    • CNN的语言模型

      全都是注意力

    • 请注意用词 - 语言模型的注意力
    • Seq2Seq Attention 注意力机制
    • 请注意注意力 - 将注意力发挥到极致
    • Transformer 将注意力发挥到极致

      预训练模型

    • 肩膀上的眺望 - 预训练语言模型
    • ELMo 一词多义
    • GPT 单向语言模型
    • BERT 双向语言模型

      更多应用

    • NLP模型的多种应用

    聚圣源德克士和平大世界一见钟情的意思个人ip起名yibendao姓氏吕给女孩起名字未出生婴儿起名新生婴儿网络起名你说过两天来看我姚姓男子起名免费的起名软件有那些男孩起名测试打分免费给学校起个名字吧恐慌沸腾笔趣阁为文化类公司起名字陈芷琰神界危机秘籍网上起名有准的吗戎装少主朝字起名字大全男孩嫁千户好看的百合小说鼠年起那些名字好呢个体户营业执照起名字大全灭门惨案借种梅花古诗起名字与诗词最好的股票分析软件通知存款起名企业淀粉肠小王子日销售额涨超10倍罗斯否认插足凯特王妃婚姻让美丽中国“从细节出发”清明节放假3天调休1天男孩疑遭霸凌 家长讨说法被踢出群国产伟哥去年销售近13亿网友建议重庆地铁不准乘客携带菜筐雅江山火三名扑火人员牺牲系谣言代拍被何赛飞拿着魔杖追着打月嫂回应掌掴婴儿是在赶虫子山西高速一大巴发生事故 已致13死高中生被打伤下体休学 邯郸通报李梦为奥运任务婉拒WNBA邀请19岁小伙救下5人后溺亡 多方发声王树国3次鞠躬告别西交大师生单亲妈妈陷入热恋 14岁儿子报警315晚会后胖东来又人满为患了倪萍分享减重40斤方法王楚钦登顶三项第一今日春分两大学生合买彩票中奖一人不认账张家界的山上“长”满了韩国人?周杰伦一审败诉网易房客欠租失踪 房东直发愁男子持台球杆殴打2名女店员被抓男子被猫抓伤后确诊“猫抓病”“重生之我在北大当嫡校长”槽头肉企业被曝光前生意红火男孩8年未见母亲被告知被遗忘恒大被罚41.75亿到底怎么缴网友洛杉矶偶遇贾玲杨倩无缘巴黎奥运张立群任西安交通大学校长黑马情侣提车了西双版纳热带植物园回应蜉蝣大爆发妈妈回应孩子在校撞护栏坠楼考生莫言也上北大硕士复试名单了韩国首次吊销离岗医生执照奥巴马现身唐宁街 黑色着装引猜测沈阳一轿车冲入人行道致3死2伤阿根廷将发行1万与2万面值的纸币外国人感慨凌晨的中国很安全男子被流浪猫绊倒 投喂者赔24万手机成瘾是影响睡眠质量重要因素春分“立蛋”成功率更高?胖东来员工每周单休无小长假“开封王婆”爆火:促成四五十对专家建议不必谈骨泥色变浙江一高校内汽车冲撞行人 多人受伤许家印被限制高消费

    聚圣源 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化