|
|
|
|
移动端

博体网下载网址:GitHub万星NLP资源大升级:Pytorch和TF深度互操作,32个最新模型

本文来源:http://www.344078.com/www_mama_cn/

www.86msc.com,和以往一样,梅西再次是C罗的竞争者,而格列兹曼则被视为最有可能动摇两人统治。  ■继续实施和完善产粮大县奖励政策。两人应长江文艺出版社之约补充了有关中国女排的新内容,合著《巅峰对话》,书写中国女排的历史、现在与未来。姚成同时敦促意警方采取积极措施,加强对中国侨民集中区域的社会治安管理,确保中国侨民的安全和合法权益不受侵害。

当天下午,庭审结束,法庭并未当庭宣判。乔丹公司使用的品牌是否对迈克尔乔丹构成姓名权上的侵害,还需要法官根据案件具体情况来裁量判断。  韦新举说,站在消费者的立场上,看到“乔丹”这样的商标,会不会产生与迈克尔·乔丹的关联联想,会不会误导消费者?这不单单是姓名权问题,还有消费者权益保护的问题。中国地震局已决定启动Ⅲ级应急响应,新疆自治区地震局已启动二级地震应急响应。

李·梅森本周末,英超正式开启圣诞赛程“快车道”。但我终将离开,去尝试自己能够把控的不拧巴的生活。当被问及是否担心香港民众是否会因一些议员被取消资格而失望时,罗冠聪称不会。另一方面,民进党陈水扁当政时的外事部门主管陈唐山曾经咒骂新加坡是“鼻屎大的国家”,“浪趴国家”,气得新加坡要赶走台湾驻新加坡办事处的官员。

GitHub上最火的NLP项目,标星13000+,现在迎来重大更新。刚刚, 抱抱脸(Hugging Face)团队,放出了transformers 2.0版本。

作者:乾明 鱼羊来源:量子位|2019-09-27 15:21

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。

GitHub上最火的NLP项目,标星13000+,现在迎来重大更新。

刚刚, 抱抱脸(Hugging Face)团队,放出了transformers 2.0版本。

GitHub万星NLP资源大升级:Pytorch和TF深度互操作,32个最新模型

一方面,实现了TensorFlow 2.0和 PyTorch 之间的深度互操作性。

你可以在TPU上训练模型,然后再Pytorch上测试,最后通过TensorFlow部署。

另一方面,也集成了超过32个经过100多种语言预训练的模型。最新的NLP架构,比如BERT、GPT-2、XLNet、RoBERTa、DistilBert、XLM等等通通在内。

更新放出之后,业内人士纷纷送上各种感叹:

This is so cool! Good job!、That’s awesome、Hot damn this is amazing!、Jesus christ.

transformers 2.0,最全的NLP库

更直接一点说,transformers 2.0项目,就是一个NLP领域的SOTA的集合。

SQuAD排行榜上的选手们通通收编在内,一共有8大架构可供调用:

GitHub万星NLP资源大升级:Pytorch和TF深度互操作,32个最新模型

BERT、XLNet这几位重量级选手自不必说。

最新鲜的RoBERTa、GPT-2 774M版本都已更新在列。

还有两个XLM架构,它们在XNLI跨语言分类任务中拥有比多语言BERT更优秀的表现。

此外,还有抱抱脸自家的DistilBERT,这是一个更小、更快、更便宜、更轻量级的BERT蒸馏版。

七月底刚把BERT拉回GLUE榜首的RoBERTa也几乎是在第一时间被整合到了pytorch-transformers库中。

所有这些架构,都已经在SQuAD数据集上进行了测试,均与原始实现的性能相匹配。

在这些架构之下,一共有超过32个经过100多种语言预训练的模型。

使用起来也非常方便,只需一个API,就能调用。

在线Demo,当场试用

NLP界的超强模型们到底有什么高招?抱抱脸也在官网上搭建了Write With Transformer,真·AI帮你在线写论文,在线编故事。

不过,在线服务的模型只有GPT,GPT-2和XLNet。

想要完整使用整个Transformer库,安装也并不困难。

官方提供的repo已经在Python 2.7和3.5+、PyTorch 1.0.0+、TensorFlow 2.0.0-rc1中进行了测试。

在安装了TensorFlow 2.0和/或PyTorch之后,可以通过pip安装:

  1. pip install transformers 

然后把库克隆到本地:

  1. pip install [—editable] . 

样本测试则可以在pytest上运行:

  1. python -m pytest -sv ./transformers/tests/ 
  2.  
  3. python -m pytest -sv ./examples/ 

甚至,你还可以在移动设备上运行这些模型,repo地址:

/github_com/huggingface/swift-coreml-transformers

从pytorch-transformers到transformers

这一项目,一开始名为pytorch-pretrained-bert,在1.2版本时更名为pytorch-transformers,现在变为transformers。

从名字的变迁中,也能够看出它的功能也越来越强大。在2.0版本中,实现了TensorFlow 2.0和 PyTorch 之间的深度互操作性,这也可能是在名字中去掉“pytorch-”的直接原因。

在GitHub项目中,他们也当场演示了如何用12行代码训练TensorFlow 2.0模型,然后将其放到PyTorch进行快速检测和测试:

GitHub万星NLP资源大升级:Pytorch和TF深度互操作,32个最新模型

当然,这一库还有更多强大的功能等待你发掘,如果你是NLP领域的从业者或者研究者,千万不要错过。

项目链接:

/github_com/huggingface/transformers

关于抱抱脸

虽然看上去很萌,但Hugging Face可不是兴趣小团体,而是个正经的AI创业公司。

他们的目标是建设真正的社会人工智能,并在这一过程中不断贡献技术力量。在NLP领域,他们的论文登上过ICLR,NeurIPS ,AAAI等国际顶会。

GitHub万星NLP资源大升级:Pytorch和TF深度互操作,32个最新模型

而他们在transformers这个广受欢迎的项目上付出的持续努力,正是其坚持的体现,而且也已经赢得了广泛的声誉。

在看到transformers 2.0项目更新的时候,就有网友评论称:

每次我听到 Huggingface,就好像看到“悟空”(龙珠)从训练营回来后的行动一样。每个人都对他们的进步感到敬畏和难以置信。

【编辑推荐】

  1. www.86msc.com谷歌如何实现10亿行代码的测试覆盖率?
  2. 30段极简Python代码:这些小技巧你Get了么
  3. Github 上 10 个值得学习的 Springboot 开源项目
  4. TextMate免费开源的老牌代码编辑器
  5. Github 上非常实用的 Vue 开源库
【责任编辑:张燕妮 TEL:(010)68476606】

点赞 0
分享:
大家都在看
猜你喜欢

订阅专栏+更多

用Python玩转excel

用Python玩转excel

让重复操作傻瓜化
共3章 | DE8UG

175人订阅学习

AI入门级算法

AI入门级算法

算法常识
共22章 | 周萝卜123

157人订阅学习

这就是5G

这就是5G

5G那些事儿
共15章 | armmay

128人订阅学习

视频课程+更多

网络工程师(HCNA |CCNA | HCNP实验)

网络工程师(HCNA |CCNA | HCNP实验)

讲师:郝旺53467人学习过

大型电商高并发与秒杀实战视频课程

大型电商高并发与秒杀实战视频课程

讲师:齐毅82434人学习过

小白轻松学Spring Cloud

小白轻松学Spring Cloud

讲师:齐毅79385人学习过

读 书 +更多

Ajax经典案例开发大全

针对Ajax技术的日益流行,本书对Ajax技术的典型应用进行了归纳总结,基本上覆盖了Ajax技术应用的典型场景。书中共有45个实例,分为9章:动...

订阅51CTO邮刊

点击这里查看样刊

订阅51CTO邮刊

51CTO服务号

51CTO官微

菲律宾申博管理网 菲律宾娱乐在线官方网 www.51tyc.com 申博直营网 申博百家乐 菲律宾申博官方网址登入
菲律宾网上娱乐登入 菲律宾申博游戏登入 申博代理登入 申博娱乐手机登入 菲律宾太阳城申博 申博登录不了
太阳城电子游戏 申博咨询端下载直营网 sun138.comwww 申博手机客户端下载 菲律宾申博太阳城娱乐 申博游戏手机版登入