单模型可完成6项NLP任务,哈工大SCIR LTP再度升级,4.0版本面世
机器之心编辑部
迄今为止,这一 NLP 开源基础技术平台在 GitHub 上共获得了 2.5k 的 Star 量,760 多个 Fork 数量,被包括清华大学、北京大学、CMU 等国内外众多大学及科研机构在内的 600 余家研究单位签署协议使用。
基于多任务学习框架进行统一学习,使得全部六项任务可以共享语义信息,达到了知识迁移的效果。既有效提升了系统的运行效率,又极大缩小了模型的占用空间
基于预训练模型进行统一的表示 ,有效提升了各项任务的准确率
基于教师退火模型蒸馏出单一的多任务模型,进一步提高了系统的准确率
基于 PyTorch 框架开发,提供了原生的 Python 调用接口,通过 pip 包管理系统一键安装,极大提高了系统的易用性。
Python 3.7
LTP 4.0 Batch Size = 1
CentOS 3.10.0-1062.9.1.el7.x86_64
Intel(R) Xeon(R) CPU E5-2640 v4 @ 2.40GHz
from ltp import LTP
ltp = LTP() # 默认自动下载并加载 Small 模型
segment, hidden = ltp.seg(["他叫汤姆去拿外衣。"])
pos = ltp.pos(hidden)
ner = ltp.ner(hidden)
srl = ltp.srl(hidden)
dep = ltp.dep(hidden)
sdp = ltp.sdp(hidden)
关注公众号:拾黑(shiheibook)了解更多
[广告]赞助链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
关注网络尖刀微信公众号
随时掌握互联网精彩
随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 奋力打开改革发展新天地 7995059
- 2 男子驾车冲撞小学生被判死缓 7988929
- 3 微信可以线上送实体礼物了 7828454
- 4 “冷资源”里的“热经济” 7704474
- 5 刘诗诗方辟谣离婚 7697649
- 6 女子8年生6个女儿第7胎再产女 7506077
- 7 #胡锡进的2024年终总结# 7459425
- 8 肖战新片射雕英雄传郭靖造型曝光 7328193
- 9 孙颖莎提车 7261869
- 10 蒋欣生图更是妈妈级别 7174276