大数跨境
0
0

网达提出基于人工智能的文档主题提取技术

网达提出基于人工智能的文档主题提取技术 网达软件
2021-01-20
1
导读:网达软件基于深度学习技术GPT2搭建主干网络,修改了其解码逻辑部分,使用Temperatrue、Top-P Sampling等decoding策略,加入了先验和规则。

随着近些年文本信息的爆发式增长,文本信息过载问题日益严重,人们每天能接触到海量的文本信息,如新闻、博客、聊天、报告、论文、微博等。从大量文本信息中提取重要的内容,已成为我们的一个迫切追求,而自动文本摘要(Automatic text summarization)则提供了一个高效的解决方案。

根据Radev的定义,摘要是‘一段从一份或多份文本中提取出来的文字,它包含了原文本中的重要信息,其长度不超过或远少于源文本的一半’。自动文本摘要旨在通过技巧自动输出简洁、流畅、保留关键信息的摘要。自动文本摘要有非常多的应用场景,如自动报告生成、新闻标题生成、搜索结果预览、信息检索等。

网达软件基于深度学习技术GPT2搭建主干网络,修改了其解码逻辑部分,使用Temperatrue、Top-P Sampling等decoding策略,加入了先验和规则。相对于传统抽取式文本摘要(如textrank、LDA等),其生成的内容不限于原始文章中已有的词汇,语法准确语句表达基本通顺,能够准确捕捉文章的关键信息,自动生成标题(也可应用于金融报告生成)。


案例一


案例二


案例三

案例四


图中可见,给一段文本或者一篇文章都能准确自动生成一句话或者一个标题,且生成语句语法准确表达通顺,并且还提供了允许限制生成句子的长度。


此次,网达软件针对信息量过载严重日益严重问题,为用户提供了准确简洁的文本主题生成服务。在未来,网达还会深入研究自动文档摘要技术,为用户提供视频语义摘要提取技术,更好的服务大众。




【声明】内容源于网络
0
0
网达软件
上海网达软件股份有限公司(股票代码:603189)是以视频智能化为核心的软件产品及解决方案提供商,是国内大视频领域深度参与者和技术服务提供方。
内容 229
粉丝 0
网达软件 上海网达软件股份有限公司(股票代码:603189)是以视频智能化为核心的软件产品及解决方案提供商,是国内大视频领域深度参与者和技术服务提供方。
总阅读70
粉丝0
内容229