【技术分享】自定义词典增强系统词槽sys_time()的识别能力(附带25874条字典词汇)
残****奇 · 残****奇 发布于2017-10-12 01:30 浏览:1466 回复:6

   在很多场景下我们要用到时间词槽,比如用于定时。百度提供的sys_time能将诸如“19点05分”或者“19点”这样的表述归一化成24小时制的“xx:xx:xx”,也能将诸如“一分钟”这样的话术归一化为“60.0000000|秒”。本想着真不错,功能很强啊!于是自己新建的user_time词槽就直接复用了sys_time,但事实发现诸如“十九点十七分”或者“半小时”、“两个半小时”这样的话术却无法归一化。这就很伤了~

   所以,自己动手,丰衣足食,写了三段python代码来生成sys_time的补充词典,下面我将把生成的三个词典文件上传并解释其词条格式。

   (1)首先是针对24小时制的时间问题,下面这个词典涵盖了四种人们说一个时间的话术,包括:

  • xx点xx分

  • xx点xx

  • xx时xx分

  • xx时xx

   并充分考虑到了百度语音识别在识别数字时有时输出阿拉伯数字,有时却是汉字的情况,比如“13”往往会被语音识别为“十三”,而“23”则会被语音识别为“23”。

   这个词典将所有可能的时间组合都归一化成了“xx:xx:00”的格式。xx代表阿拉伯数字,做了这样的归一化后相信大家都能通过正则匹配来获取到我们要的具体时间。

user_time_24h.txt

内容如图:

1.png

(2)接下来是时间区间,下面这个文件涵盖了1-100分钟之间语音识别所有可能的结果并全部归一化成了阿拉伯数字,方便代码中进行解析。

user_timee.txt

内容如图:

2.png

(3)下面这个文件依然是时间区间,其涵盖的是0-24个小时的用户可能话术,并相应的有半小时这样的处理。所有整数个小时的语音识别可能的语料都被归一化为“xx小时”的格式,xx代表阿拉伯数字。而所有诸如“三个半小时”这样的语料都被归一化为类似“3半小时”这样的格式。

user_timeh.txt

内容如图:

3.png


点赞  ( 0 )
收藏
评论(6)
共6条回复 最后由念****平回复于2017-11-05 16:14
#2残****奇回复于2017-10-15 13:50:25

对于第一个文件,之前忘了我们通常也会用“两”来代替“二”,这次做了更新,加入了诸如“两点零三分”这样的词条

0
#3****am回复于2017-10-16 15:26:01

楼主需要结合周期性时间,比如每天早上7点10分,每周三下午3点15分之类;或者日期+时间,比如明天7点15分之类,都会无法归一化。如果只识别时间,没有日期,这个效果也会差吧。。。

0
#4s****n回复于2017-10-20 09:45:29

24小时制的时间,那个真的需要24点XX分这种吗?

0
#5I****e回复于2017-10-21 00:55:22

不错不错,你能成为稳定且有质量的词典供应商hhhhhhh

0
#6念****平回复于2017-11-05 16:14:48

一分三十秒怎么弄

0
#7一****梅回复于2018-01-13 01:38:51

http://s.weibo.com/weibo/pcp%E6%B2%B9%E5%B0%81%E8%BF%87%E6%A1%A5%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/diy%E4%B8%80%E4%BD%93%E9%98%80%E5%9B%BE%E7%BA%B8%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E5%8F%A3%E5%BE%84%E6%B1%BD%E6%9E%AA%E6%9E%AA%E7%AE%A1%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E9%B2%81%E6%A0%BC10%E5%9B%BE%E7%BA%B8%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E5%85%BD%E7%94%A8%E9%BA%BB%E9%86%89%E6%B1%BD%E6%9E%AA%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E4%B9%B0%E7%8E%A9%E5%85%B7%E7%8B%99%E5%87%BB%E6%9E%AA%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E9%94%A6%E6%B1%9F%E6%B1%BD%E6%9E%AA%E5%9B%BE%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E9%AB%98%E5%8E%8B%E6%B1%BD%E9%98%80%E5%8E%9F%E7%90%86%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E7%AE%A1%E7%BC%A9%E5%8F%A3%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E7%9E%84%E5%87%86%E5%99%A8%E6%80%8E%E4%B9%88%E8%B0%83%E8%A7%86%E9%A2%91%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B2%99%E6%BC%A0%E4%B9%8B%E9%B9%B0%E9%BB%91%E5%B8%82%E4%BB%B7%E6%A0%BC%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E4%B8%89%E7%AE%AD%E8%80%81%E7%AE%A1%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E5%BC%B9%E6%9E%AA%E7%94%B5%E5%8A%A8%E6%B1%BD%E5%BC%B9%E6%9E%AA%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E7%A7%83%E9%B9%B0%E9%AB%98%E5%8E%8B%E6%B1%BD%E7%93%B6%E6%80%8E%E4%B9%88%E5%85%85%E6%B1%BD%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E5%93%AA%E4%BD%8D%E6%89%8B%E4%B8%8A%E6%9C%89%E7%9A%84%E6%AF%8D%E9%B8%A1%E5%87%BA%E5%94%AE%E8%B4%A7%E5%88%B0%E4%BB%98%E6%AC%BE%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E4%B8%B4%E6%B2%82%E6%B1%BD%E6%9E%AA%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E7%BE%8E%E5%9B%BD%E6%9C%AC%E6%9D%B0%E6%98%8Epcp%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E8%80%81%E5%BC%8F%E6%B1%BD%E6%9E%AA%E7%9A%84%E6%9E%84%E9%80%A0%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E8%BF%9E%E5%8F%91%E6%B1%BD%E6%9E%AA%E5%8E%9F%E7%90%86%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%9F%AF%E5%B0%94%E7%89%B9%E4%BB%BF%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E9%9B%B7%E6%98%8E%E9%A1%BFm0%E4%BB%B7%E6%A0%BC%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E7%8C%8E%E6%9E%AA%E6%9D%BE%E9%BC%A0%E5%A4%B4%E5%9B%BE%E7%BA%B8%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E5%8E%8B%E5%BC%B9%E5%99%A8%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E6%B6%88%E9%9F%B3%E5%99%A8%E7%BB%93%E6%9E%84%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%9E%AA%E6%89%93%E9%92%A2%E7%8F%A0%E5%BC%B9%E5%8F%AF%E6%89%93%E9%B8%9F%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E6%B6%88%E9%9F%B3%E6%80%8E%E4%B9%88%E5%81%9A%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%B1%BD%E6%9E%AA%E6%89%B3%E6%9C%BA%E7%BB%93%E6%9E%84%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E5%8F%B0%E6%B9%BE%E6%8A%98%E5%8F%A0%E9%AA%9A%E6%9C%AC%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%9E%AA%E6%A0%93%E9%9B%B6%E4%BB%B6%E7%BB%93%E6%9E%84%E5%9B%BE%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565

http://s.weibo.com/weibo/%E6%89%8B%E6%8B%89%E7%8B%97%E8%AE%BA%E5%9D%9B%20%E2%98%85%E8%B4%AD%E6%9E%AA%E2%95%86Q2140465565


TOP