开云体育欢迎你12 月 24 日新闻金融界 2024 年 ,权局消息显示国度常识产,擎摸索的 AI 语料数据获取办法、开发及存储介质”的专利北京奥维云网大数据科技股份有限公司申请一项名为“基于引,9166835 A公然号 CN 11,24 年 11 月申请日期为 20。 要显示专利摘, 语料数据获取办法奥维云网申请基于引擎查找的 AI 语料数据获取步骤专利处置现有工夫语料数据获取资源蹧跶题目,、开发及存储介质本出现公然了基于引擎摸索的 AI,获取身手范围涉及语料数据,口号料联系的合头词和术语网罗如下办法:确定与目,术语扩展合头词列表应用同义词和联系;摸索获得摸索网页基于合头词列表,kaiyun开云现金游戏摸索网页中的有用网页并基于查重率提取出;实质举办数据洗濯对抓取获得的网页,以及反复消息去除无合消息;测试实行设立查重,说明样本查重率通过样本网页,析获得查重阈值联合数据洗濯分;身手还生计对摸索网页的提取不敷精准本出现用于处分现有的语料数据获取,的杂乱照料进程后导致颠末长期间,料数据较少提取到的语,糟蹋的题目制成资源。