一種基于眾包的文本類數(shù)據(jù)標定任務(wù)的自動審核方法

基本信息

申請?zhí)?/td> CN202010426618.X 申請日 -
公開(公告)號 CN111667152A 公開(公告)日 2020-09-15
申請公布號 CN111667152A 申請公布日 2020-09-15
分類號 G06Q10/06(2012.01)I 分類 計算;推算;計數(shù);
發(fā)明人 劉端陽 申請(專利權(quán))人 深圳嗨客智慧科技有限公司
代理機構(gòu) 大連至誠專利代理事務(wù)所(特殊普通合伙) 代理人 楊威;楊爽
地址 518000 廣東省深圳市南山區(qū)南頭街道大汪山社區(qū)南光路286號水木一方大廈1棟1504
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種基于眾包的文本類數(shù)據(jù)標定任務(wù)的自動審核方法,包括:S1:確定待標定文本任務(wù)集、眾包工人對待標定文本任務(wù)集的標定質(zhì)量的閾值及公共待標定文本任務(wù)項;S2:定義待標定文本任務(wù)集中待標定文本任務(wù)項的標定類別,執(zhí)行步驟S4;未定義待標定文本任務(wù)集中待標定文本任務(wù)項的標定類別,執(zhí)行步驟S3;S3:利用公共待標定文本任務(wù)項計算標定類別;S4:根據(jù)眾包工人的標定結(jié)果計算眾包工人對待標定文本任務(wù)集的標定質(zhì)量,并與閾值進行比較,并判斷眾包工人的標定結(jié)果是否審核通過;本發(fā)明自動審核眾包工人對文本數(shù)據(jù)的標定結(jié)果,極大緩解審核人員對眾包工人標定結(jié)果的繁重的審核工作,彌補了基于機器學(xué)習(xí)算法標定策略不適用的情況。??