防抓取的方法、裝置、設(shè)備及計(jì)算機(jī)存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202010448441.3 申請日 -
公開（公告）號 CN111625700A 公開（公告）日 2020-09-04
申請公布號 CN111625700A 申請公布日 2020-09-04
分類號 G06F16/951(2019.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 黃鵬杰;呂克讓 申請（專利權(quán)）人 北京世紀(jì)家天下科技發(fā)展有限公司
代理機(jī)構(gòu) 北京集佳知識產(chǎn)權(quán)代理有限公司 代理人 北京世紀(jì)家天下科技發(fā)展有限公司
地址 100000北京市豐臺區(qū)郭公莊中街20號院2號樓14層1403
法律狀態(tài) -

摘要

摘要 本申請?zhí)峁┝艘环N防抓取的方法、裝置、設(shè)備及計(jì)算機(jī)存儲介質(zhì)，對用戶的行為數(shù)據(jù)進(jìn)行分類統(tǒng)計(jì)，得到第一數(shù)據(jù)；將地址信息訪問業(yè)務(wù)線配置的規(guī)則的訪問數(shù)量，大于第一閾值的每一個(gè)目標(biāo)地址信息所屬的用戶的訪問數(shù)據(jù)確定為第一疑似爬蟲數(shù)據(jù)；若目標(biāo)地址信息訪問業(yè)務(wù)線配置的規(guī)則的訪問數(shù)量與目標(biāo)地址信息的訪問數(shù)量的比值大于第二閾值，則第一疑似爬蟲數(shù)據(jù)為爬蟲數(shù)據(jù)；比值小于或等于第二閾值，將第一疑似爬蟲數(shù)據(jù)作為第二疑似爬蟲數(shù)據(jù)，將用戶行為數(shù)據(jù)的數(shù)值賦值為第一數(shù)據(jù)中的用戶行為數(shù)據(jù)的數(shù)值后；若大于第三閾值且第二疑似爬蟲數(shù)據(jù)不在白名單中，則第二疑似爬蟲數(shù)據(jù)為爬蟲數(shù)據(jù)。以達(dá)到精準(zhǔn)識別爬蟲的目的。??