一種頁面數(shù)據(jù)采集的方法、裝置及電子設(shè)備

基本信息

申請?zhí)?/td> CN202011249208.9 申請日 -
公開(公告)號 CN112100547B 公開(公告)日 2021-06-18
申請公布號 CN112100547B 申請公布日 2021-06-18
分類號 G06F16/957;G06K9/00 分類 計算;推算;計數(shù);
發(fā)明人 張雪冬;左英杰 申請(專利權(quán))人 北京數(shù)智新天信息技術(shù)咨詢有限公司
代理機(jī)構(gòu) 北京集佳知識產(chǎn)權(quán)代理有限公司 代理人 柳欣
地址 100040 北京市石景山區(qū)魯谷路74號中國瑞達(dá)大廈18層M1805、M1807、M1809室
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種頁面數(shù)據(jù)采集的方法、裝置及電子設(shè)備,其中,該方法包括:基于瀏覽器執(zhí)行登錄目標(biāo)網(wǎng)頁的登錄操作;在登錄成功之后,基于光學(xué)字符識別技術(shù),從瀏覽器的開發(fā)工具中定位到cookie字段;根據(jù)cookie信息并行訪問與目標(biāo)網(wǎng)頁相關(guān)的頁面網(wǎng)絡(luò)地址,采集所有頁面網(wǎng)絡(luò)地址中的數(shù)據(jù)并保存。通過本發(fā)明實施例提供的頁面數(shù)據(jù)采集的方法、裝置及電子設(shè)備,基于cookie信息在訪問與目標(biāo)網(wǎng)頁相關(guān)的頁面網(wǎng)絡(luò)地址時,不需要重復(fù)登錄操作,從而可以并行訪問多個頁面網(wǎng)絡(luò)地址,不需要等待瀏覽器一次次加載頁面,能夠一次性獲取到多個頁面的數(shù)據(jù),可以快速采集數(shù)據(jù),提高數(shù)據(jù)采集的效率;且該方法可以自動實現(xiàn)登錄操作、采集操作等,能夠節(jié)約人力成本。