专利名称:互联网数据采集方法、系统及计算机终端专利类型:发明专利
发明人:赵淦森,林成创,列海权,纪求华,王欣明,赵淑娴,李胜
龙,金明宙,赵磊,刘秋敏,朱俊杰,颜志鸿
申请号:CN2018107488.8申请日:20180531公开号:CN108804620A公开日:20181113
摘要:本发明公开了一种互联网数据采集方法、系统及计算机终端。该方法包括:S1从所述待采集列表中获取待采集对象,根据预设规则构造该待采集对象的访问链接;S2根据所述访问链接获取所述待采集对象的网页内容,对所述网页内容进行解析以获取包含所述待采集对象的相关对象的有用信息,存储所述有用信息及将所述待采集对象加入已采集列表中;S3判断所述相关对象是否在待采集列表或已采集列表中,若均不存在,将所述相关对象加入到待采集列表中,重新执行步骤S1及后续步骤直至所述待采集列表内所有对象的有用信息采集完毕。本发明解决了如何通过一个访问链接发现新的价值链接的情况,实现互联网数据采集的自动化及全面化。
申请人:广东蔚海数问大数据科技有限公司
地址:510000 广东省广州市天河区天河北路906号2908房(仅限办公用途)(不可作厂房使用)
国籍:CN
代理机构:北京超凡志成知识产权代理事务所(普通合伙)
代理人:王术兰
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容
Copyright © 2019- sceh.cn 版权所有 湘ICP备2023017654号-4
违法及侵权请联系:TEL:199 1889 7713 E-MAIL:2724546146@qq.com
本站由北京市万商天勤律师事务所王兴未律师提供法律服务