Deepseek公布广度数据采集方法专利 可降低网络资源消耗

格隆汇4月2日｜据天眼查，近日，Deepseek关联公司杭州深度求索人工智能基础技术研究有限公司申请的“一种广度数据采集的方法及其系统”专利公布。摘要显示，本发明涉及数据采集领域，包括建立网页元信息库；确定每日调度单元下载配额及当日下载总额度；从网页元信息库中选取相应数量的链接，分配下载额度；下载过程控制；下载文本进行后处理及数据清洗后进入回灌队列，通过信息回灌实现网页元信息库更新。