首页 > 实时讯息 >
DeepSeek公布广度数据采集方法相关专利，有益于提高数据质量及下载效率
0次浏览 发布时间：2025-04-02 11:03:00企查查APP显示，近日，DeepSeek关联公司杭州深度求索人工智能基础技术研究有限公司申请的“一种广度数据采集的方法及其系统”专利公布。
专利摘要显示，本发明涉及数据采集领域，包括建立网页元信息库；确定每日调度单元下载配额及当日下载总额度；从网页元信息库中选取相应数量的链接，分配下载额度；下载过程控制；下载文本进行后处理及数据清洗后进入回灌队列，通过信息回灌实现网页元信息库更新。本发明的有益效果在于：发现尽可能多的网页链接，并减少对网站的流量冲击；对已经下载的内容进行分析，对未下载的连接进行质量推断，通过择优下载分配额度的方式，减少低质量网页下载和重复下载，提高数据质量及下载效率，减少在数据采集过程中网络资源的消耗；采用单独的信息回灌队列，保证网页元信息库修改操作的原子性和稳定性。
（企查查）
相关文章
- 03-25 兰州市委副书记、统战部部长张泽武等人拟任正厅长级领导职务
- 03-26 西安：2035年全市现代化水网体系基本形成 约1700万人受益
- 03-25 钛材料（娄底）全产业链招商项目集体签约活动举行
- 03-26 《博物馆简史》——开启博物馆的时空之旅
- 03-26 洛阳市第十三高级中学开展入户走访帮扶慰问活动
- 03-25 《科学开讲》：打卡中医药文化市集，和失眠说“再见”
- 03-26 安全防范常警惕 生命健康共守护——固始二中举行安全主题升旗仪式
- 03-25 两名干部涉嫌严重违纪违法被查
- 03-26 镇巴法院依法判决一起破坏交通设施案
- 03-26 3月28日，曹魏古城专场招聘会震撼来袭！
- 04-04 辽宁文旅发布清明节假期出游温馨提示！
- 04-03 事关宝宝！游泳用品、如厕器具等4项婴童用品国标来了
- 04-03 液态类食品散装运输该如何做？市场监管总局公开征求意见
- 04-03 找到文化与科技之间天然的黏合点 | 黄河时评
- 04-03 广州这7条公交线路4月26日起停运，涉及多条BRT线路
- 04-03 美国公布所谓对等关税税率算法公式，可能会让你惊呆！
- 04-03 2025年国家助学贷款免息 本金可延期一年偿还
- 04-03 美国3月份服务业商业活动出现了可喜的反弹
- 04-03 从“铺摊子”到“提质量” 新型技改试点聚焦绿色智能制造
- 04-03 花旗下调Robinhood目标价至50美元
