金融界2025年5月23日消息,国家知识产权局信息显示,谷歌有限责任公司申请一项名为“爬取算法”的专利,公开号CN120035825A,申请日期为2023年09月。
专利摘要显示,一种用于爬取算法的方法(300)包括获得供web爬取器(160)爬取的多个web页面(152)。该方法还包括确定web爬取器的可用带宽(155)。该方法包括,对于多个web页面中的每个相应web页面,基于可用带宽来确定用于相应web页面的相应爬取值(153),以及确定相应web页面的相应爬取值满足阈值(162)。该方法包括,响应于确定相应web页面的相应爬取值满足阈值,更新高速缓存存储器(150)中的相应web页面。
来源:金融界