摘要
本发明涉及信息检索技术领域,具体为一种基于意图识别的垂直网站深度爬取方法,包括从多个异构信源爬取数据,构建动态知识图谱;在动态知识图谱中识别出由多个关系边连接构成的弱信号关联路径,并将弱信号关联路径转化为待验证风险假设;生成数据采集意图,基于待验证风险假设,生成寻找反向证据的驳斥性查询,作为第一数据采集意图;接收输入的查询指令,对查询指令进行语义分析,生成第二数据采集意图;基于数据采集意图的类型,生成多源爬取策略,包括多个垂直网站源及其爬取优先级;根据所述多源爬取策略,执行深度爬取任务,获取目标数据;对所述目标数据进行处理,对所述待验证风险假设进行验证,判断所述反向证据是否存在及其强度。