智能爬虫

百科含义

垂直搜索的核心技术实际上就是智能爬虫的技术，也就是说如何将定向或者非定向的网页抓取下来并进行分析后得到格式化数据的技术。