php爬取整站链接

通过提供入口url地址,从而抓取页面中当前域名下的所有链接内容。

比较头疼的地方有两处:

一个是地址的转化,相对地址转化为绝对地址。

另一个是友链或站外链接以及多级域名的判断的问题。举个栗子,比[……]

阅读全文