头条标题和链接"/>
抓取今日头条标题和链接
最近又把之前的东西捡捡,想想之前的那些代码,并照着之前的看了看,感觉自己已经什么都不会了,既然想着捡捡,那就必须要搞点事情了,想着爬一下网站的内容,然后就好巧不巧的选了今日头条,然而今日头条的问题看起来还不小,接下来就随我一起去看看吧~_~
1. 首先爬一个网页,最基础的是要观察它的界面,但是不知道小伙伴们发现没有,这个今日头条在谷歌上打开的话,查看源码的时候是没有任何有价值的信息的,所以我们就不能来这个简单的爬的,然后我们来观察网页,按下F12,再刷新一下,如下图:
2. 选中XHR,即为动态加载的意思(先前我一直选中JS,然后一直没有找到任何结果,然后再找前辈问了问,百度查一查,才选中了XHR
更多推荐
抓取今日头条标题和链接
发布评论