首先我举一个案例比如豆瓣电影排行榜 (douban.com)这个电影,首先我们进去检查源代码
说明源代码有,说明是服务器渲染,可以直接那html
但是返回的结果是空,所以我们需要在头里面加上User-Agent
然后可以看到有返回的结果,如果想拿到其中的名字这时候就要用re正则来进行匹配
然后这是自己写的正则,可能写的不够好
结果爬出来了
如果想拿到这3个信息,如何写呢
这是我写的re正则,看结果
如果我们像吧他们存放去了,可以导入csv包只是方便分析而已
结果
首先我举一个案例比如豆瓣电影排行榜 (douban.com)这个电影,首先我们进去检查源代码
说明源代码有,说明是服务器渲染,可以直接那html
但是返回的结果是空,所以我们需要在头里面加上User-Agent
然后可以看到有返回的结果,如果想拿到其中的名字这时候就要用re正则来进行匹配
然后这是自己写的正则,可能写的不够好
结果爬出来了
如果想拿到这3个信息,如何写呢
这是我写的re正则,看结果
如果我们像吧他们存放去了,可以导入csv包只是方便分析而已
结果