分类： 赚钱杂谈

前面的文章，已经给大家介绍了详细的思路，这一篇带大家手摸手来实现一遍采集脚本的逻辑，小白也可以跟着做，有编程经验更好。

第一步：选择一个频道->子频道。我这里以 科技->嘿科技 为例。

建议使用chrome浏览器，打开F12，开发者工具

然后把滚动条往下进行滚动，并观察 开发者工具->面板->网络 的请求数据。

左边红框里的3条请求记录，就是在我们滚动鼠标往下滑时，前端去异步请求后端获取到视频数据，然后我们可以验证一下：

打开其中的一个请求，就可以在右边看到这个请求返回的数据，再把数据进行展开观察，红框中的数据是一个视频的基本信息了。这个视频的标题与网页里面的视频标题是吻合的。

       说明动态加载的视频列表都是通过这个接口返回的。当然继续滚动滑动条向下，还会继续动态新增其他视频列表，可想而知，在这个接口上肯定会有一个参数来控制新增视频的起始位置。

       继续打开 载荷 就可以看到参数列表，里面有个 page_index 参数就表示加载的页数，验证了我们的猜想是对的。

     然后我们需要拿到视频页面的链接，我们在新的标签页面上打开视频播放，可以看到视频的链接地址为

https://v.qq.com/x/page/d0602kne2rw.html

     可以看到       d0602kne2rw   就是上一张图片里面的 vid 字段

     我们已经在网页上验证了我们的猜想，接下来就是要利用这个接口来实现批量获取视频的相关信息。

        接下来，我们用Python代码来实现：

        第一步，获取到请求的url:

https://pbaccess.video.qq.com/trpc.vector_layout.page_view.PageService/getPage?video_appid=3000010

        第二步，获取到 请求体 的参数

{“page_context”:{“page_index”:”1″},”page_params”:{“page_id”:”channel_list_second_page”,”page_type”:”operation”,”channel_id”:”100169″,”filter_params”:”itype=-1&icompany=-1&icelebrity=-1&icolumn=2&sort=40″,”page”:”1″},”page_bypass_params”:{“params”:{“page_id”:”channel_list_second_page”,”page_type”:”operation”,”channel_id”:”100169″,”filter_params”:”itype=-1&icompany=-1&icelebrity=-1&icolumn=2&sort=40″,”page”:”1″,”caller_id”:”3000010″,”platform_id”:”2″,”data_mode”:”default”,”user_mode”:”default”},”scene”:”operation”,”abtest_bypass_id”:”c53dc690c94625cf”}}

      第三步，开始写代码

然后我们跑一下这个程序，观察下是否是我们想要的结果：

从返回的结果来看，就是我们需要的信息，当然这里我只返回的第一页的动态加载内容，如果你需要多页的，就只需要改变请求体里面的 page_index 这个参数的值，从1开始进行递增。

然后你需要再加上 for 循环来实现循环查询，这个就不展开讲了，反正数据的话是越多越好。

这里我是为了简单演示给大家看，所以把数据都打印了出来，如果你是要实际使用的话 ，我建议将数据存储到数据库里面，大致表字段如下所示：

当然，你也可以根据自己的需求进行增减，这里多提一句，就是需要有一个字段来表示“该视频是否已经使用”，一般已经发布使用过的视频，不能再次发布。

    当在微信公众号上群发成功的视频，需要在数据库里面修改其状态，比如“未发布-》已发布”，这样来进行区分，每次发布查询的时候，也需要增加一个查询条件，以上面的表为例子，查询语句如下

select title,href,img from gzh where status=-1

status为 -1 表示未发布，status为 1 表示已发布。

至此，整个采集腾讯视频的逻辑都给大家介绍完了，给大家看下采集的结果数据：

整个过程其实还挺容易的，没有什么难点，就是利用了Python的Request库。

       如果有什么问题或者不明白的地方，都可以私聊我。

       需要源码的朋友，也可以找我，帮忙转发下文章，就可以免费赠送了。