百度指数爬取

harriszh 发布于2019-08-23 18:13 / 3369人阅读

摘要：观察经过观察，百度指数并没有返回包含真实数据的文件，而是加密过后的数据，但是为了渲染，在前端应该有对应的解密代码。

1.为什么做这个

今天一个朋友问能不能拿到百度指数的折线图数据，便上网查了相关资料，参考了网上的一位作者，链接地址：http://www.pianshen.com/artic...，教了朋友怎么拿数据。

2.观察

经过观察，百度指数并没有返回包含真实数据的json文件，而是加密过后的数据，但是为了渲染，在前端应该有对应的解密代码。

3.实验

实验工具：谷歌浏览器

请求截图

发现请求的返回数据中返回了：data及uniqid两个值，猜测data为加密的数据，以及uniqid为密钥

解密，由上文的参考文章中得知js解密代码如下：

function decrypt(t,e){
        for(var a=t.split(""),i=e.split(""),n={},s=[],o=0;o

写了个html解密小工具，如下图所示

工具的源码如下（瞎写的一个工具，望大家见谅）：




     
     百度指数数据解密


    
        输入data
        
         
        输入uniqid请求返回的数据
        
         
        
        
        解密的结果为

云服务器 GPU云服务器百度指数百度指数提交百度指数为0 百度百发100指数

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/104847.html

Python爬虫笔记1-爬虫背景了解

摘要：学习爬虫的背景了解。但是搜索引擎蜘蛛的爬行是被输入了一定的规则的，它需要遵从一些命令或文件的内容，如标注为的链接，或者是协议。不同领域不同背景的用户往往具有不同的检索目的和需求，搜索引擎无法提供针对具体某个用户的搜索结果。学习python爬虫的背景了解。大数据时代数据获取方式如今，人类社会已经进入了大数据时代，数据已经成为必不可少的部分，可见数据的获取非常重要，而数据的获取的方式...

oujie 2019-07-31 10:02 评论0 收藏0
江湖二三事：听说你想做数据分析师？

摘要：数据分析师真的算是高薪职位了。看完了数据分析师的技能要求，我们来看看公司的数据。初创公司对数据分析师需求最小。四周昏暗，是一家小城的酒肆，屋外正是大雪纷飞。林葱抖了抖外套，进的店里来，叫了两斤熟牛肉，一壶烧酒。小二，最近什么工作有前途啊？小二打量了一眼林葱，只见眼前的客官浓眉大眼，身穿一件半旧西装，一副黑框眼镜半藏衣袋之中。远看像个老坏蛋，近看好像朱时茂一般，越看越觉得有一个工...

WilsonLiu95 2019-07-30 14:38 评论0 收藏0
首次公开，整理12年积累的博客收藏夹，零距离展示《收藏夹吃灰》系列博客

摘要：时间永远都过得那么快，一晃从年注册，到现在已经过去了年那些被我藏在收藏夹吃灰的文章，已经太多了，是时候把他们整理一下了。那是因为收藏夹太乱，橡皮擦给设置私密了，不收拾不好看呀。 ...

Harriet666 2021-09-10 10:51 评论0 收藏0