今日头条成功了（今日头条为什么获得成功）
本文目录一览：
爬今日头条，各种失败经验，之后成功了
最近研究了一下js加密，发现今日头条比较适合练手，在头条获取数据的XHR中request参数有一项_signature参数，这个是就是经过js加密的数据。解决方案在最后。
先说寻找逻辑，叫顺藤摸瓜，藤是params中的key，瓜是js函数，在哪里摸，我用的是chrome F12，全局查找，就是在网址ctrl+f，注意看结果，前面有url这种一般都是在headers之类带着没什么价值，要看出来具体数据的。
然后在preview里，格式化看得清楚，还是查找signature。
这样就成功一大半了。顺便还找到了as和cp
as: e.as,cp: e.cp,
这个e也在前面定义了var e = ascp.getHoney()，然后在搜索getHoney，就找到了。
把这段复制进pycharm的zhu.js文件里，然后新建一个python文件来运行，nodejs直接运行也行。
额，报错了，execjs._exceptions.ProgramError: ReferenceError: md5 is not defined
赶紧查了一下md5是个加密模块， nodejs安装MD5 ，然后改装了改装一下，增加了var md5 = require('md5-node');运行成功。
然后就到了signature， _signature: i，i = TAC.sign("refresh" === t ? 0 : r.params.max_behot_time_tmp))
params.max_behot_time_tmp应该是在回传的数据里的max_behot_time了。
首次请求是0，后来的是根据前一次请求的后传数据继续请求。
不知所云，但还是按照老办法试试看能不能运行。
execjs._exceptions.ProgramError: TypeError: Cannot read property 'userAgent' of undefined。
这回我参考一下 别人怎么办
原来要加useagent，
global.navigator={};
global.navigator.userAgent=
然后变成这样
调用发现又有错误：
好像说的是var data = TAC.sign(0);之前出现了一个不该出现的逗号，把它改成分号，果然成功了，
满怀欣喜的把signature，cp，as找到拼接成url发送，结果并不能返回数据。
有些忧郁的又看看别人怎么办， 用selenium获取参数 ，phantomjs不维护了，听说chrome headless可以替代之， 别人家说这么用 ，chrome还是打开窗口了，后来发现chromedriver.exe版本与chrome有严格的对应关系。 官网这样说
总算是chrome是无头的了，现在只差跟着up主把参数弄出来就行了，因为有了前面的查找，selenium执行的函数名称也很清楚，
signature = brower.execute_script('return TAC.sign(0)')
果然出来一个参数，开心的拼接url发送请求还是没数据回来。。。
忧伤的想了好久，尝试了多次，终于在手机版里发现可以不用cp和as参数，用哪里生成的signature都能拼接出结果，只是max_behot_time是藏在前一页最后一项的信息里
用requests的session或者scrapy都能连续爬取了。不过m站将返回数量20写进了js里，更改params的参数也不能控制一次的爬取量还是很是遗憾。
结果
好像必须带着cookie才能爬取后续的，不然永远都只能爬取第一页的内容，获取cookie用request的session都不行可能只能用selenium获取cookie之后再来。忧伤。。。
头条解锁成功,为什么登录失败
1、首先，可能是你网路质量太差，因此导致登录失败，建议你检查网络连接。
2、其次，可能是今日头条服务器出现问题，导致登录失败，但是这样的情况基本是不存在的。
3、最后，可能是你的手机号在其他设备登录，然后导致你登录出现未登录的情况。
今日头条如此成功,为什么字节跳动公司还要继续创新开创抖音小视频平台呢
如下今日头条成功了：
一方面是抓住了移动互联网今日头条成功了的趋势红利今日头条成功了，同时拥有核心技术，另一方面有一套合理今日头条成功了的组织架构和管理模式去激励团队和个人，形成了自我驱动的公司。1、字节跳动公司从成立以来，先后抓住了移动资讯分发和短视频这两大风口。其中移动资讯分发的产品“今日头条”采用的是信息流的形式，同时结合了人工智能算法技术，让今日头条从众多资讯分发APP中脱颖而出。同时进入2016年又推出了抖音产品，卡位短视频的风口，目前抖音成为短视频行业的超级app，DAU超过4亿。今日头条+抖音已经成为字节跳动公司的核心产品，也成为整个字节跳动系在整个移动互联网抢占用户时间方面最有利的产品。
