[网络连接] 【已解决】如何获取今日头条网的头条号主页每条文章链接

Rank: 6 Rank: 6

帖子: 1266
积分: 1775
技术: 162
捐助: 0
注册时间: 2015-12-12

2楼

发表于 2017-7-22 00:25 | 只看该作者

你需要这本书。Python网络数据采集 https://www.amazon.cn/dp/B01M3VN9CW/ref=cm_cr_ryp_prd_ttl_sol_1

去学去写去用才有进步。安装python3代码存为xx.py 双击运行或右键用IDLE打开按F5运行

codegay

Rank: 6 Rank: 6

帖子: 1266
积分: 1775
技术: 162
捐助: 0
注册时间: 2015-12-12

3楼

发表于 2017-7-22 01:27 | 只看该作者

自己解析这个json吧
http://www.toutiao.com/pgc/ma/?p ... 1&callback=json

去学去写去用才有进步。安装python3代码存为xx.py 双击运行或右键用IDLE打开按F5运行

hlzj88

Rank: 6 Rank: 6

帖子: 826
积分: 1629
技术: 54
捐助: 20
注册时间: 2008-11-3

4楼

发表于 2017-7-22 07:06 | 只看该作者

谢谢 codegay ，还是算了吧，这两个回复都是我不能企及的高度。

目的，学习批处理

bbaa

Rank: 3 Rank: 3

帖子: 316
积分: 275
技术: 32
捐助: 0
注册时间: 2015-11-30

5楼

发表于 2017-7-22 10:44 | 只看该作者

回复 4# hlzj88

抓包发现可以实现
不过需要第三方

Rank: 8 Rank: 8

帖子: 3041
积分: 5333
技术: 685
捐助: 0
注册时间: 2014-10-19

6楼

发表于 2017-7-22 10:45 | 只看该作者

//&cls&cscript -nologo -e:jscript "%~f0"&pause&exit

var host='http://www.toutiao.com';
var id='6607289740';
url=host+'/c/user/article/?page_type=1&user_id='+id+'&max_behot_time=0&count=1000';
var http = new ActiveXObject('Msxml2.XMLHTTP');
http.open('GET', url, false);
http.send();
json=http.ResponseText;
if(json){
    var js = eval('('+json+')');
    //max_behot_time=js['next']['max_behot_time'];
    var data=js['data'];
    if(data){
        for(var i=0;i<data.length;i++){
            var item=data[i];
            WSH.echo(
                (i+1)+'.'+item['title']+'\r\n'+item['abstract']+'\r\n'+host+item['source_url']+'\r\n'+item['display_url']+'\r\n'
            );
        }
    }
}
复制代码

3 评分人数

hlzj88: 不明觉厉技术 + 1
codegay: 1技术 + 1
bbaa: Javascript好评[Bat调用？]技术 + 1

bbaa

Rank: 3 Rank: 3

帖子: 316
积分: 275
技术: 32
捐助: 0
注册时间: 2015-11-30

7楼

发表于 2017-7-22 10:51 | 只看该作者

回复 6# pcl_test

速度啊6666
我还在研究CP和AS是不是必须.....
貌似不是。。。。

bbaa

Rank: 3 Rank: 3

帖子: 316
积分: 275
技术: 32
捐助: 0
注册时间: 2015-11-30

8楼

发表于 2017-7-22 10:58 | 只看该作者

回复 6# pcl_test

Count貌似是227 Hasmore刚好为false....

hlzj88

Rank: 6 Rank: 6

帖子: 826
积分: 1629
技术: 54
捐助: 20
注册时间: 2008-11-3

9楼

发表于 2017-7-22 12:38 | 只看该作者

回复 6# pcl_test 好厉害的代码，能看到窗口内容是我要的。但是，我得不到他们。还有，想收集更多的头条，因此需要能输入地址，或者从一个文件来读取地址表。

很实用的，要给孩子收集一些学习资料链接。

目的，学习批处理

bbaa

Rank: 3 Rank: 3

帖子: 316
积分: 275
技术: 32
捐助: 0
注册时间: 2015-11-30

10楼

发表于 2017-7-22 16:26 | 只看该作者

本帖最后由 bbaa 于 2017-7-22 16:31 编辑

回复 9# hlzj88

如果都是寻找个人主页的所有见面的话
http://www.toutiao.com/c/user/6607289740/#mid=6607310215
把user/后面的数字提取出来，放到斑竹的代码里
中的id=xxxxx

bbaa

Rank: 3 Rank: 3

帖子: 316
积分: 275
技术: 32
捐助: 0
注册时间: 2015-11-30

11楼

发表于 2017-7-22 16:29 | 只看该作者

回复 9# hlzj88

可以把地址存到txt
把斑竹代码的第一行改为

//&cls&(cscript -nologo -e:jscript "%~f0")>输出.txt&pause&exit
复制代码

这样信息就会保存在输出.txt

hlzj88

Rank: 6 Rank: 6

帖子: 826
积分: 1629
技术: 54
捐助: 20
注册时间: 2008-11-3

12楼

发表于 2017-7-22 16:32 | 只看该作者

回复 11# bbaa
谢谢你，看了一下午的Wscript ，就是在寻找输出的方法。

再次谢谢版主。

目的，学习批处理