Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

运行四个脚本的时候卡住了 #43

Open
menfangwang opened this issue Mar 16, 2017 · 8 comments
Open

运行四个脚本的时候卡住了 #43

menfangwang opened this issue Mar 16, 2017 · 8 comments

Comments

@menfangwang
Copy link

前面七步都配置好了,最后运行四个脚本的时候没有反应。显示代理状态:异常。请问可能是什么原因?

@yijingping
Copy link
Member

你看downloader.py 输出什么东西?

如果没有配置代理,可以忽略“代理状态:异常”

@menfangwang
Copy link
Author

谢谢回答。好像是因为我没有设置关键字的原因。我本来以为是设置公众号后,可以爬取公众号的全部文章,但是现在好像是模拟打开搜狗的微信搜索,输入关键字就行搜索爬取。那之前设置的公众号有作用吗?

@yijingping
Copy link
Member

这是两个功能。 1 按公众号爬取最新的文章。只爬取第一页 2 按搜索关键字爬取。也只爬取第1页。 互相不冲突,如果有重复文章,会按url去重。

@liuyang66
Copy link

您好 我也在运行这四个脚本出现了问题 运行downloader.py 提示
raise EasyProcessCheckInstalledError(self)
easyprocess.EasyProcessCheckInstalledError: cmd=['Xvfb', '-help']
OSError=[Error 2]
Program install error!
目前能在网站上将要爬取的公众号和关键字添加 但是没有爬取到内容

@yijingping
Copy link
Member

@liuyang66 你是什么操作系统环境? 提示的是没有安装 Xvfb 这个库,这是个虚拟桌面的软件

@liuyang66
Copy link

我用windows上用chrome跑的 我需要安装什么或者修改代码哪些部分?

@yijingping
Copy link
Member

目前只能在mac os和centos上运行。 其它操作系统环境并没有做兼容性测试。 你需要改 bin/downloader.py 及其引用的相关脚本

@lanlove45
Copy link

在windows下怎么运行呢,windows下不能用xvfb吧?

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

4 participants