Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

只能爬取第一页的数据 #99

Open
yutian81 opened this issue Oct 1, 2024 · 3 comments
Open

只能爬取第一页的数据 #99

yutian81 opened this issue Oct 1, 2024 · 3 comments

Comments

@yutian81
Copy link

yutian81 commented Oct 1, 2024

只能爬取第一页的数据，到第二页就失败

image

而且输出的文件名是随机的，参数中指定的不生效

例如我指定的参数是 --outputname fofa --output csv，但输出的文件名是final_c10c71285eca2a69b6aef1708143b036_1727776801.csv
@Cl0udG0d
Copy link
Owner

这个问题我觉得是因为fofa官方加强了他们的反爬措施导致的

@yutian81
Copy link
Author

这个问题我觉得是因为fofa官方加强了他们的反爬措施导致的

大佬，这个问题有解决方案吗？

@Cl0udG0d
Copy link
Owner

这个问题我觉得是因为fofa官方加强了他们的反爬措施导致的

大佬，这个问题有解决方案吗？

封禁IP的方法可以通过代理的方式

验证码的方式可以通过自动打码工具

但是这些方法会让fofa-hack整体臃肿，而且效果也不好，所以从这个角度上来说，我觉得是没解决方案的

至少说爬虫的方式已经失效了

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees
No one assigned
Labels
None yet
Projects
None yet
Milestone
No milestone
Development

No branches or pull requests
2 participants
@Cl0udG0d @yutian81