java - 如何使用 crawler4J 从网站获取所有图像
问题描述
我想在java中创建一个程序,从需要使用网络爬虫登录信息的网站获取所有图像。我知道这可以使用 crawler4J 中的图像爬虫示例:https ://github.com/yasserg/crawler4j/tree/master/crawler4j-examples/crawler4j-examples-base/src/test/java/edu/uci/ics /crawler4j/examples/imagecrawler。但我不知道如何配置它,以便它使用我的凭据登录页面。我已经尝试过使用:
String formUsername = "myUsername";
String formPassword = "myPassword";
String urlLogin = "myWebsite.xxx";
String session_user = "Login";
String session_password = "Password";
AuthInfo authInfo = new FormAuthInfo(formUsername, formPassword, urlLogin, session_user, session_password );
config.addAuthInfo(authInfo);
但是,这似乎不起作用。我真的可以在这方面使用一些帮助。谢谢