首页 > 解决方案 > 如何使用 crawler4J 从网站获取所有图像

问题描述

我想在java中创建一个程序,从需要使用网络爬虫登录信息的网站获取所有图像。我知道这可以使用 crawler4J 中的图像爬虫示例:https ://github.com/yasserg/crawler4j/tree/master/crawler4j-examples/crawler4j-examples-base/src/test/java/edu/uci/ics /crawler4j/examples/imagecrawler。但我不知道如何配置它,以便它使用我的凭据登录页面。我已经尝试过使用:

    String formUsername = "myUsername";
    String formPassword = "myPassword";
    String urlLogin = "myWebsite.xxx";
    String session_user = "Login";
    String session_password = "Password";

    AuthInfo authInfo = new FormAuthInfo(formUsername, formPassword, urlLogin, session_user, session_password );

    config.addAuthInfo(authInfo);

但是,这似乎不起作用。我真的可以在这方面使用一些帮助。谢谢

标签: javaimageweb-crawlercrawler4j

解决方案


推荐阅读