Jsoup, чтобы сканировать страницы на мой локальный диск

0

Я работаю над поисковой системой, я хочу, чтобы jsoup веб-искатель, чтобы получить страницы с веб-сайта и сохранить их эти страницы на моем локальном жестком диске, C:\tmp, например. Можете ли вы помочь мне с этим

Благодаря ;)

  • 0
    Зачем использовать Jsoup? Скачать веб-страницу в виде HTML-файла и хранить там, где вы хотите?
  • 0
    Да, но я не хочу делать это вручную, я хочу, чтобы jsoup загружал страницы с одного веб-сайта за один раз
Теги:
web-crawler
jsoup
search
download

1 ответ

0

Вы можете попробовать это с помощью jsoup.

    try {
        Document doc = Jsoup.connect("http://en.wikipedia.org/wiki/Main_Page").get();
        String html = doc.html();
        BufferedWriter out = new BufferedWriter(new FileWriter("c:/tmp/wiki.html"));
        out.write(html);
        out.close();
    } catch (IOException e) {
        e.printStackTrace();
    }

Он создаст файл с именем wiki.html содержащий главную страницу wikipedia в каталоге c: /tmp/.

Ещё вопросы

Сообщество Overcoder
Наверх
Меню