Obwohl wir auf dieser Website im Allgemeinen keine Produktempfehlungen geben, würde ich Ihnen empfehlen, sich das Projekt J-Spider ( http://j-spider.sourceforge.net/ ) anzusehen . Dieses Produkt ermöglicht das vollständige Herunterladen von Websites sowie das Durchführen von Linktests, das Erstellen von Sitemap und alle möglichen Arten.
Es ist ein ziemlich nützliches Stück Kit.