web - 如何查找网页的所有非链接子站点？

Question

有没有办法找到一个站点的所有子站点？即使是本网站未引用的那些。

例如：我有网站www.foofoo.de，这个网站有 3 个子网站 - www.foofoo.de/horse、www.foofoo.de/dog、www.foofoo.de/mouse。站点www.foofoo.de有到/horse和/dog的链接，但没有到 /mouse 的链接。但是，如果我专门将此地址写入我的网络浏览器，我仍然可以访问网站www.foofoo.de/mouse 。

有什么办法，如果我不知道它的完整地址，我可以找到这个子网站，只是www.foofoo.de？

谢谢

标签： web

Answer 1

您可以尝试找出它是否有站点地图。要么将其设置为公开且对 www.foofoo.de/sitemap 上的用户可见，要么作为网络服务器上的文件，可供 google 之类的机器人访问，例如 www.foofoo.de/sitemap.xml

但是所有者可以决定他们想在站点地图上列出哪些站点。