大型网站(页数)的站点地图可视化

11
我正在寻找一个工具或服务,可以爬取一个包含大量页面的网域,创建站点地图,然后以一种能帮助我查看、理解和分组内容的方式进行可视化(对该网站我还不太熟悉)。类似树形视图或其他标准站点地图的可视化效果将是很棒的。我还未能找到这样的工具(我找到了很多爬取网站并创建 XML 文件的工具,但没有可视化它的)。
谢谢!

只是出于好奇,什么样的规模才算大?100页?1000?10000?还是更多? - juniper-
3个回答

2

软件Gephi及其插件之一正好提供您所需的功能。


1

对于可视化,您可以使用D3.js进行检查。

例如力导向图


0

使用Site Visualizer软件,您可以可视化网站结构。

下载并安装该软件,然后创建新项目并单击“开始”工具按钮。当网站被爬取后,打开“可视化站点地图”选项卡并单击“绘制”按钮。网站的可视化地图将被创建为一组页面(矩形)和链接(箭头)。单击矩形以突出显示页面的所有外部链接。您还可以将此可视化保存为图像文件:png、jpg、bmp等。

site map visualization


这个程序在我尝试在一个大网站上使用时导致了我的电脑崩溃。第二次尝试结果相同。 - davidcondrey
你想要爬取的网站是什么? - Oleg
@dcc,您还可以联系支持团队,我们将帮助您爬取任何网站。 - Oleg

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接