开发者 sitecrawler.sf.net

此 perl 脚本将抓取您的网站，并生成一个.xml文件，适合更新 google 网站管理员工具。也可以将它设置为对您的网站进行爬网，并自动 FTP 站点地图。适用于内容托管网站。正在进行中的工作！