链接抓取推送系统

链接抓取推送系统

链接抓取推送系统提供云服务和私有化部署两种方式。

云服务，使用微视界启示录（微视界俱乐部）提供的云服务，按量使用

私有部署方式，程序安装在您的服务器上，无限制使用；支持终身授权与按年授权两种方式，私有部署支持二次分发，可在设置用户的使用权限，包含网站数量，抓取数量等。

云平台

私有化部署

咨询1217179982

成都机房-弃用

绵阳机房

网站地图制作

链接长度过滤;
链接nofollow过滤;
按目录、后缀、关键词过滤，支持排除指定关键词或者包含指定关键词;
定位抓取异常链接首次出现的页面，方便排查错误链接;
自定义抓取线程;
自定义XML地图文件链接数量;
支持 XML、TXT、HTML、异常链接CSV报表导出。

网页监控

自定义扫描频率;
快速提取新链接，做后续处理（比如推送）。

链接推送

百度普通推送;
百度快速收录推送;
神马MIP推送;
断点续推
对于大型网站几十万几百万甚至更多的链接数，当天没推送完成的，第二天第一时间继续推送。