位置:绿色联盟 > 下载中心源码模版插件辅助→ 无语网站链接抓取器下载

无语网站链接抓取器 v20150416 绿色版 【网站链接抓取器下载】无语网站链接抓取器(提取网页全部超链接)

  • 运行环境:PC-windows操作系统
  • 软件语言:简体中文|授权方式:绿色版
  • 软件类型:国产软件 - 源码模版 - 插件辅助
  • 软件大小:949 KB
  • 下载星级:
  • 软件官网:暂无
  • 更新时间:2015/8/30 10:38:50
软件简介
本站提供绿色版的 无语网站链接抓取器,【网站链接抓取器下载】无语网站链接抓取器(提取网页全部超链接) 软件免费下载。

【软件截图】

无语网站链接抓取器

【基本介绍】

网站链接抓取器是一个整站链接抓取器, 它能把指定网站的全站页面地址抓取下来并保存成文件程序, 可用于制作网站地图、向搜索引擎提交网址和检查错误、收录等工作中

网站链接抓取器有什么用?

一、制作网站地图

使用软件保存的TXT。 直接上传到网站根目录就可以能够成为一个不复杂的TXT网站地图。

制作成网站地图后, 可到 http://zhanzhang.baidu.com/sitemap/index 来进行提交, 以增加收录。

二、手动提交网址

可以把软件抓取下来的链接我自己进行提交, 增加蜘蛛的爬取频率, 从而增加收录量。 可配合本站的“百度URL批量提交必备工具”一起使用。

三、检查失误

所谓的失误, 是指某些后台链接。 不想让用户知道的。 但是由于不小心就在程序的某个地方有该网页的链接自己没提醒一定要注意到。 这时候就可以使用软件把整个网站的链接抓取下来。 之后检查看看有没有敏感链接。

四、检查收录

可以查看一下百度对本站的索引量。 然后使用软件把网站的所有链接都抓取下来。 看看数量上的差距是否比较大。 如果差距过大, 则要注意是否空间不稳定stable或者文章质量太低或者暴光率太低

网站链接抓取器使用指南

1、打开软件, 输入有请求需要抓取的网站首页地址

2、布置设置线程数量。 (线程越少, 速度越慢, 耗CPU及网速越低, 越不容易漏掉链接。 线程越多, 速度越快, 耗CPU及网速越高, 漏抓取机率高。 )

3、选择中抓取后的链接保存地址。 (注:如果选择的TXT名称为 abc.txt的话。 软件会保存为 abc_*.txt 的形式)

4、选择每个TXT保存的条数。 (以第3条举例, 如果这里设置为5000, 当abc_1.txt保存的链接数到达5000, 后面的链接会全自动保存到abc_2.txt里, 依此类推。 )

5、现在开始

下载地址
软件说明
* 为了达到最快的下载速度,推荐使用迅雷下载
* 请一定升级到最新版WinRAR解压缩软件才能正常解压本站提供的软件!
* 站内提供的所有软件由网上搜集,若侵犯了你的版权利益,敬请来信通知我们!