海量外链资源提取,无限制搜索结果抓取!
一米URL外链资源批量抓取工具
根据脚本从全球各大搜索引擎实时抓取URL,可用于群发,同类资源抓取,分析网站的外链等多种用途,自带VVPN资源,无需第三方代理即可抓取谷歌yahoo等国外搜索引擎结果.全网段蜘蛛爬取,同IP段网站获取等多种资源获取手段集成。
-
本软件要求电脑安装.NET4.5框架支持 (下载.NET4.5)
根据脚本从全球各大搜索引擎实时抓取URL,可用于群发,同类资源抓取,分析网站的外链等多种用途,自带VVPN资源,无需第三方代理即可抓取谷歌yahoo等国外搜索引擎结果.全网段蜘蛛爬取,同IP段网站获取等多种资源获取手段集成。
本软件要求电脑安装.NET4.5框架支持 (下载.NET4.5)
软件界面展示
搜索引擎抓取
全网蜘蛛抓取
同IP站点扫描
URL资源整理
功能优势
支持国内外多种搜索引擎类型,baidu.com,google.com,yahoo.com,bing.com,haosou.com,sougou.com等;
支持多脚本footprint+关键词抓取,自带匹配关键词库;
支持多线程抓取,自动延迟单个词最大提取页数设置;
支持本地切换VPN,断点续抓功能;
内置高匿名代理IP/专属代理支持,批量验证可用性,官方每天更新;
针对谷歌等可以使用搜索命令的引擎,可以更精准的使用搜索命令如:inurl:/wp-content/等获取资源,关于这类资源最好的获取方式还是直接手动从模拟浏览器中直接提取当前页链接,每页显示100条记录,软件也支持以此方式获取
导入初始的网址源数据,蜘蛛会在此基础上不断爬取整个互联网网址;
可根据设置的过滤URL规则过滤出需要的URL网址;
可验证存在某个特征URL的网站;
可限制是否只爬取站内网址及爬取数量;
可设置屏蔽站点,提高效率,防止爬取一些大型的无用站点;
自动过滤重复及提供识别email邮件提取;
一般像国外的服务器某个IP段下可能存在大量同类型cms的网站程序,该功能可实时监测出这些同类型的站点。
批量获取域名所在的所有IP段
根据IP段,调用bing的search api接口,扫描某个IP下的所有站点
支持多个bing的apikey秘钥轮换调用,绕过每月5000次限制。
可自动截断某个网址规则,比如要从所有url中过虑出“/wp-content/”类型,过滤后可自动截断网址,只保留唯一主域名,或获取主域后加入一段网址等格式;
可识别某个主域名下是否存在某页面,根据特征校验网址页面是否存在某字符判断存在,精准识别;
他们都在用
之前用论坛群发软件,内置的资源都被用烂了,在用一米软件搜刮最新群发资源导入群发还不错.
某外贸B2C用户
搞黑帽的,搜刮某类cms资源,你懂的
某黑帽SEO用户
找到一个好用的谷歌外链分析工具,几百个站同时分析,主要是不用另外购买vpn
某国外SEO客户