一米u(yù)rl外鏈抓取軟件是一款站分分析網(wǎng)站外鏈必備工具，通過該軟件可以幫助用戶分析某個(gè)網(wǎng)站的外鏈，從搜索引擎提取某類網(wǎng)站的URL等等，功能非常的多喲，需要的朋友趕緊來綠色資源網(wǎng)下載吧

功能特色

可驗(yàn)證存在某個(gè)特征URL的網(wǎng)站；

可限制是否只爬取站內(nèi)網(wǎng)址及爬取數(shù)量；

可設(shè)置屏蔽站點(diǎn)，提高效率，防止爬取一些大型的無用站點(diǎn)；

自動(dòng)過濾重復(fù)及提供識別email郵件提??；

C段同IP旁站掃描獲取

一般像國外的服務(wù)器某個(gè)IP段下可能存在大量同類型cms的網(wǎng)站程序，該功能可實(shí)時(shí)監(jiān)測出這些同類型的站點(diǎn)。

批量獲取域名所在的所有IP段

根據(jù)IP段，調(diào)用bing的search api接口，掃描某個(gè)IP下的所有站點(diǎn)

支持多個(gè)bing的apikey秘鑰輪換調(diào)用，繞過每月5000次限制。

多種方式URL外鏈資源整理！

可自動(dòng)截?cái)嗄硞€(gè)網(wǎng)址規(guī)則，比如要從所有url中過慮出“/wp-content/”類型，過濾后可自動(dòng)截?cái)嗑W(wǎng)址，只保留唯一主域名，或獲取主域后加入一段網(wǎng)址等格式；

可識別某個(gè)主域名下是否存在某頁面，根據(jù)特征校驗(yàn)網(wǎng)址頁面是否存在某字符判斷存在，精準(zhǔn)識別；

軟件說明

谷歌百度等絕大多數(shù)搜索引擎腳本(footprint)抓取URL；

支持手工瀏覽器獲取url，自動(dòng)過濾重復(fù)url或域名；

全網(wǎng)段蜘蛛爬取分析過濾URL，全球海量url資源爬??；

同IP段網(wǎng)站批量掃描（C段掃描）；

多種方式外鏈資源整理(去重/識別/過濾)；

一米URL外鏈資源批量抓取工具主要功能

多搜索引擎抓取支持,自動(dòng)/手動(dòng)抓取支持,靈活快速批量抓??！

支持國內(nèi)外多種搜索引擎類型，baidu.com,google.com,yahoo.com,bing.com,haosou.com,sougou.com等;

支持多腳本footprint+關(guān)鍵詞抓取，自帶匹配關(guān)鍵詞庫；

支持多線程抓取，自動(dòng)延遲單個(gè)詞最大提取頁數(shù)設(shè)置；

支持本地切換VPN，斷點(diǎn)續(xù)抓功能；

內(nèi)置高匿名代理IP/專屬代理支持，批量驗(yàn)證可用性，官方每天更新；

針對谷歌等可以使用搜索命令的引擎，可以更精準(zhǔn)的使用搜索命令如:inurl:/wp-content/等獲取資源，關(guān)于這類資源最好的獲取方式還是直接手動(dòng)從模擬瀏覽器中直接提取當(dāng)前頁鏈接，每頁顯示100條記錄，軟件也支持以此方式獲取

全網(wǎng)段蜘蛛爬取過濾,模擬蜘蛛爬蟲，抓取整個(gè)互聯(lián)網(wǎng)！

導(dǎo)入初始的網(wǎng)址源數(shù)據(jù)，蜘蛛會在此基礎(chǔ)上不斷爬取整個(gè)互聯(lián)網(wǎng)網(wǎng)址；

可根據(jù)設(shè)置的過濾URL規(guī)則過濾出需要的URL網(wǎng)址；