日韩高清在线免费不卡性生活毛片,亚洲av综合第一页,亚洲美女被操,一级无遮挡理论片

URL外鏈資源批量抓取工具下載 最新軟件|熱門排行|軟件分類|軟件專題|廠商大全

您的位置: 首頁網(wǎng)絡(luò)軟件站長工具 → 一米u(yù)rl外鏈抓取軟件 v0603 綠色版

一米u(yù)rl外鏈抓取軟件

v0603 綠色版 一米u(yù)rl外鏈抓取軟件 網(wǎng)友評分:8

同類相關(guān)軟件

軟件介紹

軟件標(biāo)簽: 外鏈抓取 外鏈

一米u(yù)rl外鏈抓取軟件是一款站分分析網(wǎng)站外鏈必備工具,通過該軟件可以幫助用戶分析某個(gè)網(wǎng)站的外鏈,從搜索引擎提取某類網(wǎng)站的URL等等,功能非常的多喲,需要的朋友趕緊來綠色資源網(wǎng)下載吧

功能特色

可驗(yàn)證存在某個(gè)特征URL的網(wǎng)站;

可限制是否只爬取站內(nèi)網(wǎng)址及爬取數(shù)量;

可設(shè)置屏蔽站點(diǎn),提高效率,防止爬取一些大型的無用站點(diǎn);

自動(dòng)過濾重復(fù)及提供識別email郵件提??;

C段同IP旁站掃描獲取

一般像國外的服務(wù)器某個(gè)IP段下可能存在大量同類型cms的網(wǎng)站程序,該功能可實(shí)時(shí)監(jiān)測出這些同類型的站點(diǎn)。

批量獲取域名所在的所有IP段

根據(jù)IP段,調(diào)用bing的search api接口,掃描某個(gè)IP下的所有站點(diǎn)

支持多個(gè)bing的apikey秘鑰輪換調(diào)用,繞過每月5000次限制。

多種方式URL外鏈資源整理!

可自動(dòng)截?cái)嗄硞€(gè)網(wǎng)址規(guī)則,比如要從所有url中過慮出“/wp-content/”類型,過濾后可自動(dòng)截?cái)嗑W(wǎng)址,只保留唯一主域名,或獲取主域后加入一段網(wǎng)址等格式;

可識別某個(gè)主域名下是否存在某頁面,根據(jù)特征校驗(yàn)網(wǎng)址頁面是否存在某字符判斷存在,精準(zhǔn)識別;

軟件說明

谷歌百度等絕大多數(shù)搜索引擎腳本(footprint)抓取URL;

支持手工瀏覽器獲取url,自動(dòng)過濾重復(fù)url或域名;

全網(wǎng)段蜘蛛爬取分析過濾URL,全球海量url資源爬??;

同IP段網(wǎng)站批量掃描(C段掃描);

多種方式外鏈資源整理(去重/識別/過濾);

一米URL外鏈資源批量抓取工具主要功能

多搜索引擎抓取支持,自動(dòng)/手動(dòng)抓取支持,靈活快速批量抓??!

支持國內(nèi)外多種搜索引擎類型,baidu.com,google.com,yahoo.com,bing.com,haosou.com,sougou.com等;

支持多腳本footprint+關(guān)鍵詞抓取,自帶匹配關(guān)鍵詞庫;

支持多線程抓取,自動(dòng)延遲單個(gè)詞最大提取頁數(shù)設(shè)置;

支持本地切換VPN,斷點(diǎn)續(xù)抓功能;

內(nèi)置高匿名代理IP/專屬代理支持,批量驗(yàn)證可用性,官方每天更新;

針對谷歌等可以使用搜索命令的引擎,可以更精準(zhǔn)的使用搜索命令如:inurl:/wp-content/等獲取資源,關(guān)于這類資源最好的獲取方式還是直接手動(dòng)從模擬瀏覽器中直接提取當(dāng)前頁鏈接,每頁顯示100條記錄,軟件也支持以此方式獲取

全網(wǎng)段蜘蛛爬取過濾,模擬蜘蛛爬蟲,抓取整個(gè)互聯(lián)網(wǎng)!

導(dǎo)入初始的網(wǎng)址源數(shù)據(jù),蜘蛛會在此基礎(chǔ)上不斷爬取整個(gè)互聯(lián)網(wǎng)網(wǎng)址;

可根據(jù)設(shè)置的過濾URL規(guī)則過濾出需要的URL網(wǎng)址;

軟件截圖

下載地址 電腦版

用戶評論

熱門評論

最新評論

發(fā)表評論 查看所有評論(0)

昵稱:
請不要評論無意義或臟話,我們所有評論會有人工審核.
字?jǐn)?shù): 0/500 (您的評論需要經(jīng)過審核才能顯示)