神箭手是一款強(qiáng)大的數(shù)據(jù)抓取工具,能夠幫助用戶快速、高效地獲取互聯(lián)網(wǎng)上的各種數(shù)據(jù),無(wú)論是網(wǎng)頁(yè)內(nèi)容、圖片、視頻還是其他格式的文件,都可以通過(guò)神箭手輕松抓取并保存到本地,用戶只需簡(jiǎn)單設(shè)置參數(shù),即可實(shí)現(xiàn)定時(shí)抓取、批量抓取等功能,大大提高了數(shù)據(jù)獲取的效率和準(zhǔn)確性,神箭手還支持多種抓取模式,包括智能識(shí)別、精確定位等,滿足用戶對(duì)不同類(lèi)型數(shù)據(jù)的需求。
使用說(shuō)明
步驟一 登錄神箭手
打開(kāi)安裝好的神箭手官方版,輸入神箭手賬號(hào)和密碼,登錄進(jìn)入控制臺(tái)
步驟二 創(chuàng)建點(diǎn)選模式的爬蟲(chóng)
點(diǎn)擊 “新建應(yīng)用” > 選擇 “爬蟲(chóng)”,點(diǎn)擊 “下一步” > 選擇 “自己開(kāi)發(fā)” > 選擇 “點(diǎn)選模式”。輸入爬蟲(chóng)名稱(chēng),點(diǎn)擊”創(chuàng)建”
步驟叁 點(diǎn)選要爬取的數(shù)據(jù)
1、 打開(kāi)創(chuàng)建的爬蟲(chóng),進(jìn)入 打開(kāi)點(diǎn)選面板
2、在點(diǎn)選面板中,進(jìn)行 點(diǎn)選操作
首先,輸入一個(gè)包含所需數(shù)據(jù)的url,回車(chē)加載顯示內(nèi)容:
然后,在顯示的網(wǎng)頁(yè)內(nèi)容中,點(diǎn)擊選擇要采集的數(shù)據(jù),比如選擇采集文章的標(biāo)題和內(nèi)容:
點(diǎn)擊左側(cè)的高級(jí)設(shè)置,可以設(shè)置爬蟲(chóng)的列表頁(yè)、內(nèi)容頁(yè)url正則表達(dá)式、是否自動(dòng)JS渲染等,提高爬蟲(chóng)效率:
步驟四 啟動(dòng)爬蟲(chóng)
完成點(diǎn)選后,點(diǎn)擊 開(kāi)始爬取。稍等一會(huì),爬蟲(chóng)就會(huì)自動(dòng)開(kāi)始運(yùn)行了
軟件性能
可伸縮的集群設(shè)計(jì) 滿足不同爬取規(guī)模的需求
經(jīng)過(guò)兩年多的迭代和積淀,神箭手系統(tǒng)架構(gòu)已經(jīng)發(fā)展成一個(gè)成熟穩(wěn)定的高可用、高伸縮的分布式系統(tǒng)架構(gòu),現(xiàn)在已經(jīng)能很好地保證神箭手公有云業(yè)務(wù)的穩(wěn)定。
靈活的部署 /可在單機(jī)部署,可在企業(yè)機(jī)房?jī)?nèi)部署,也可在云上(阿里云、AWS等)部署
靈活的伸縮 /集群可靈活伸縮,新機(jī)器運(yùn)行服務(wù)即可擴(kuò)展,殺掉服務(wù)即可摘除
高性能優(yōu)化 /針對(duì)高頻率的數(shù)據(jù)爬取有相應(yīng)的優(yōu)化
完善的協(xié)作機(jī)制 支持多租戶管理
協(xié)作機(jī)制可以實(shí)現(xiàn)企業(yè)或組織內(nèi)不同部門(mén)、不同人員的工作分配和協(xié)同,有助于賬號(hào)信息保護(hù)和分工協(xié)作。
多群組 /支持創(chuàng)建群組,不同群組可分配不同權(quán)限
多角色 /支持創(chuàng)建者、開(kāi)發(fā)者、使用者、訪客四種角色,滿足不同的權(quán)限分配需求
靈活的權(quán)限 /租戶可通過(guò)群組繼承權(quán)限,也可以以應(yīng)用為單位單獨(dú)設(shè)置權(quán)限
獨(dú)特焦點(diǎn)
1、不需要了解大數(shù)據(jù)算法和分布式原理,開(kāi)發(fā)者平均上手時(shí)間一天
2、計(jì)算和存儲(chǔ)資源可按需購(gòu)買(mǎi),同時(shí)支持私有云部署,滿足不同階段的開(kāi)發(fā)需求
3、神箭手提供簡(jiǎn)單靈活的腳本語(yǔ)言開(kāi)發(fā)接口,以及豐富的實(shí)戰(zhàn)教程和示例代碼
4、神箭手擁有分布式云集群,快速穩(wěn)定、按需擴(kuò)展
安裝提示
1、我們?cè)谙螺d該軟件,獲得一個(gè)壓縮包,對(duì)其進(jìn)行解壓,得到exe文件,雙擊進(jìn)入軟件安裝界面
2、閱讀許可證協(xié)議,閱讀完畢后點(diǎn)擊我接受
3、接著就可以看到默認(rèn)安裝位置在C盤(pán),我們點(diǎn)擊“瀏覽”來(lái)更改安裝位置
4、軟件正在安裝中,請(qǐng)耐心等待軟件安裝完畢
5、在D盤(pán)選擇一個(gè)位置,并“確定”