Heritrix應(yīng)用問(wèn)題
請(qǐng)教一下大家如何用heritrix抓取以下網(wǎng)站內(nèi)容，需要定制么？
下面是USPTO的專利網(wǎng)頁(yè)：
http://patft.uspto.gov/netacgi/nph-Parser?Sect1=PTO2&Sect2=HITOFF&u=%2Fnetahtml%2FPTO%2Fsearch-adv.htm&r=0&f=S&l=50&d=PTXT&OS=+%28battery+OR+motor%29+AND+automobile&RS=%28%28battery+OR+motor%29+AND+automobile%29&Query=+%28battery+OR+motor%29+AND+automobile&TD=45309&Srch1=%28%28battery+OR+motor%29+AND+automobile%29&NextList1=Next+50+Hits
其中NextList1表示第一個(gè)50條信息的頁(yè)面，NextList2，NextList3，以此類推，在這些頁(yè)面中點(diǎn)擊每條超鏈接得到的是針對(duì)此條專利
信息的具體頁(yè)面，那么現(xiàn)在我如何設(shè)置heritrix，可以抓取到每頁(yè)50條，一共幾萬(wàn)條的這些具體專利信息頁(yè)面到本地呢？另外可否抓取的同時(shí)將html
格式轉(zhuǎn)換偽txt格式到本地？謝謝高手指點(diǎn)！
歡迎交流：
qq: 173635235
msn: bisal1130@yahoo.com.cn
email: bill1130@gmail.com