One liner shell of the day : #10

Gara-gara mau nge-mirror website yang dengan konten tertentu yang aku suka, dan (sayangnya) website tersebut menggunakan robots.txt agar tidak bisa langsung di-crawl

Maka:
wget -cvrkK -e robots=off sitenya.com/disini

Keterangannya: kontinyu, verbose, rekursif, bentuk struktur direktori yang sama, pakai cookies yang tetap, dan matikan crawler robot

Yeah!

0 rants:

Posting Komentar