Wget adalah alat baris perintah gratis dan mudah digunakan yang memungkinkan pengguna mengunduh file dari internet melalui protokol HTTP, HTTPS, FTP, dan FTPS. Ini dirancang untuk ketahanan, memungkinkan pengguna mengunduh file bahkan dengan koneksi internet yang buruk dan tidak stabil. Alat ini juga akan mencoba melanjutkan pengunduhan dari titik terakhirnya jika koneksi gagal. Selain itu, ia memiliki fitur pengunduhan rekursif yang berfungsi seperti perayap web. Ini mengekstrak file dari halaman HTML dan mengunduhnya secara berurutan hingga semua halaman telah diekstraksi, atau hingga kedalaman rekursi yang ditentukan pengguna tercapai. Halaman yang diunduh disimpan dalam struktur yang mirip dengan server jarak jauh. Selain itu, tautannya dapat disesuaikan dengan file offline untuk pencerminan situs web. Wget juga memiliki ketergantungan minimal pada perpustakaan pihak ketiga dan bersifat portabel, telah di-porting ke banyak lingkungan dan sistem mirip Unix seperti Windows, CygWin, dan macOS. Ini juga merupakan paket Windows asli dan berjalan tanpa memerlukan banyak interaksi pengguna.
Jadi mengapa Anda memerlukan proxy untuk Wget? Baca terus untuk mencari tahu.
Mengapa Anda Membutuhkan Proxy untuk Wget?
Menggunakan proxy dapat meningkatkan pengalaman Wget Anda secara signifikan. Untuk memahami alasannya, pertama-tama mari kita lihat cara kerja Wget. Misalnya, jika Anda menggunakan Wget untuk mengunduh satu file, beberapa file, menyelesaikan unduhan yang tidak lengkap, atau untuk aktivitas web scraping, ini akan dianggap sebagai aktivitas bot, dan IP Anda kemungkinan besar akan diblokir. Untuk menghindarinya, Anda bisa menggunakan server proxy. Proksi menutupi alamat IP Anda dengan masuk antara perangkat Anda dan situs web yang Anda akses dengan Wget. Jenis proxy yang Anda gunakan akan bergantung pada kebutuhan Anda. Selain itu, jika Anda mengalami kecepatan pengunduhan yang lambat, proxy yang lebih dekat ke server pengunduhan dapat mengurangi jumlah node serta meningkatkan bandwidth dan stabilitas. Pencarian kata kunci Google yang cepat akan mengungkapkan banyak jenis proxy, namun mungkin sulit untuk memilih yang terbaik.
Proxy Terbaik untuk Wget
Saat memilih proxy untuk Wget, penting untuk menghindari proxy gratis karena tidak dapat diandalkan dan berpotensi membahayakan data Anda. Sebaliknya, disarankan untuk menggunakan penyedia proxy premium seperti OneProxy. Antara proxy perumahan dan pusat data, ada beberapa pro dan kontra yang perlu dipertimbangkan. Proksi perumahan menggunakan IP asli dari penyedia layanan internet, menjadikannya dapat dilacak dan diandalkan. Di sisi lain, proxy pusat data menggunakan IP yang dihasilkan secara virtual melalui server cloud, membuatnya lebih mudah dideteksi, namun menawarkan kecepatan lebih cepat dan biaya lebih murah. OneProxy adalah penyedia proxy premium terkemuka dengan pengalaman bertahun-tahun di sektor ini dan solusi khusus untuk semua kebutuhan Anda.
Cara mengatur Proksi Wget
Kode di bawah ini akan membantu Anda menyiapkan proxy untuk Wget. Tambahkan baris di bawah ini dalam file ~/.wgetrc atau /etc/wgetrc:
http_proxy = http://[Proxy_Server]:[pelabuhan]
https_proxy = http://[Proxy_Server]:[pelabuhan]
ftp_proxy = http://[Proxy_Server]:[pelabuhan]
Siapkan variabel proksi secara manual di shell:
Ekspor $ http_proxy=http://[Proxy_Server]:[pelabuhan]
Ekspor $ https_proxy=$http_proxy
$ ekspor ftp_proxy=$http_proxy
Verifikasi variabel menggunakan perintah env:
$ env | grep proksi
http_proxy=http://[Proxy_Server]:[pelabuhan]
https_proxy=http://[Proxy_Server]:[pelabuhan]
ftp_proxy=http://[Proxy_Server]:[pelabuhan]
Terakhir, tambahkan baris di bawah ini dalam file ~/.bash_profile atau /etc/profile:
#export http_proxy=http://[Proxy_Server]:[pelabuhan]
#export https_proxy=http://[Proxy_Server]:[pelabuhan]
#export ftp_proxy=http://[Proxy_Server]:[pelabuhan]
!= ” != ”