Python ile bir site dizinindeki dosyaları indirmek

CinarYilmaz · 3 Haziran 2021

Python ile MikeOS uygulamaları için paket yöneticisi gibi bir şey yapıyorum. example.com/default/m_test/ dizinindeki tüm dosyaları indirmem lazım. Nasıl yapabilirim?

oynozan · 3 Haziran 2021

Öncelikle yetkiniz olmayan bir sitede, dizindeki tüm dosyaları göremezsiniz. Eğer dizinde 403 yönlendirilmesi özellikle yapılmadıysa ve amaç zaten oradaki dosyaların indirilmesiyse yaparsınız. Demek istediğim şu gibi sayfalar:

Buradaki tüm dosyaları indirmek için Python Selenium kullanabilirsiniz. Selenium'da bulunan click event'i ile tüm <a> tag'lerini döngüye alıp hepsine click uygulayın. Bu şekilde indirebilirsiniz diye düşünüyorum.

Steve Rogers · 4 Haziran 2021

Python:

import requests
def download_file(url):
    local_filename = "dosya ismi de buraya vereceğiniz isim olacak"
    with requests.get(url, stream=True) as r:
        with open(local_filename, 'wb') as f:
            for chunk in r.iter_content(chunk_size=8192):
                    f.write(chunk)
    return local_filename

download_file("selenium ile de indirme linkini çekersiniz ve buraya yapıştırırsınız")

Böyle çalışması lazım, emin değilim ama.

Şu da iş görebilir: Python3 ile Dosya İndirmek

Python ile bir site dizinindeki dosyaları indirmek

Ayrıntılı düzenleme

CinarYilmaz

Hectopat

oynozan

Megapat

Steve Rogers

Kilopat

Benzer konular