Python veya JavaScript ile sitelerden veri çekme yolları nelerdir?

yamankm · 15 Nisan 2022

Merhaba. Python veya JavaScript ile veri çekmek istiyorum bazı sitelerden istediğim veriyi API kullanarak veya API kullanmayarak kolaylıkla çekebiliyorum. Fakat bazı sitelerde iki yolu da bulamadım. Siteyi incele yaptığımda çıkan veriler kaynak koduna gittiğimde gözükmüyor. Bu verilere ulaşmanın bir yolu var mı?

Vavien. · 15 Nisan 2022

yamankm dedi:
Fakat bazı sitelerde iki yolu da bulamadım. Siteyi incele yaptığımda çıkan veriler kaynak koduna gittiğimde gözükmüyor.

Örnek site paylaşır mısınız? Hangi veri olduğunu da.

yamankm · 15 Nisan 2022

Vavien. dedi:
Örnek site paylaşır mısınız? Hangi veri olduğunu da.

Markr.io

markr.io

Çerçeveye aldığım kısımları almak istiyorum.

Str0ck3d · 15 Nisan 2022

JavaScript için cheerio, Python için BeautifulSoup kullanabilirsiniz.

Dynamics · 16 Nisan 2022

Verdiğin sitede veriler bir etkileşim sonucu gelmeye başlıyor, bunun için headless browser eklentisi bulunan modülleri kullanabilirsin, kazıma işlemi için xpath, class, label, css selector vb. gibi referansları kullanabilirsin, bunlar bazı web sitelerinde değişkendir, bu nedenle her web sitesi için farklı teknik uygulamak gerekebilir.

Ayrıca verdiğin web sitesi openocean api kullanarak o verileri çekiyor, sen de aynı şekilde çekebilirsin.

yamankm · 16 Nisan 2022

Dynamics dedi:
Verdiğin sitede veriler bir etkileşim sonucu gelmeye başlıyor, bunun için headless browser eklentisi bulunan modülleri kullanabilirsin, kazıma işlemi için xpath, class, label, CSS selector vb. gibi referansları kullanabilirsin, bunlar bazı web sitelerinde değişkendir, bu nedenle her web sitesi için farklı teknik uygulamak gerekebilir.

Ayrıca verdiğin web sitesi openocean API kullanarak o verileri çekiyor, sen de aynı şekilde çekebilirsin.

Python için bahsettiğiniz modüllerden önerebilir misiniz?
Biliyorsanız önerdiğiniz modüllerin eğitimini de atabilir misiniz?

Python veya JavaScript ile sitelerden veri çekme yolları nelerdir?

Ayrıntılı düzenleme

yamankm

Hectopat

Vavien.

Zettapat

yamankm

Hectopat

Markr.io

Str0ck3d

Decapat

Dynamics

Hectopat

yamankm

Hectopat

Benzer konular

Yeni konular

Yeni mesajlar

Gizliliğinize önem veriyoruz