Web Sitesinden Veri Çekmek
- Konuyu başlatan emin99
- Başlangıç Tarihi
- Mesaj 15
- Görüntüleme 5.033
Daniel Saddler
Hectopat
- Katılım
- 15 Temmuz 2017
- Mesajlar
- 738
- Makaleler
- 1
- Çözümler
- 3
Daha fazla
- Cinsiyet
- Erkek
Daha detaylı olur musunuz? Hangi dili kullanmayı planlıyorsunuz? Node.js, PHP..?
- Katılım
- 1 Haziran 2014
- Mesajlar
- 1.887
- Makaleler
- 6
- Çözümler
- 5
Daha fazla
- Cinsiyet
- Erkek
- Meslek
- Software Developer
Konuyu 'Web Programlama' bolumune actiginiza gore hazir bi' arac kullanmak istemediginizi dusunuyorum.
Python ile Scrapy | A Fast and Powerful Scraping and Web Crawling Framework aracini kullanarak kolay bir sekilde istediginiz datayi alabilir, istediginiz gibi cikti alabilirsiniz. Bunu da kullanmak istemiyorsaniz tum veriyi cekip 'Beautifulsoup' kutuphanesiyle parse edebilirsiniz.
Python ile Scrapy | A Fast and Powerful Scraping and Web Crawling Framework aracini kullanarak kolay bir sekilde istediginiz datayi alabilir, istediginiz gibi cikti alabilirsiniz. Bunu da kullanmak istemiyorsaniz tum veriyi cekip 'Beautifulsoup' kutuphanesiyle parse edebilirsiniz.
.Ustam şöyle veriyi direk programla çekilebiliyor mu... Benimde ilgim var bu konulara ancak pek beceremiyorum direk veriyi çeken programlar var mı acaba... Misal a sayfasındaki verileri tümünü çekip xml olarak kullanmak istiyorum bunu yapabilen program mevcut mudur acaba?
- Katılım
- 1 Haziran 2014
- Mesajlar
- 1.887
- Makaleler
- 6
- Çözümler
- 5
Daha fazla
- Cinsiyet
- Erkek
- Meslek
- Software Developer
@habib723
Bunun icin bildigim kadariyla cok fazla seceneginiz yok. Scrapy'nin bi hizmeti vardi yanlis hatirlamiyorsam. Ornegin Amazon.com'un urun detay sayfasini veriyorsunuz, veriyi istediginiz formatta size veriyor.
Cok basarili olduklarini soyleyemem. Populer olmayan sitelerde hatali calisiyorlar.
Bunun disinde elinizde istediginiz verileri sayfadan gorsel olarak sectiginiz hizmetler de var fakat cok pahalilar. Programlama ogrenirken harcadiginiz zaman maliyeti daha az olcaktir muhtemelen, ayni sekilde bunlar da cok kullanisli arayuzlere sahip degiller.
PHP + herhangi bir DOM parser kutuphanesiyle isinizi hizlica cozebilirsiniz bence. Ister database'e kaydedin, ister XML formatta cikti alin.
PHP karmasik geliyorsa Python veya NodeJS de epey kolay syntax'a sahip diller. Tercih size kalmis durumda.
Bunun icin bildigim kadariyla cok fazla seceneginiz yok. Scrapy'nin bi hizmeti vardi yanlis hatirlamiyorsam. Ornegin Amazon.com'un urun detay sayfasini veriyorsunuz, veriyi istediginiz formatta size veriyor.
Cok basarili olduklarini soyleyemem. Populer olmayan sitelerde hatali calisiyorlar.
Bunun disinde elinizde istediginiz verileri sayfadan gorsel olarak sectiginiz hizmetler de var fakat cok pahalilar. Programlama ogrenirken harcadiginiz zaman maliyeti daha az olcaktir muhtemelen, ayni sekilde bunlar da cok kullanisli arayuzlere sahip degiller.
PHP + herhangi bir DOM parser kutuphanesiyle isinizi hizlica cozebilirsiniz bence. Ister database'e kaydedin, ister XML formatta cikti alin.
PHP karmasik geliyorsa Python veya NodeJS de epey kolay syntax'a sahip diller. Tercih size kalmis durumda.
Proxy kullanır.Yazdığınız/kodunuz çalışır taa ki Epey.com admin'lerı sizin IP adresinizi bandwidth yüzünden engelleyene kadar
