Python Selenium büyük veri kazıması için ne kadar uygun?

Büyük bir veriyi çekmek için normalde scrapy kullanacaktım ancak istediğim gibi çalıştıramadım ve sunucu Request'imi engelliyor. Selenium ile küçük bir parçayı scrape etmeye çalıştığımda sorun yaşamadım ancak büyük verilerde çalışacağından emin değilim. Sizce uygun mu yoksa scrapy üzerinde çalışmaya devam mı etmeliyim veya Beautiful Soup gibi alternatiflere de bakmalı mıyım? (Beautiful Soup hiç kullanmadım)

Selenium UI dan data cekmek icin JS engine calistirmak zorunda kaldigin niş senaryolar disinda gereksiz. O da zaten big data degil.