Arama Motoru Nasıl Yapılır?

Herkese merhaba, Google, Yandex, Bing vb. gibi arama motoru yapmak istiyorum. Ekip halinde çalışmamızda olabilir. Bu tür motorlar yapmak için nasıl bir yol izlemeliyiz? Bilgilendiren ve fikrini paylaşan arkadaşlar için şimdiden teşekkürler. Bu arada web programlama hakkında bilgim var. Daha önce de oyun geliştirmiştim. Bu konularda az da olsa bilgim var.

Arama motoru yapmak için büyük bir sunucuya ihtiyacınız var.

Sanırım ilk olarak bir crawler yazmanız gerek. Bu crawler web sitelerini her gün tarayıp yeni içerik geldiğinde bunu veritabanına alacak. Daha sonra insanlar arama yapınca veritabanından bilgiler çekilecek. En basit mantık budur.

Recep Baltaş'ında söylediği gibi teoride her şey kolay. Pratikte işler nasıl gider bilemiyorum.

Recep Baltaş dedi:

Sanırım ilk olarak bir crawler yazmanız gerek. Bu crawler web sitelerini her gün tarayıp yeni içerik geldiğinde bunu veritabanına alacak. Daha sonra insanlar arama yapınca veritabanından bilgiler çekilecek. En basit mantık budur.

Genişletmek için tıkla...

Crawler'ı hangi kodlama dilinde yazmamız gerekiyor?