Your browser does not support JavaScript! Janisec SE Project ~~ Burtay.Org
    Follow @burtay  
  +31-653-420-829

Janisec SE Project

   

Oluşturma Tarihi : 12.05.2015 21:02:50
Son Güncelleme   : 20.11.2017 17:47:44

yaklaşık 10 gündür yeni bi proje üzerinde çalışıyorum.Janisec Search Engine.Bu proje ile kendi arama spesific arama motorumu üretmeye çalışıyorum.Tabi siyah beyaz her renkten içerik olacak motorun içinde.Amaçta bu zaten.ilk başta algoritma kurmada çok zorlandım.Basit bi webcrawler gibi düşünmüştüm başta ama ilerledikçe kurduğum algoritmaların ne kadar saçma olduğunu , istediğim projeninde webcrawler olmadığını gördüm.istediğim projede ip adresinden yayın yapan siteler,kullandıkları scriptler ve versiyonları,kullandığı panel(Cpanel,Plesk vb) SSH,FTP,SMTP,IMAP,POP3 girişlerinde ufaka kaba kuvvetler ve bu prokoller için kullanılan server versiyonları,yayın yapan adreslerin iç ve dış bağlantıları vb bütün özellikleri bu projenin içinde olmasını hedefliyordum.Bu yüzden sil baştan bir kaç defa algoritma kurdum.Şuan sadece webcrawler kısmı bitti ve yaptığım testlerde stabil olarak çalıştığını gördüm.tek site üzerinde 10 dakikada 37bin unique iç link 200 küsür uniqu dış link bulduğu bir hız testi yaptım.veritabanı olarak Mysql kullandım.Yayına açtığımız zaman şu şekilde aramalar yapabileceksiniz;

xxx.xx.xx.xx ip adresinden yayın yapan Versiyonu 4.1den büyük XXX pluginini kullanan Wordpress siteleri ekrana getir

xxx.com adresinde ki iç ve js ve cssler

xxx.com adresindeki resimler

openssh 6.1 ve daha eski versiyonlar kullanan linux sunucular


Ilk başta bütün bu işlerin hepsini tek bir programın yapmasını planlamıştım lakin kaynak israfı ve çok saçma olduğunu gördüm.Şimdi ise amacım ortak bir veritabanında her bir işlem için ayrı ayrı botlar ve serverlar kullanmak.Daha hızlı ve daha effective olacağını umuyorum.Webcrawler bota dair ufak bir video