fses

Fucking Search Engines Scraper - مكتبة بايثون لسحب عناوين URL من محركات البحث

محركات البحث التي نقوم بسحبها

Ask
Bing
DuckDuck GO
UOL
Yahoo

تثبيت

git clone https://github.com/mthbernardes/fses.git
cd fses
pip install -r requeriments.txt

الاستخدام

بحث بسيط باستخدام Ask

from searchEngines.ask import ask

print "Ask Search"
query = "site:domain.com" # تعيين دوك
a = ask() # إنشاء نسخة من أي محرك بحث
results = a.search(query,verbose=True) # كل الفئات تستخدم طريقة search، وverbose يستخدم للطباعة فقط، لأي صفحة يقوم السكريبت بسحبها
for url in results
	print url

جميع طرق محركات البحث

query = "site:domain.com"

from searchEngines.ask import ask
print "Ask Search"
results.extend(ask().search(query,verbose=verbose))

from searchEngines.uol import uol
print "UOL Search"
results.extend(uol().search(query,verbose=verbose))

from searchEngines.bing import bing
print "Bing Search"
results.extend(bing().search(query,verbose=verbose))

from searchEngines.yahoo import yahoo
print "Yahoo Search"
results.extend(yahoo().search(query,verbose=verbose))	

from searchEngines.duckduckgo import duckDuckGo
print "DuckDuckGo Search"
results.extend(duckDuckGo().search(query,verbose=verbose))

البحث باستخدام جميع محركات البحث

from utils import util
query = "site:conviso.com.br"
results = util.searchAll(query,verbose=False) #searchAll له نفس خصائص طريقة search
for url in results
	print url

كيفية إنشاء إضافة لمحرك بحث

ما عليك سوى اتباع searchEngines/example.py، فهو نموذج لكيفية إنشاء إضافة لمحرك بحث آخر.

تحية

GoogleINURL

jcesarstef