FAllA

一款针对超过15个搜索引擎的CLI爬虫工具，包括Google、duckduckgo、Bing、Ask等。
注意： 仅用于教育目的，本人不对该工具的滥用负责！

环境要求

Python（3.x）
Docker-CE（并非所有搜索引擎都需要，仅部分搜索需要）

如何安装

你需要安装所有依赖：

pip3 install -r requirements.txt

安装geckodriver：

# For linux users
sudo apt install firefox-geckodriver

# For other OS's users, please check releases on https://github.com/mozilla/geckodriver/releases

从docker-hub拉取并运行splash-scrap模块（部分搜索引擎需要此模块）：

docker run -p 8050:8050 scrapinghub/splash

将 example.config.txt 重命名为 config.txt，并提供splash-scrap的运行IP

如何启动

如何使用Falla：

usage: main.py [-h] [-e ENGINE] [-q QUERY]

optional arguments:
  -h, --help            show this help message and exit
  -e ENGINE, --engine ENGINE
                        The search engine
  -q QUERY, --query QUERY
                        The query text

列出所有搜索引擎：

$ python3 -m app.main
# output
[+] Falla [the search-engine-scraper]
[+] Listing search-Engines
[+] > google
[+] > bing
[+] > aol
[+] > dogpile
[+] > falla
[+] > ask
[+] > qwant
[+] > duckduckgo
[+] > mojeek
[+] > gibiru
[+] > yandex
[+] > yahoo
[+] > searchencrypt
[+] > iem
[+] > kallasearch
[+] > wosx

搜索内容：

$ python3 -m app.main -e google -q "sanix darker"
# output

## 作者

Sanix-darker