__
   __    _ _(_ )   __  _ __ 
 /'_ '\/'_' )| | /'__'( '__)
( (_) ( (_| || |(  ___| |
'\__  '\__,_(___'\____(_)
( )_) |
 \___/'  @dwisiswant0

▶ (sudo) curl -sSfL https://git.io/galer | sh -s -- -b /usr/local/bin

▶ go install -v github.com/dwisiswant0/galer@latest

▶ git clone https://github.com/dwisiswant0/galer
▶ cd galer
▶ go build .
▶ (sudo) install galer /usr/local/bin

▶ galer -u "http://domain.tld"

$ galer -h

             __   v0.2.0
   __    _ _(_ )   __  _ __
 /'_ '\/'_' )| | /'__'( '__)
( (_) ( (_| || |(  ___| |
'\__  '\__,_(___'\____(_)
( )_) |
 \___/'  @dwisiswant0

Un outil rapide pour récupérer les URL à partir d'attributs HTML par crawl-in

Utilisation :
  galer -u [URL|URLs.txt] -o [output.txt]

Options :
  -u, --url <URL/FICHIER>        Cible à récupérer (URL unique ou liste)
  -e, --extension <EXT>          Afficher uniquement certaines extensions (séparées par des virgules, ex. js,php)
  -c, --concurrency <N>          Niveau de concurrence (défaut : 50)
  -w, --wait <N>                 Attendre N secondes avant d'évaluer (défaut : 1)
  -d, --depth <N>                Profondeur max. pour le crawling (niveaux de liens à suivre)
      --same-host                Même hôte uniquement
      --same-root                Même racine (eTLD+1) uniquement (prioritaire sur --same-host)
  -o, --output <FICHIER>         Sauvegarder les URL récupérées dans un fichier
  -T, --template <chaîne>        Format pour le modèle de sortie (ex., "{{scheme}}://{{host}}{{path}}")
                                 Variables valides : "raw_url", "scheme", "user", "username",
                                 "password", "host", "hostname", "port", "path", "raw_path",
                                 "escaped_path", "raw_query", "fragment", "raw_fragment".
  -t, --timeout <N>              Temps max. (secondes) autorisé pour la connexion (défaut : 60)
  -s, --silent                   Mode silencieux (supprime les erreurs)
  -v, --verbose                  Mode verbeux affiche les détails des erreurs sauf si le mode silencieux est utilisé
  -h, --help                     Affiche cette aide

▶ galer -u "http://domain.tld"

▶ galer -u /path/to/urls.txt

▶ cat urls.txt | galer

▶ subfinder -d domain.tld -silent | httpx -silent | galer

▶ go get github.com/dwisiswant0/galer/pkg/galer@latest

package main

import (
	"fmt"

	"github.com/dwisiswant0/galer/pkg/galer"
)

func main() {
	cfg := &galer.Config{
		Timeout: 60,
	}
	cfg = galer.New(cfg)

	run, err := cfg.Crawl("https://twitter.com")
	if err != nil {
		panic(err)
	}

	for _, url := range run {
		fmt.Println(url)
	}
}