__
   __    _ _(_ )   __  _ __ 
 /'_ '\/'_' )| | /'__'( '__)
( (_) ( (_| || |(  ___| |
'\__  '\__,_(___'\____(_)
( )_) |
 \___/'  @dwisiswant0

▶ (sudo) curl -sSfL https://git.io/galer | sh -s -- -b /usr/local/bin

▶ go install -v github.com/dwisiswant0/galer@latest

▶ git clone https://github.com/dwisiswant0/galer
▶ cd galer
▶ go build .
▶ (sudo) install galer /usr/local/bin

▶ galer -u "http://domain.tld"

$ galer -h

             __   v0.2.0
   __    _ _(_ )   __  _ __
 /'_ '\/'_' )| | /'__'( '__)
( (_) ( (_| || |(  ___| |
'\__  '\__,_(___'\____(_)
( )_) |
 \___/'  @dwisiswant0

HTML विशेषताओं से crawl करके URL प्राप्त करने का एक तेज़ उपकरण

Usage:
  galer -u [URL|URLs.txt] -o [output.txt]

Options:
  -u, --url <URL/FILE>        लक्ष्य लाएँ (एकल लक्ष्य URL या सूची)
  -e, --extension <EXT>       केवल निश्चित एक्सटेंशन दिखाएँ (अल्पविराम से अलग, जैसे js,php)
  -c, --concurrency <N>       समवर्तता स्तर (डिफ़ॉल्ट: 50)
  -w, --wait <N>              मूल्यांकन से पहले N सेकंड प्रतीक्षा करें (डिफ़ॉल्ट: 1)
  -d, --depth <N>             क्रॉलिंग के लिए अधिकतम गहराई (अनुसरण करने के लिए लिंक के स्तर)
      --same-host             केवल एक ही होस्ट
      --same-root             केवल एक ही रूट (eTLD+1) (--same-host पर प्राथमिकता लेता है)
  -o, --output <FILE>         प्राप्त URL आउटपुट को फ़ाइल में सहेजें
  -T, --template <string>     आउटपुट टेम्पलेट के लिए प्रारूप (जैसे, "{{scheme}}://{{host}}{{path}}")
                              मान्य चर हैं: "raw_url", "scheme", "user", "username",
                              "password", "host", "hostname", "port", "path", "raw_path",
                              "escaped_path", "raw_query", "fragment", "raw_fragment".
  -t, --timeout <N>           कनेक्शन के लिए अधिकतम समय (सेकंड) (डिफ़ॉल्ट: 60)
  -s, --silent                मौन मोड (त्रुटियों को दबाएँ)
  -v, --verbose               विस्तृत मोड त्रुटि विवरण दिखाएँ जब तक कि आप मौन का उपयोग नहीं कर रहे हों
  -h, --help                  सहायता प्रदर्शित करें

▶ galer -u "http://domain.tld"

▶ galer -u /path/to/urls.txt

▶ cat urls.txt | galer

▶ subfinder -d domain.tld -silent | httpx -silent | galer

▶ go get github.com/dwisiswant0/galer/pkg/galer@latest

package main

import (
	"fmt"

	"github.com/dwisiswant0/galer/pkg/galer"
)

func main() {
	cfg := &galer.Config{
		Timeout: 60,
	}
	cfg = galer.New(cfg)

	run, err := cfg.Crawl("https://twitter.com")
	if err != nil {
		panic(err)
	}

	for _, url := range run {
		fmt.Println(url)
	}
}