pryingdeep

Translation (Перевод)

• Click

IMPORTANT

• 이 저장소는 더 이상 활성 상태가 아닙니다, 죄송합니다 여러분, 더 이상 이 작업을 계속하고 싶지 않네요 :)

프로젝트 소개

GitHub에서 딥 웹용 크롤러인 여러 프로젝트를 보아 왔지만, 대부분은 딥 웹에서의 OSINT에 대한 제 기준을 충족하지 못했습니다. 그래서 저만의 딥 웹 OSINT 도구를 만들기로 했습니다.

이 도구는 딥 웹에서 항상 OPSEC 모범 사례를 따라야 한다는 점을 상기시켜 주는 역할을 합니다.

이 프로젝트의 작성자는 이 도구의 사용으로 인해 발생할 수 있는 어떠한 피해에도 책임지지 않습니다.

이 도구는 무엇을 하나요?

Prying Deep은 다크/클리어 넷 플랫폼을 크롤링하고 가능한 한 많은 정보를 효과적으로 추출합니다.

시작하기

사전 요구 사항

OSINT 도구를 사용하기 전에 다음 종속성이 설치되어 있는지 확인하세요:

1. Docker: (선택 사항)

   • 사용 중인 운영 체제에 맞는 공식 설치 안내에 따라 Docker를 다운로드하고 설치할 수 있습니다:
   • Docker 설치 가이드.

2. Go: (필수)

   • Golang 설치 가이드.

3. PostgresSQL: (Docker를 사용하지 않는 경우 필수)

   • pryingdeep.yaml 환경 변수가 docker-compose.yaml의 환경과 일치하는지 확인하세요
   • PostgreSQL 설치

바이너리 설치

1. 다음을 통해 바이너리를 설치하세요:

go install -v github.com/iudicium/pryingdeep/cmd/pryingdeep@latest

2. 다음 명령을 실행합니다:

pryingdeep install

3. config 폴더 안의 값을 필요에 맞게 조정하세요.

수동 설치

1. 저장소를 클론합니다:

    git clone https://github.com/iudicium/pryingdeep.git
   

2. 플래그를 사용하거나 수동으로 .yaml 구성의 값을 조정합니다. Database, logger, tor는 모두 수동 구성이 필요합니다.
   

반드시 읽어야 합니다 Colly Docs. 또한 Config Explanation를 참조하세요.

3. 다음을 통해 바이너리를 빌드합니다:
   • go build -> cmd/pryingdeep 디렉터리 내부에서
   • go build cmd/pryingdeep/pryingdeep.go -> 루트 디렉터리에서, 바이너리도 그곳에 생성됩니다.

Docker

도커 컨테이너 내부에서 pryingdeep을 시작하려면 다음 명령을 사용하세요:

docker-compose up

구성

각 매개변수에 대한 자세한 내용은 여기에서 확인하세요: config

Tor

tor 컨테이너 빌드 및 실행에 대한 자세한 내용은 여기에서 확인하세요: Tor

사용법

Pryingdeep specializes in collecting information about dark-web/clearnet websites.
This tool was specifically built to extract as much information as possible from a .onion website

Usage:
pryingdeep [command]

Available Commands:
completion  Generate the autocompletion script for the specified shell
crawl       Start the crawling process
export      Export the collected data into a file.
help        Help about any command
install     Installation of config files

Flags:
-c, --config string   Path to the .yaml configuration. (default "pryingdeep.yaml")
-h, --help            help for pryingdeep
-z, --save-config     Save chosen options to your .yaml configuration
-s, --silent          -s to disable logging and run silently

로드맵

• "tor" docker 컨테이너가 root로 실행되지 않도록 컨테이너에 사용자 추가
• favicon 모듈 테스트를 위한 shodan api 키 확보
• 서버의 IP 주소를 확보할 방법 고안
• scan 명령 구현
• 파일 식별 및 검색 구현
• 테스트를 해당 패키지로 이동

기여하기

1. 프로젝트를 Fork합니다
2. dev 브랜치를 체크아웃합니다 (git checkout dev)
3. 코드에 적절한 문서를 추가합니다.
4. goimports를 사용하여 코드를 린트합니다
5. pull request를 제출하고 변경된 내용에 대한 상세한 설명을 추가합니다.

라이선스

GPL-3.0 라이선스에 따라 배포됩니다. 자세한 내용은 LICENSE를 참조하세요.

동영상 미리보기

미리보기

후원

이 저장소가 유용하다고 생각하시고 너그러운 마음이 드신다면, 다음 주소로 Monero(XMR)를 기부하실 수 있습니다:

48bEkvkzP3W4SGKSJAkWx2V8s4axCKwpDFf7ZmwBawg5DBSq2imbcZVKNzMriukuPqjCyf2BSax1D3AktiUq5vWk1satWJt

감사합니다!