FireProx

• अवलोकन
  • लाभ
  • अस्वीकरण
• अनुरक्षक
• श्रेय
• मूल उपयोग
• स्थापना
• स्क्रीनशॉट
• योगदान

अवलोकन

वेब कॉल करते समय स्रोत IP पते को छिपाना या लगातार घुमाना कठिन या महँगा हो सकता है। कुछ समय से कई उपकरण मौजूद हैं, लेकिन वे या तो IP पतों की संख्या में सीमित थे, या महँगे थे, या बहुत सारे VPS की तैनाती की आवश्यकता थी। FireProx AWS API Gateway का लाभ उठाकर पास-थ्रू प्रॉक्सी बनाता है जो प्रत्येक अनुरोध के साथ स्रोत IP पते को घुमाता है! FireProx का उपयोग करके एक प्रॉक्सी URL बनाएँ जो किसी गंतव्य सर्वर की ओर इंगित करता है, और फिर प्रॉक्सी URL पर वेब अनुरोध करें जो गंतव्य सर्वर प्रतिक्रिया लौटाता है!

आपके लिए लाया गया:

अनुरक्षक

• अधिक टिप्स, ट्रिक्स और टूल्स के लिए मुझे Twitter पर फ़ॉलो करें (या बस नमस्ते कहने के लिए)! (Mike Felch - @ustayready)

लाभ

• प्रत्येक अनुरोध के साथ IP पता घुमाएँ
• अलग-अलग क्षेत्र कॉन्फ़िगर करें
• सभी HTTP विधियाँ समर्थित
• सभी पैरामीटर और URI पास-थ्रू होते हैं
• प्रॉक्सी बनाएँ, हटाएँ, सूचीबद्ध करें या अपडेट करें
• X-My-X-Forwarded-For हेडर के साथ अनुरोध करके X-Forwarded-For स्रोत IP हेडर को स्पूफ करें

अस्वीकरण

• AWS द्वारा स्रोत IP पता X-Forwarded-For हेडर में गंतव्य को भेजा जाता है
  • (AWS कॉन्फ़िग में इसे गंतव्य तक पहुँचने से पहले हटाने का तरीका खोजने वाले पहले व्यक्ति को $100 LOL!)
  • को धन्यवाद 1 घंटे के भीतर शानदार X-Forwarded-For पैच के लिए!
• यदि आप robots.txt का पालन नहीं करते हैं तो मैं जिम्मेदार नहीं हूँ :)
• CloudFlare कभी-कभी स्क्रैपर्स को ब्लॉक करते समय X-Forwarded-For को डिटेक्ट करता है (नए पैच के साथ परीक्षण करने की आवश्यकता)
• आपके स्वामित्व वाले सिस्टम के अलावा अन्य सिस्टम पर इस टूल का उपयोग संभवतः AWS Acceptable Use Policy का उल्लंघन करता है और आपके AWS खाते की समाप्ति या निलंबन का कारण बन सकता है। इसके अलावा, उन सिस्टमों पर भी इस टूल का उपयोग, जिनके आप स्वामी हैं या जिन पर पैठ परीक्षण करने की स्पष्ट अनुमति है, पैठ परीक्षण पर AWS नीति के अधीन है।

श्रेय

FireProx को सार्वजनिक रूप से जारी करने के बाद, मुझे पता चला कि दो अन्य लोग पहले से ही AWS API Gateway तकनीक का उपयोग कर रहे थे। घटनाओं की श्रृंखला पर शोध करने और कुछ शानदार बातचीत करने के बाद, मुझे एहसास हुआ कि मुझे इसके बारे में जानने का एकमात्र कारण ये लोग थे। मैंने सोचा कि उन्हें कुछ शाउट-आउट और श्रेय देना अच्छा होगा, इन लोगों को फ़ॉलो करें -- वे शानदार हैं।

श्रेय Ryan Hanson - @ryHanson को जाता है जो API Gateway तकनीक के पहले ज्ञात स्रोत हैं

Mike Hodges - @rmikehodges को शाउट-आउट BlackHat Arsenal 2018 में में इसे सार्वजनिक करने के लिए

एक बार फिर, मेरे अच्छे दोस्त Ralph May - @ralphte1 को बड़ा शाउट-आउट जिन्होंने मुझे कुछ समय पहले इस तकनीक से परिचित कराया था।

मूल उपयोग

AWS एक्सेस कुंजी और गुप्त एक्सेस कुंजी या aws cli कॉन्फ़िगर होना आवश्यक है

उपयोग: fire.py [-h] [--access_key ACCESS_KEY] [--secret_access_key SECRET_ACCESS_KEY] [--region REGION] [--command COMMAND] [--api_id API_ID] [--url URL]

FireProx API Gateway Manager

usage: fire.py [-h] [--profile_name PROFILE_NAME] [--access_key ACCESS_KEY] [--secret_access_key SECRET_ACCESS_KEY] [--session_token SESSION_TOKEN] [--region REGION] [--command COMMAND] [--api_id API_ID] [--url URL]

FireProx API Gateway Manager

optional arguments:
  -h, --help            show this help message and exit
  --profile_name PROFILE_NAME
                        AWS Profile Name to store/retrieve credentials
  --access_key ACCESS_KEY
                        AWS Access Key
  --secret_access_key SECRET_ACCESS_KEY
                        AWS Secret Access Key
  --session_token SESSION_TOKEN
                        AWS Session Token
  --region REGION       AWS Region
  --command COMMAND     Commands: list, create, delete, update
  --api_id API_ID       API ID
  --url URL             URL end-point

• उदाहरण
  • examples/google.py: Google खोज को स्क्रैप करने के लिए FireProx प्रॉक्सी का उपयोग करें।
  • examples/bing.py: Bing खोज को स्क्रैप करने के लिए FireProx प्रॉक्सी का उपयोग करें।

स्थापना

आप निम्नलिखित कमांड से इंस्टॉल और चला सकते हैं:

$ git clone https://github.com/ustayready/fireprox
$ cd fireprox
~/fireprox$ virtualenv -p python3 .
~/fireprox$ source bin/activate
(fireprox) ~/fireprox$ pip install -r requirements.txt
(fireprox) ~/fireprox$ python fire.py

ध्यान दें कि Python 3.6 आवश्यक है।

Docker इमेज बनाना: (वर्तमान में Docker for Windows पर काम नहीं करता, संभवतः entrypoint.sh में लाइन एंडिंग के कारण।)

$ git clone https://github.com/ustayready/fireprox
$ cd fireprox
$ docker build -t fireprox .
$ docker run --rm -it fireprox -h

स्क्रीनशॉट

योगदान

1. अपने विचार पर चर्चा करने के लिए एक issue बनाएँ
2. FireProx को fork करें (https://github.com/ustayready/fireprox/fork)
3. अपनी फीचर शाखा बनाएँ (git checkout -b my-new-feature)
4. अपने परिवर्तन commit करें (git commit -am 'Add some feature')
5. शाखा में push करें (git push origin my-new-feature)
6. एक नया Pull Request बनाएँ

बग रिपोर्ट, फीचर अनुरोध और पैच का स्वागत है।