jqueguiner/lk_scraperएक पूरी तरह से अनुकूलन योग्य linkedin scrape : linkedin के अंदर कुछ भी scrape करें
किसी भी लिंक्डइन डेटा को स्क्रैप करता है
$ pip install git+git://github.com/jqueguiner/lk_scraper
$ docker-compose up -d
$ docker-compose run lk_scraper python3
पहले, आपको एक Selenium सर्वर चलाना होगा
$ docker run -d -p 4444:4444 --shm-size 2g selenium/standalone-firefox:3.141.59-20200326
इस कमांड को चलाने के बाद, ब्राउज़र से अपने IP पते के बाद पोर्ट नंबर और /grid/console पर जाएँ। तो कमांड होगा http://localhost:4444/grid/console.
LinkedIn.com पर जाएँ और लॉग इन करें
ब्राउज़र डेवलपर टूल खोलें (Ctrl-Shift-I या राइट क्लिक -> इंस्पेक्ट एलिमेंट)
https://www.nextscripts.com/images/sc/alt-LI-002-ch.png
एप्लिकेशन टैब चुनें
बाएँ मेनू में स्टोरेज हेडर के नीचे, कुकीज़ ड्रॉपडाउन पर क्लिक करें और www.linkedin.com चुनें
li_at कुकी खोजें, और कॉपी करने से पहले मान पर डबल-क्लिक करके उसे चुनें
स्टोरेज टैब चुनें
कुकीज़ ड्रॉपडाउन पर क्लिक करें और www.linkedin.com चुनें
li_at मान खोजें और कॉपी करें
आप अपने होम (~/.lk_scraper/config.yml) में स्थित कॉन्फ़िग फ़ाइल में अपनी LinkedIn li_at कुकी जोड़ सकते हैं
देखें
from lk_scraper import Scraper
li_at = "My_super_linkedin_cookie"
scraper = Scraper(li_at=li_at)
(अभी तक लागू नहीं किया गया)
$ export LI_AT="My_super_linkedin_cookie"
Jupyter नोटबुक linkedin-example.ipynb चलाएँ
from lk_scraper import Scraper
scraper = Scraper()
from lk_scraper import Scraper
scraper = Scraper()
company = scraper.get_object(object_name='company', object_id='apple')
from lk_scraper import Scraper
scraper = Scraper()
profil = scraper.get_object(object_name='profil', object_id='jlqueguiner')