jqueguiner/lk_scraperأداة كشط لينكد إن قابلة للتكوين بالكامل: اكشط أي شيء داخل لينكد إن
يكشط أي بيانات من LinkedIn
$ pip install git+git://github.com/jqueguiner/lk_scraper
$ docker-compose up -d
$ docker-compose run lk_scraper python3
أولاً، تحتاج إلى تشغيل خادم Selenium
$ docker run -d -p 4444:4444 --shm-size 2g selenium/standalone-firefox:3.141.59-20200326
بعد تشغيل هذا الأمر، انتقل من المتصفح إلى عنوان IP الخاص بك متبوعًا برقم المنفذ و /grid/console. لذا سيكون الأمر http://localhost:4444/grid/console.
انتقل إلى LinkedIn.com وسجل الدخول
افتح أدوات المطور في المتصفح (Ctrl-Shift-I أو النقر بزر الماوس الأيمن -> فحص العنصر)
https://www.nextscripts.com/images/sc/alt-LI-002-ch.png
حدد علامة التبويب Application
تحت رأس Storage في القائمة اليسرى، انقر على القائمة المنسدلة Cookies واختر www.linkedin.com
ابحث عن الكوكي li_at، وانقر نقرًا مزدوجًا على القيمة لتحديدها قبل النسخ
حدد علامة التبويب Storage
انقر على القائمة المنسدلة Cookies واختر www.linkedin.com
ابحث وانسخ قيمة li_at
يمكنك إضافة كوكي li_at الخاص بـ LinkedIn في ملف الإعدادات الموجود في مجلد المستخدم (~/.lk_scraper/config.yml)
انظر
from lk_scraper import Scraper
li_at = "My_super_linkedin_cookie"
scraper = Scraper(li_at=li_at)
(لم يتم تنفيذه بعد)
$ export LI_AT="My_super_linkedin_cookie"
قم بتشغيل دفتر Jupyter linkedin-example.ipynb
from lk_scraper import Scraper
scraper = Scraper()
from lk_scraper import Scraper
scraper = Scraper()
company = scraper.get_object(object_name='company', object_id='apple')
from lk_scraper import Scraper
scraper = Scraper()
profil = scraper.get_object(object_name='profil', object_id='jlqueguiner')