Scrapy - สิ่งแวดล้อม

ในบทนี้เราจะพูดถึงวิธีการติดตั้งและตั้งค่า Scrapy ต้องติดตั้ง Scrapy กับ Python

สามารถติดตั้ง Scrapy ได้โดยใช้ pip. ในการติดตั้งให้รันคำสั่งต่อไปนี้ -

pip install Scrapy

Windows

Note - ไม่รองรับ Python 3 บน Windows OS

Step 1- ติดตั้ง Python 2.7 จากPython

ตั้งค่าตัวแปรสภาพแวดล้อมโดยการเพิ่มเส้นทางต่อไปนี้ใน PATH -

C:\Python27\;C:\Python27\Scripts\;

คุณสามารถตรวจสอบเวอร์ชัน Python ได้โดยใช้คำสั่งต่อไปนี้ -

python --version

Step 2- ติดตั้งOpenSSL

เพิ่ม C: \ OpenSSL-Win32 \ bin ในตัวแปรสภาพแวดล้อมของคุณ

Note - OpenSSL ติดตั้งไว้ล่วงหน้าในทุกระบบปฏิบัติการยกเว้น Windows

Step 3- ติดตั้งVisual C ++ 2008 redistributables

Step 4- ติดตั้งpywin32

Step 5- ติดตั้งpipสำหรับ Python เวอร์ชันเก่ากว่า 2.7.9

คุณสามารถตรวจสอบเวอร์ชัน pip โดยใช้คำสั่งต่อไปนี้ -

pip --version

Step 6 - ในการติดตั้ง scrapy ให้เรียกใช้คำสั่งต่อไปนี้ -

pip install Scrapy

หากคุณติดตั้งอนาคอนดาหรือมินิคอนดาในเครื่องของคุณให้เรียกใช้คำสั่งด้านล่างเพื่อติดตั้ง Scrapy โดยใช้ conda -

conda install -c scrapinghub scrapy

บริษัทScrapinghubรองรับแพ็คเกจ conda อย่างเป็นทางการสำหรับ Linux, Windows และ OS X

Note - ขอแนะนำให้ติดตั้ง Scrapy โดยใช้คำสั่งด้านบนหากคุณมีปัญหาในการติดตั้งผ่าน pip

Python เวอร์ชันล่าสุดได้รับการติดตั้งไว้แล้วบน Ubuntu OS ใช้แพคเกจ Ubuntu aptgettable ที่จัดทำโดย Scrapinghub วิธีใช้แพ็คเกจ -

Step 1 - คุณต้องนำเข้าคีย์ GPG ที่ใช้ในการเซ็นชื่อแพ็คเกจ Scrapy ลงในพวงกุญแจ APT -

sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 627220E7

Step 2 - จากนั้นใช้คำสั่งต่อไปนี้เพื่อสร้างไฟล์ /etc/apt/sources.list.d/scrapy.list -

echo 'deb http://archive.scrapy.org/ubuntu scrapy main' | sudo tee 
/etc/apt/sources.list.d/scrapy.list

Step 3 - อัปเดตรายการแพ็คเกจและติดตั้ง scrapy -

sudo apt-get update && sudo apt-get install scrapy

คุณสามารถติดตั้ง Scrapy จากแพ็คเกจ AUR Scrapy โดยใช้คำสั่งต่อไปนี้ -

yaourt -S scrapy

ใช้คำสั่งต่อไปนี้เพื่อติดตั้งเครื่องมือบรรทัดคำสั่ง Xcode -

xcode-select --install

แทนที่จะใช้ System Python ให้ติดตั้งเวอร์ชันที่อัปเดตใหม่ที่ไม่ขัดแย้งกับระบบอื่น ๆ ของคุณ

Step 1- ติดตั้งhomebrew

Step 2 - ตั้งค่าตัวแปรเส้นทางสิ่งแวดล้อมเพื่อระบุว่าควรใช้แพ็กเกจ homebrew ก่อนแพ็กเกจระบบ -

echo "export PATH = /usr/local/bin:/usr/local/sbin:$PATH" >> ~/.bashrc

Step 3 - เพื่อให้แน่ใจว่าการเปลี่ยนแปลงเสร็จสิ้นให้โหลดซ้ำ .bashrc โดยใช้คำสั่งต่อไปนี้ -

source ~/.bashrc

Step 4 - ถัดไปติดตั้ง Python โดยใช้คำสั่งต่อไปนี้ -

brew install python

Step 5 - ติดตั้ง Scrapy โดยใช้คำสั่งต่อไปนี้ -

pip install Scrapy