RHEL Centos Debian Ubuntu установка scrapy
Установим необходимые пакеты
Debian, Ubuntu
# apt-get install python-twisted python-libxml2 python-simplejson libxml2-dev libxslt1-dev python-dev
RHEL, CentOS
# yum install python-twisted python-libxml2 python-simplejson libxslt-devel libxml2-devel python-devel
Скачиваем и распаковываем setuptools пакет с https://pypi.python.org/pypi/setuptools
# tar xvf setuptools-0.7.4.tar.gz
Устанавливаем setuptools (с правами root)
# cd setuptools-0.7.4/
# python setup.py install
Устанавливаем scrapy c помощью easy_install
# easy_install -U w3lib
# easy_install -U Scrapy