• 首页
  • 狐文
  • 狐图
  • About
狐窝
OvO
  1. 首页
  2. 未分类
  3. 正文

pycharm运行scrapy项目

2019年04月19日 74点热度 0人点赞 0条评论

刚学scrapy,之前都是在命令行运行scrapy项目,但是据说用pycharm可以debugger,想试试,但会出问题,下面是我看了网上解决方法之后总结的我觉的较好的解决方法
配置过程

首先在项目文件和scrapy.cfg同一级别目录下新建一个main.py

main.py

# -*— coding: UTF-8 -*-
from scrapy.cmdline import execute
import sys
import os

# 打断点调试py文件
# sys.path.append('D:PyCharmpy_scrapyjobbole')
sys.path.append(os.path.dirname(os.path.abspath(__file__)))
print(os.path.dirname(os.path.abspath(__file__)))
execute(['scrapy', 'crawl', 'tianmao'])

注意

execute的第三个参数tianmao是你spider文件下执行爬取的py文件里属性name的值

标签: 暂无
最后更新:2019年04月19日

OvO

狐狸

点赞
< 上一篇
下一篇 >
最新 热点 随机
最新 热点 随机
钛备份或小米系统备份功能备份出来的APK无法正常还原 BBR安装启用 安装docker mitmproxy 调试方法 Android SDK 版本选择 Perdition Mail代理服务器配置 HAProxy SSL代理 Openssl 中间人SSL代理 Stunnel SSL to SSL代理 NGINX反代IMAP配置 各种设备User Agent Torrent下载工具推荐 用 rar2john+hashcat 破解 RAR 文件密码 2020最好的Linux发行版 关闭新版chrome工具栏上拼图图标 Office 下载、安装、激活,有它就够了! Android 非官方的发行版 openwrt添加autoconf-archive
隐藏可移动设备列表中不希望出现的硬件 目录级别的冗余存储:SnapRAID CentOS 7 中firewall-cmd命令 查看oracle数据库的编码及修改编码格式的方法 Scrapy 在PyCharm中输出信息为红色字体的解决办法 Linux端口转发的几种常用方法 raid的缺点 SourceTree 免登录跳过初始设置 Chromium代码编译选项介绍 Dockerfile多阶段构建镜像 Linux Deploy上安装MYSQL Gmail邮件客户端跳板解决方案 Manjaro 开机启动蓝牙 Oracle 12c 添加scott用户 ORACLE 12C新特性——CDB与PDB mybatis中使用map类型参数,其中key为列名,value为列值 Oracle 12c 使用scott等普通用户的方法 WIN10和Ubuntu共享蓝牙4.0连接配对,鼠标键盘等
标签聚合
ssl 下载 e 镜像 git https blog yum 密码 安装 路由 docker chromium chrome linux 网卡

COPYRIGHT © 2020 狐窝. ALL RIGHTS RESERVED.

THEME KRATOS MADE BY VTROIS