Scrapy爬虫遇到了OSError: [Errno 9] Bad file descriptor异常，求助!

smallbaoma 2017-05-26 06:40:36

大神们好：

我在试图爬赶集网的二手车信息，基本上都调试好了，但是在运行的时候发现报错，怎么都没找到问题所在，请指教！
报错截图如下：

我的scrapy爬虫代码如下：

请问这个问题我应该如何解决呢？
感谢!

...全文

714 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

shiter 2017-05-31

打赏
举报

回复

写文件时候的问题？

用pyinstaller 打包 scrapy 时可能会遇到 ‘OSError: could not get source code’ 这样的错误，这是因为你的爬虫文件中使用了yield。而较高版本的scrapy在打包exe时，如果文件中有yield方法，会报错：scrapy OSError: could not get source code 具体解决方法：导入这两个库： import scrapy.utils.misc import scrapy.core.scraper 然

OSError: [Errno 8] Exec format error 访问 python项目某个.py文件的网页的时候会出现OSError: [Errno 8] Exec format error的问题，一般情况下是由于基于Unix（Linux,Mac OS)系统下的问题。例子如下： if __name__ == '__main__': app.run() # app.run(...

错误如下： Traceback (most recent call last): File "scrapy\utils\defer.py", line 55, in mustbe_deferred File "scrapy\core\spidermw.py", line 60, in process_spider_input File "scrapy\core\scraper.py", line 152, in call_spider File "scrapy\utils\misc.py

OSError: image file is truncated (7 bytes not processed)报错

【已解决】windows下使用pyinstaller打包遇到OSError: could not get source code的问题由于课程设计需要，搞了一个retinanet，现在从ubuntu移植到windows打包成exe方便老师检查，但是遇到了could not get source code，没想到在这里卡了好几天时间，现在解决了，写下来解决过程供有需要的同学参考。错误信息提示如下：（ps:如果错误信息长得不一样，那还是悠着点按我这个方法解决吧） File "site-package

37,720

社区成员

34,239

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章