爬虫导入数据库不成功，不知道是哪里出问题了

cyxr001 2017-10-08 12:06:49

是哪里写错了吗，原代码应该是mysqldb，py3好像只有pymysql，应该不影响吧，这个跑起来没事，为什么数据库里面没有值进去

...全文

430 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

OwenZeng_DBA 2017-10-09

打赏
举报

回复

引用楼主 cyxr001 的回复:

是哪里写错了吗，原代码应该是mysqldb，py3好像只有pymysql，应该不影响吧，这个跑起来没事，为什么数据库里面没有值进去

看程序这些也没有问题。你可以先DEBUG下，看看，插入的时候插入的列有没有具体的值

shoppo0505 2017-10-09

打赏
举报

回复

host ip对么？

利用selenium+pyquery对拉勾网进行爬取相应招聘信息，并且将爬取到的信息导入数据库mysql中，

基于Python实现的出卷网题库爬虫源代码，包括抓取试题，抓取答案，图像识别答案，抓取分类，导入数据库 category.py 运行可在当前目录下生成分类数据 cate.txt 单线程运行速度较慢 sprider.py 运行可在当前目录下生成某个分类的试题数据 data.txt 单线程运行速度较慢 sprider2.py 运行可在data文件夹下创建以每个分类编号命名的试题数据线程池 + 队列 + 消费者生产者模型速度较快 sprider_qustion 运行可抓取data文件夹内所有问题的答案数据，生成ans_all.txt 线程池 + 队列 + 消费者生产者模型速度较快自动识别图像类型的答案 dbsave.py 运行可将所有数据导入数据库 线程池 + 队列 + 消费者生产者模型速度较快

对东方财富和网易财经网站爬虫，获取个线数据并存入Mysql数据库。通过Python调用数据并进行基础金融数据分析，在Jupyter Notebook上进行展示。代码通过股票项目说明的简单修改，可以直接在Macos，Linux操作系统的服务器上直接使用。

37,743

社区成员

34,212

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章