java无限爬取新浪博客蜘蛛程序下载

weixin_39820835 2020-05-14 09:30:18

一直都在j2ee开发因为要考试所以做了个界面程序这是我的第一界面程序!java开发的新浪博客爬虫程序!(***普通adsl平均1小时5000篇文章的抓取速度***)高速抓取用户连接接和用户文章及照片保存到自己数据库里边的软件!有自动创建表和连接数据库的功能!目前只写了连接mysql数据库的！这个版本是需要正常安装jdk的如果需要直接安装文件 (打包好的)就能运行的版本联系我发给你就能运行了不需要安装jdk就能运行!本程序只是用于学习和研究!不能使用本程序用于商业用途!因为自己辛苦了两个星期写的软件希望得到认可所以想卖卖这个小软件包括源代码第一个人买去这个软件的人只需要1元!如有需要请和我联
相关下载链接：//download.csdn.net/download/zhutouying98/503333?utm_source=bbsseo

...全文

14 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

这是一个windows风格的java桌面应用程序取替了原本习惯的java桌面风格 java无限爬取新浪博客网络蜘蛛1.20版本发布此版本需要正常安装JDK.15以上如果需要用安装版的和我联系我发给你包括网络测试和数据库统计在原来的基础上更新网速好的话每小时抓取10000篇文章选择5个线程 1.00 测试版正常运行爬虫新浪博客 3.5 或 4版本添加图片下载通道开关 1.03 更新解决卡死不动给读取流添加缓冲器添加从文本中读取用户连接 1.05 计算程序运行时间提高程序代码效率性 1.06 更新计时器的分钟计算时间错误 1.07 更新读取用户连接没有传入值错误 1.09 更新主控制片面存放路径更新用户连接文本存放路径 1.1 正式版更新插入用户卡死优化代码运行效率 1.12 更新插入文章卡死优化代码运行效率 1.13 更新文章跳页失败问题..系统时间显示间隔.... 1.14 更新界面添加数据库创建更新数据库连接重复值优化线程管理 1.15 更新优化数据库连接更新文本创建bug 界面化图片下载bug 1.16 添加Oracle数据库支持添加线程提高抓取效率 1.20 添加统计文章和用户功能添加网速测试添加统计抓取速度

一直都在j2ee开发因为要考试所以做了个界面程序这是我的第一界面程序!java开发的新浪博客爬虫程序!(***普通adsl平均1小时5000篇文章的抓取速度***)高速抓取用户连接接和用户文章及照片保存到自己数据库里边的软件!有自动创建表和连接数据库的功能!目前只写了连接mysql数据库的！这个版本是需要正常安装jdk的如果需要直接安装文件 (打包好的)就能运行的版本联系我发给你就能运行了不需要安装jdk就能运行!本程序只是用于学习和研究!不能使用本程序用于商业用途!因为自己辛苦了两个星期写的软件希望得到认可所以想卖卖这个小软件包括源代码第一个人买去这个软件的人只需要1元!如有需要请和我联系!qq:444753318

WebCrawler 网页爬取新浪微博内容

简单的java爬取网站内容和url实例网络爬虫最近学习网络爬虫，对于开发小白的我，希望从今天开始记录自己的成长，加油吧。网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。网络蜘蛛是通过网页的链接地址来寻找网页，从网站某一个页面（通...

爬虫通常搜索引擎处理的对象是互联网网页。首先面临的问题是：如何能够设计出高效的下载系统，以将如此海量的网页数据传送到本地，在本地形成互联网网页的镜像备份。网络爬虫即起此作用，它是搜索引擎系统中很关键也很基础的构件。爬虫：实际上就是通过相应的技术，抓取页面上特定的信息。网络爬虫当"蜘蛛"程序出现时，现代意义上的搜索引擎才初露端倪。它实际上是一种电脑"机器人"(Computer Robot)，电脑"机...

下载资源悬赏专区

13,654

社区成员

12,574,385

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章