请教：如何获取动态加载的网页数据-CSDN论坛

CSDN论坛 > Web 开发 > JavaScript

请教：如何获取动态加载的网页数据 [问题点数：20分]

⋅请教：如何获取动态加载的网页数据 ⋅请教：局域网WIN98做代理，如何让外网段局域机子上互联网 更多帖子 关注私信空间博客 wdwlbsm8 本版专家分：3 结帖率 50%: 最近在研究做一个网页分析程序，有一个网站（1*2*3*0*6）页面显示的内容在源文件中没有，关键部分源代码是这样的：
<table>
<thead>
<tr class="th" id="float">
<th width="90" colspan="1" rowspan="1">车次</th>
<th width="100" colspan="1" rowspan="1">出发站</th>
<th width="49" colspan="1" rowspan="1">商务座</th>
</tr>
</thead>
<tbody id="queryLeftTable"></tbody>
</table>
在页面实际显示的内容中
<tbody>这里面有内容</tbody>
当中是有具体的内容的，但是在源代码中
<tbody id="queryLeftTable">这里边没有内容</tbody>

后来有老师指导说这是js动态添加的内容，查看源代码是没有的
我想获取数据表中的数据，然后点击这条数据后面的一个按钮，请教各位老师怎么实现的呢，谢谢各位啦！

0 2016-10-01 18:46:11

回复数 4 只看楼主引用举报楼主

⋅此用户还没有发表过任何帖子 关注私信空间博客 cohenchen 本版专家分：10: 你是在页面加载出来过后去获取tbody内的数据，你只管获取到tbody节点，然后获取里面td的数据呗。你的问题到底是要获取数据还是要点击按钮干嘛？？

0 2016-10-02 01:12:15

只看TA 引用举报 #1 得分 0

关于网页动态数据获取的知识学习（2）三种获取js加载的动态内容的方法有些网站的比较重要的内容可能会采用javascript动态加载内容，防止采集，获取其中的信息，但是我们在采集的时候还需要获取到这些内容，下面就介绍三种可以获取到javascript内容的方法，三种方式的原理其实是一样的，就是通过浏览器引擎来解析javascript。 1）、利用WebBrowser控件这个方式大家也都知道，也就不多说了，说几个比

⋅请教：如何获取动态加载的网页数据 ⋅请教：局域网WIN98做代理，如何让外网段局域机子上互联网 更多帖子 关注私信空间博客 wdwlbsm8 本版专家分：3: 引用 1 楼 u013129770 的回复:
你是在页面加载出来过后去获取tbody内的数据，你只管获取到tbody节点，然后获取里面td的数据呗。你的问题到底是要获取数据还是要点击按钮干嘛？？

我还是不太知道怎么在加载完成之后再去获取tbody的数据，我是获取需要的数据之后点击该条对应的按钮执行一个操作。

0 2016-10-02 10:24:34

只看TA 引用举报 #2 得分 0

Python爬虫爬取动态网页系统环境：操作系统：Windows8.1专业版 64bit Python：anaconda、Python2.7 Python modules:requests、random、jsonBackground:对于静态网页，我们只需要把网页地址栏中的url传到get请求中就可以轻松地获取到网页的数据。但是，我们经常会遇到直接把网页地址栏中的url传到get请求中无法直接获...

⋅此用户还没有发表过任何帖子 关注私信空间博客 cohenchen 本版专家分：10

引用 2 楼 wdwlbsm8 的回复:

Quote: 引用 1 楼 u013129770 的回复:

你是在页面加载出来过后去获取tbody内的数据，你只管获取到tbody节点，然后获取里面td的数据呗。你的问题到底是要获取数据还是要点击按钮干嘛？？

我还是不太知道怎么在加载完成之后再去获取tbody的数据，我是获取需要的数据之后点击该条对应的按钮执行一个操作。

是我想太多还是想太少了....
如果仅仅是获取数据，就是简简单单的操作dom



       var arr = [];

       $("#float td").each(function(ele,index){

       		arr.push($(this).text());

       });

       console.log(arr);

如果你还要做什么获取数据后，点击相对应的按钮做操作，我就不清楚了

0 2016-10-03 23:41:28

只看TA 引用举报 #3 得分 0

C++如何获取一个网页的源代码加入想获取http://www.baidu.com/s?cl=3&wd=天安门这个网页的源代码，该如何实现。菜鸟一个，求代码。

⋅此用户还没有发表过任何帖子 关注私信空间博客 cohenchen 本版专家分：10

引用 3 楼 u013129770 的回复:

Quote: 引用 2 楼 wdwlbsm8 的回复:

Quote: 引用 1 楼 u013129770 的回复:

你是在页面加载出来过后去获取tbody内的数据，你只管获取到tbody节点，然后获取里面td的数据呗。你的问题到底是要获取数据还是要点击按钮干嘛？？

我还是不太知道怎么在加载完成之后再去获取tbody的数据，我是获取需要的数据之后点击该条对应的按钮执行一个操作。

是我想太多还是想太少了....
如果仅仅是获取数据，就是简简单单的操作dom
       var arr = [];

       $("#float td").each(function(ele,index){

       		arr.push($(this).text());

       });

       console.log(arr);
如果你还要做什么获取数据后，点击相对应的按钮做操作，我就不清楚了

我似乎把each写错了，，ele和index要换个位置

0 2016-10-03 23:44:26

只看TA 引用举报 #4 得分 0

如何爬取动态网页信息① 我们以选股宝为例子来进行讲解。

收藏帖子

Python 获取动态加载的页面数据: 这种动态加载的页面，一般数据会在Network的 JS或者 XHR 类目里。所以我们要使用开发者工具辅助。 URL：https://movie.douban.com/tag/#/?sort=T&amp;range=0,10&amp;tags=%E9%9D%92%E6%98%A5 一：打开开发者工具，看这一页的 XHR里没有任何文件，然后点击“加载更多”按钮，看它给我们返回什么信息。 ...

2种方法简单爬取JS加载的动态数据: 参考原文:http://www.cnblogs.com/buzhizhitong/p/5697683.html 需要爬取的网站数据: http://gkcx.eol.cn/soudaxue/queryProvince.html?page=1 一共是165页，将page=1 变成其他的数字即可访问。 获取所有的url: urls = ('http://gkcx.eol.cn/s

python动态网页批量爬取: 这篇文章主要介绍了python动态网页批量爬取的方法，主要针对四六级成绩批量爬取，感兴趣的小伙伴们可以参考一下四六级成绩查询网站我所知道的有两个：学信网（http://www.chsi.com.cn/cet/）和99宿舍（http://cet.99sushe.com/），这两个网站采用的都是动态网页。我使用的是学信网，好了，网站截图如下：网站的代码如下： &lt;form meth...

如何抓取jS动态生成的网页数据: 如何抓取jS动态生成的网页数据

动态生成页面（从数据库中动态取出数据信息生成页面）: 做课程设计的时候做的有点烦了所以就简单的写了点以下就是将添加到购物车的商品动态的显示到前台页面的代码首先是我的head.jsp这里面的“我的目录“使用的不是直接链接而是一个servlet名称叫做”selectUserCart“ 我的里面使用的user、books、userAccout类都是基本的记录了基本信息的类为其实现setXxx（）和getXxx（）方法 <% String

怎么样实现动态抓取别人网站里面网页的数据?: 请各位大虾指教: 我问题是这样的: 我现在需要把一些网站中的数据实时的抓到我自己的网站上来,比如说,我需要实时的抓取当当网上的商品报价,在我自己的网站上实时的更新要求:使用的语言尽可能是ASP,我对

菜鸟求助，用JAVA如何获取动态加载的网页内容: 例如这个页面 http://odds.500wan.com/fenxi/yazhi_same.php?cid=5&cp=平手/半球&id=384285&s1=0.800&s2=0.960 我想获取 的

爬虫如何对网页动态内容抓取: 我们进入淘宝网，在首页查看源代码可以看到全是js，并没有直观的页面元素，因为首页的内容都是动态生成的，这时候我们就需要对网页的链接做一些分析了。现在我想爬取淘宝网上所有关于Ipad的信息，那么现在首页的搜索框输入‘Ipad’ 查看链接得到 https://s.taobao.com/search?q=ipad&amp;amp;imgfile=&amp;amp;js=1&amp;amp;stats_cli...

请问怎样判断一个url是静态还是动态的: 首先是标准。例如：www.sina.com 它每天的内容都会更新，所以我把它视为动态网页。再例如：http://img04.taobaocdn.com/bao/uploaded/i2/T163vT

如何判断一个网页是不是动态页面: 如果你需要爬取的数据是放在js里面的，那么就是动态，需要用selenium等工具抓取。跑下面的代码，就会把网页上所有元素都打印出来。ctrl+F搜索一下，如果要找的元素在一个js object里面，就说明是动态获取到的。 import requests from bs4 import BeautifulSoup url = "xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx

网络判断自动加载界面: Android 网络判断，有网络自动加载网络数据，没有网络时显示容错页和一个警示条

如何抓取动态网页的内容？: 我要抓取的是这里的内容 http://www.cninfo.com.cn/information/companyinfo_n.html?brief?szsme002259 用传统的读取读取不到我要的信

Python学习笔记(17)掌握JS动态网页信息采集: 下面会从连续动作的适用范围、动作类型、如何使用连续动作、连续动作的循环执行说明等四个方面，全面地介绍连续动作的知识点。一、连续动作的适用范围越来越多的网页使用了JS动态技术，即网页信息不是立马显示出来的，而是要经过点击或输入之类的动作才能浏览到想要的信息，例如条件筛选、输入关键词搜索、滚屏加载、点击目录等等，而这类网页通常是没有独立网址的，不能对它直接采集，只能设置连续动作来实现相应鼠标动作的...

如何实时抓取动态网页数据？: 我们所生活的数字世界正在不断地产生大量的数据。利用动态大数据已经成为企业数据分析的关键。在本文中，我们将回答以下几个问题： 1、为什么采集动态数据很重要? 2、动态数据是如何有效的促进业务增长? 3、最重要的是，我们如何能够轻松地获取动态数据? 1、为什么采集动态数据如此重要? 一般来说，通过持续监测动态的数据，你可以在最短的时间里做出正确的决策。更具体地说，获取动态...

获取网页源代码中被js渲染的内容: 以中科大就业信息官网（http://www.job.ustc.edu.cn/RecruitList.aspx）为例一：打开网页的‘’审查元素‘’——‘’network‘’二：刷新页面，下方出现很多被执行调用的文件，如图所示。三：选择Recruit.ashx?rand=..........这个文件。别的网页可能不是这个文件，具体情况具体分析，因为我需要爬取['宣讲会主题','时间'，‘地点’.......

HTML中容器（div）动态加载HTML页面的方法: 在学习前端相关知识的时候，遇到了div中如何动态切换页面的问题，经过网络上的搜索，发现了一个不错的方法。使用JavaScript代码替换div内容 &lt;script&gt; function load_home() { document.getElementById("main").innerHTML = '&lt;object type="text/html"...

c++如何获取需要登录的网站页面呈现的文字内容?: function load_dayinfo(t){ $(".daily_list").html(""); $.ajax({ cache: false, url: dayinfo_url, type: "get", data: {date:t}, dataType: "json", success: function(result) { if (!check_error(result.status)) { $(".daily_list").html(""+ result.mess +""); return } $temp_ul = $(""); for (var i = 0; i < result.data.length; i++) { $temp_ul.append("任务"+ chinese_num[i] +""+getType(result.data[i].task_type)+ ""+result.data[i].task_name +""+ get_day_sta(result.data[i].taskid) +""); } $(".daily_list").empty() $(".daily_list").append($temp_ul); $(".haveday").removeClass("current") $("#td"+t).addClass("current");//把日历当天变成选中状态 $(".cur_time").html(t) }, error: function() { $(".daily_list").html("系统异常，请刷新页面再试"); $(".cur_time").html("") } }) }

C++ 获取网页源代码，仅供参考！！: void UTF_8ToUnicode(wchar_t* pOut,char *pText) { char* uchar = (char *)pOut; uchar[1] = ((pText[0] & 0x0F) > 2) & 0x0F); uchar[0] = ((pText[1] & 0x03) << 6) + (pText[2] & 0x3F); } void

c++获取网页指定内容: 抓取网页数据。修改网址可以抓取任何网页，对于初学者来说是个很好的工程。网页爬虫，可实现速度很快的信息爬取,提供源码。

使用python抓取js动态加载的网页: 原文地址：http://blog.csdn.net/lambert310/article/details/49248109 我们在做网页抓取的时候，一般来说使用urllib和urllib2就能满足大部分需求。但是有时候我们遇见那种使用js动态加载的网页。就会发现urllib只能抓出一个部分内容空白的网页。就像下面百度图片的结果页：

网页动态数据怎么获取: 首先明确我指的动态数据是什么。名词定义：动态数据在这里指的是网页中由Javascript动态生成的页面内容，即网页源文件中没有，在页面加载到浏览器后动态生成的。这是网页内容，比如我想要截取功耗信息

Python爬取动态网页实例讲解: 笔者在做爬虫作业时，遇到了一个动态网页，分析代码网页源代码时因此就少了许多需要的元素。下面用一个实例来记录一下爬取动态网页的步骤。实例：股票定向爬虫这个实例目标是从东方财富网获取股票列表，然后根据股票列表逐个到百度股票获取个股信息，最后将结果存储到文件。基本也看的出来代码就是上面三个步骤。踩雷一开始没发现这是个动态网页，因为我在需要的信息上面直接右键检查，发现信息挺全的，但是代码会变一下，...

python爬虫如何获得完整链接（动态网页）: 参考：https://blog.csdn.net/hdu09075340/article/details/74202339-------------------参考：https://www.cnblogs.com/hhh5460/p/5044038.html四中方法''' 得到当前页面所有连接 ''' import requests import re from bs4 import Beau...

python爬虫如何获取网页信息时，发现所需要的信息是动态生成的，然后抓包获取到信息来源的URL？: 转自：https://www.wukong.com/answer/6551337387799085316/?iid=43974241203&amp;app=news_article&amp;share_ansid=6551337387799085316&amp;app_id=13&amp;tt_from=mobile_qq&amp;utm_source=mobile_qq&amp;utm_med...

关于爬虫爬取动态网页的问题: 今天爬学院的新闻网页，是aspx动态网页，琢磨了半天，发现只能使用cookie进行模拟登录才会显示正确的内容，且只能将cookie写在header里如 ``` headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36', 'Connection': 'keep-alive', 'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8', 'Cookie': 'ASP.NET_SessionId=pbg5q555fmojkk55htfawlnx'} ``` 再 ``` r = requests.get(url, headers=headers) ``` 才能正确显示，但是直接使用却没法爬取，这是因为什么 ``` cookies = {'Cookie': 'ASP.NET_SessionId=pbg5q555fmojkk55htfawlnx'} r = requests.get(url, cookies=cookies) ``` 还有一个问题，得到这个页面后，用lxml，html5lib,html.parser解析得到的都不同，这又是因为什么。。

Python获取网页动态内容 js渲染后的内容: 2019独角兽企业重金招聘Python工程师标准>>> ...

动态网页数据抓取（一）: 1.什么是AJAX?AJAX = Asynchronous JavaScript and XML（异步的 JavaScript 和 XML）。AJAX 不是新的编程语言，而是一种使用现有标准的新方法。AJAX 最大的优点是在不重新加载整个页面的情况下，可以与服务器交换数据并更新部分网页内容。AJAX 不需要任何浏览器插件，但需要用户允许JavaScript在浏览器上执行。详细参考：http://w...

获取动态网页源代码: 新人最近转到WEB数据挖掘方向，一切都要从头学起。之前做的都是静态网页，程序写起来还比较简单。今天遇到到了一个动态的，看了半天网页源代码，仍然一头雾水。地址例子如下 http://www.ti.com

爬虫抓取动态网页: 使用chrome浏览器,启动开发工具, network,双击文件查看文件，采用火车头采集，python做后期开发。 Python 抓取动态网页内容方案详解 http://www.jb51.net/article/58942.htm 以抓取网易博客帖子中的最近读者信息为例，手把手教你如何抓取动态网页中的内容 http://www.tuicool.com/articles/fM...

JAVA 爬虫获取js动态生成的网页数据: 问题：有些网页数据是由js动态生成的，一般我们抓包可以看出真正的数据实体是由哪一个异步请求获取到的，但是获取数据的请求链接也可能由其他js产生，这个时候我们希望直接拿到js加载后的最终网页数据。解决方法： phantomjs 1.下载phantomjs，[官网]：http://phantomjs.org/ 2.我们是windows平台，解压，会在bin目录下看到exe可执行文件，有它就够啦

Python爬虫之爬取动态页面数据: 很多网站通常会用到Ajax和动态HTML技术，因而只是使用基于静态页面爬取的方法是行不通的。对于动态网站信息的爬取需要使用另外的一些方法。先看看如何分辨网站时静态的还是动态的，正常而言含有“查看更多”字样或者打开网站时下拉才会加载内容出来的进本都是动态的，简便的方法就是在浏览器中查看页面相应的内容、当在查看页面源代码时找不到该内容时就可以确定该页面使用了动态技术。对于动态页面信息的爬取，一

使用FireBug插件辅助采集网页动态加载数据: 许多人在遇到网页动态加载数据的时候都习惯于使用selenium webdriver这款自动化测试工具，对接上浏览器驱动可以实现对javascript代码的逆向解析。但这种方式有1个明显的弊端：性能太差。更重要的是，其采集效率的下限很大程度上并不取决于数据采集者，而是取决于网页上有多少javascript代码，如果这些代码很多，那么我们的网络爬虫运行端就需要耗费更多的资源来解析这些javascript

如何用Python抓取动态页面信息: 如何用Python抓取动态页面信息问题来源：很早之前，学习Python web编程的时候，就涉及一个Python的urllib。可以用urllib.urlopen("url").read()可以轻松读取页面上面的静态信息。但是，随着时代的发展，也来越多的网页中更多的使用javascript、jQuery、PHP等语言动态生成页面信息。因此，用urllib再去抓取页面HT

Python之抓取动态网页: python之抓取花瓣网图片实现方法： 1，创建一个文件夹。 2，模拟请求网络服务。 3，匹配抓取的图片。 4，保存。#_*_coding:utf8_*_ import re import os import urllib,urllib2 import sys reload(sys) #创建保存图片文件夹 if(os.path.exists('保存图片文件的名称')==False:

爬虫技术:(JavaScript渲染)动态页面抓取超级指南: 当我们进行网页爬虫时，我们会利用一定的规则从返回的 HTML 数据中提取出有效的信息。但是如果网页中含有 JavaScript 代码，我们必须经过渲染处理才能获得原始数据。此时，如果我们仍采用常规方法从中抓取数据，那么我们将一无所获。浏览器知道如何处理这些代码并将其展现出来，但是我们的程序该如何处理这些代码呢？接下来，我将介绍一个简单粗暴的方法来抓取含有 JavaScript 代码的网页信息。

Python爬虫爬取动态页面思路+实例（一）: 简介有时候，我们天真无邪的使用urllib库或Scrapy下载HTML网页时会发现，我们要提取的网页元素并不在我们下载到的HTML之中，尽管它们在浏览器里看起来唾手可得。这说明我们想要的元素是在我们的某些操作下通过js事件动态生成的。举个例子，我们在刷QQ空间或者微博评论的时候，一直往下刷，网页越来越长，内容越来越多，就是这个让人又爱又恨的动态加载。爬取动态页面目前来说有两种方法分析页面请求（这篇

python爬取静态和动态网页: python爬取静态网页1，网上关于静态网页的爬取例子有很多。自己写的一个python爬百度视频搜索网页的代码：#!/usr/bin/python #coding=utf-8import sys import urllib import urllib2 from bs4 import BeautifulSoupreload(sys) sys.setdefaultencoding('utf-8')u

Python爬虫如何获取动态内容-上: 首先这里说一下我标题动态内容指的就是一个网页，每天你去浏览它的时候有些内容是更新的，所以这些是在源代码里面没有的。例子为B站每天的轮播和静态推荐内容都是不断更新的。因此，如果想要爬取这些信息，一直用之前的爬取方式：requests.get(URL) ，是找不到这些的。用的是和get相呼应的：requests.post(URL) 。关键一，就是如何正确得到这些动态更新内容的URL：

【Python爬虫5】提取JS动态网页数据: 动态网页示例对加载内容进行逆向工程 1通过开发者工具的逆向工程 2通过墨盒测试的逆向工程 21搜索条件为空时 22用号匹配时 22用号匹配时渲染动态网页 1使用WebKit渲染引擎 2使用Selenium自定义渲染现在大部分的主流网站都用JavaScript动态显示网页内容，这样使得我们之前提取技术无法正常运行。本篇将介绍两种提取基于JS动态网页的数据。 JavaScript逆向工程渲染Ja

python selenium 获取动态网页数据: # -*- coding:utf-8 -*- import requests from bs4 import BeautifulSoup from selenium import webdriver import time import json import sys reload(sys) sys.setdefaultencoding("utf-8") curpath=sys.path[0]

Python3网络爬虫：requests爬取动态网页内容: 本文为学习笔记学习博主:http://blog.csdn.net/c406495762 Python版本：python3.+ 运行环境：OSX IDE：pycharm一、工具准备抓包工具：在OSX下,我使用的是Charles4.0 - 下载链接以及安装教程:http://www.sdifen.com/charles4.html - 安装完成后，要给Charles安装证书,Mac上使用Ch

Chrome + Python 抓取动态网页内容: 用Python实现常规的静态网页抓取时，往往是用urllib2来获取整个HTML页面，然后从HTML文件中逐字查找对应的关键字。如下所示： import urllib2 url="http://mm.taobao.com/json/request_top_list.htm?type=0&page=1" up=urllib2.urlopen(url)#打开目标页面，存入变量...

如何获取动态网页所显示的数据？: 例如网址 http://myeventmarket.com/offprice/companies/* ，我使用firefox 或者 ie 查看页面源代码的方式，都无法显示文本的超链接，当把鼠标移动到文

CSDN爬虫（六）——动态网页爬取的两种策略: CSDN爬虫（六）——动态网页爬取的两种策略说明开发环境：jdk1.7+myeclipse10.7+win74bit+mysql5.5+webmagic0.5.2+jsoup1.7.2 爬虫框架：webMagic 建议：建议首先阅读webMagic的文档，再查看此系列文章，便于理解，快速学习：http://webmagic.io/ 开发所需jar下载（不包括数据库操作相关jar包）：点我下载该系

爬虫篇：动态网页的处理方式（中）——渲染动态网页: 每篇一句： A strong man will struggle with the storms of fate. 前言：上一篇文章中我们介绍了爬取动态网页的一种方式：逆向工程。这种方式有一点美中不足：这种方式要求我们对JavaScript以及Ajax有一定的了解，而且当网页的JS代码混乱，难以分析的时候，上述过程会花费我们大量的时间和精力。这时候，如果对爬虫的执行效率...

Java网页数据抓取实例: 在很多行业中，要对行业数据进行分类汇总，及时分析行业数据，对于公司未来的发展，

基于WebKit浏览器引擎的动态页面数据采集方案: 基于WebKit浏览器引擎的动态页面数据采集方案

动态网站数据采集 - 时光网电影信息爬虫: 分析由于时光网中电影的票房、排名等大部分信息是通过Ajax异步加载的，所以，使用常规的静态网站抓取技术，无法获取到这些信息。要获取这些信息，必须从Ajax请求中查找。先点开一个正在上映的电影《前任3》首先，找到是哪个Ajax请求用于获取这些信息发现，以下url返回了所需要的数据 Ajax请求URL http://service.library.mtime.com/

易语言怎样调用讯代理的动态转发。: 初学者，易语言不知道怎样调用讯代理，求有经验的大哥解答！！！1

终于明白阿里百度这样的大公司，为什么面试经常拿ThreadLocal考验求职者了: 点击上面↑「爱开发」关注我们每晚10点，捕获技术思考和创业资源洞察什么是ThreadLocalThreadLocal是一个本地线程副本变量工具类，各个线程都拥有一份线程私有的数

程序员必须掌握的核心算法有哪些？: 由于我之前一直强调数据结构以及算法学习的重要性，所以就有一些读者经常问我，数据结构与算法应该要学习到哪个程度呢？，说实话，这个问题我不知道要怎么回答你，主要取决于你想学习到哪些程度，不过针对这个问题，我稍微总结一下我学过的算法知识点，以及我觉得值得学习的算法。这些算法与数据结构的学习大多数是零散的，并没有一本把他们全部覆盖的书籍。下面是我觉得值得学习的一些算法以及数据结构，当然，我也会整理一些看过...

《奇巧淫技》系列-python！！每天早上八点自动发送天气预报邮件到QQ邮箱: 此博客仅为我业余记录文章所用，发布到此，仅供网友阅读参考，如有侵权，请通知我，我会删掉。补充有不少读者留言说本文章没有用，因为天气预报直接打开手机就可以收到了，为何要多此一举发送到邮箱呢！！！那我在这里只能说：因为你没用，所以你没用！！！这里主要介绍的是思路，不是天气预报！不是天气预报！！不是天气预报！！！天气预报只是用于举例。请各位不要再刚了！！！下面是我会用到的两个场景：每日下

死磕YOLO系列，YOLOv1 的大脑、躯干和手脚: YOLO 是我非常喜欢的目标检测算法，堪称工业级的目标检测，能够达到实时的要求，它帮我解决了许多实际问题。这就是 YOLO 的目标检测效果。它定位了图像中物体的位置，当然，也能预测物体的类别。之前我有写博文介绍过它，但是每次重新读它的论文，我都有新的收获，为此我准备写一个系列的文章来详尽分析它。这是第一篇，从它的起始 YOLOv1 讲起。 YOLOv1 的论文地址：https://www.c...

知乎高赞：中国有什么拿得出手的开源软件产品？(整理自本人原创回答): 知乎高赞：中国有什么拿得出手的开源软件产品？在知乎上，有个问题问“中国有什么拿得出手的开源软件产品（在 GitHub 等社区受欢迎度较好的）？” 事实上，还不少呢~ 本人于2019.7.6进行了较为全面的回答，对这些受欢迎的 Github 开源项目分类整理如下：分布式计算、云平台相关工具类 1.SkyWalking，作者吴晟、刘浩杨等等仓库地址: apache/skywalking 更...

20行Python代码爬取王者荣耀全英雄皮肤: 引言王者荣耀大家都玩过吧，没玩过的也应该听说过，作为时下最火的手机MOBA游戏，咳咳，好像跑题了。我们今天的重点是爬取王者荣耀所有英雄的所有皮肤，而且仅仅使用20行Python代码即可完成。准备工作爬取皮肤本身并不难，难点在于分析，我们首先得得到皮肤图片的url地址，话不多说，我们马上来到王者荣耀的官网：我们点击英雄资料，然后随意地选择一位英雄，接着F12打开调试台，找到英雄原皮肤的图片...

简明易理解的@SpringBootApplication注解源码解析（包含面试提问）: 欢迎关注文章系列，关注我《提升能力，涨薪可待》《面试知识，工作可待》《实战演练，拒绝996》欢迎关注我博客，原创技术文章第一时间推出也欢迎关注公众号【Ccww笔记】，同时推出如果此文对你有帮助、喜欢的话，那就点个赞呗，点个关注呗！《提升能力，涨薪可待篇》- @SpringBootApplication注解源码解析一、@SpringBootApplication 的作用是什...

西游记团队中如果需要裁掉一个人，会先裁掉谁？: 2019年互联网寒冬，大批企业开始裁员，下图是网上流传的一张截图：裁员不可避免，那如何才能做到不管大环境如何变化，自身不受影响呢？我们先来看一个有意思的故事，如果西游记取经团队需要裁员一名，会裁掉谁呢，为什么？西游记团队组成： 1.唐僧作为团队teamleader，有很坚韧的品性和极高的原则性，不达目的不罢休，遇到任何问题，都没有退缩过，又很得上司支持和赏识(直接得到唐太宗的任命，既给袈...

Python语言高频重点汇总: Python语言高频重点汇总 GitHub面试宝典仓库回到首页目录： Python语言高频重点汇总目录： 1. 函数-传参 2. 元类 3. @staticmethod和@classmethod两个装饰器 4. 类属性和实例属性 5. Python的自省 6. 列表、集合、字典推导式 7. Python中单下划线和双下划线 8. 格式化字符串中的%和format 9. 迭代器和生成器 10...

究竟你适不适合买Mac？: 我清晰的记得，刚买的macbook pro回到家，开机后第一件事情，就是上了淘宝网，花了500元钱，找了一个上门维修电脑的师傅，上门给我装了一个windows系统。。。。。。表砍我。。。当时买mac的初衷，只是想要个固态硬盘的笔记本，用来运行一些复杂的扑克软件。而看了当时所有的SSD笔记本后，最终决定，还是买个好（xiong）看（da）的。已经有好几个朋友问我mba怎么样了，所以今天尽量客观

程序员一般通过什么途径接私活？: 二哥，你好，我想知道一般程序猿都如何接私活，我也想接，能告诉我一些方法吗？上面是一个读者“烦不烦”问我的一个问题。其实不止是“烦不烦”，还有很多读者问过我类似这样的问题。我接的私活不算多，挣到的钱也没有多少，加起来不到 20W。说实话，这个数目说出来我是有点心虚的，毕竟太少了，大家轻喷。但我想，恰好配得上“一般程序员”这个称号啊。毕竟苍蝇再小也是肉，我也算是有经验的人了。唾弃接私活、做外

ES6基础-ES6的扩展: 进行对字符串扩展，正则扩展，数值扩展，函数扩展，对象扩展，数组扩展。开发环境准备：编辑器（VS Code, Atom，Sublime）或者IDE（Webstorm）浏览器最新的Chrome 字符串的扩展：模板字符串，部分新的方法，新的unicode表示和遍历方法：部分新的字符串方法 padStart，padEnd，repeat，startsWith，endsWith，includes 字...

Python爬虫爬取淘宝，京东商品信息: 小编是一个理科生，不善长说一些废话。简单介绍下原理然后直接上代码。使用的工具（Python+pycharm2019.3+selenium+xpath+chromedriver）其中要使用pycharm也可以私聊我selenium是一个框架可以通过pip下载 pip install selenium -i https://pypi.tuna.tsinghua.edu.cn/simple/

阿里程序员写了一个新手都写不出的低级bug，被骂惨了。: 你知道的越多，你不知道的越多点赞再看，养成习惯本文 GitHub https://github.com/JavaFamily 已收录，有一线大厂面试点思维导图，也整理了很多我的文档，欢迎Star和完善，大家面试可以参照考点复习，希望我们一起有点东西。前前言为啥今天有个前前言呢？因为你们的丙丙啊，昨天有牌面了哟，直接被微信官方推荐，知乎推荐，也就仅仅是还行吧（心里乐开花）

Java工作4年来应聘要16K最后没要,细节如下。。。: 前奏：今天2B哥和大家分享一位前几天面试的一位应聘者，工作4年26岁，统招本科。以下就是他的简历和面试情况。基本情况：专业技能： 1、 熟悉Sping了解SpringMVC、SpringBoot、Mybatis等框架、了解SpringCloud微服务 2、 熟悉常用项目管理工具：SVN、GIT、MAVEN、Jenkins 3、 熟悉Nginx、tomca

Python爬虫精简步骤1 获取数据: 爬虫的工作分为四步： 1.获取数据。爬虫程序会根据我们提供的网址，向服务器发起请求，然后返回数据。 2.解析数据。爬虫程序会把服务器返回的数据解析成我们能读懂的格式。 3.提取数据。爬虫程序再从中提取出我们需要的数据。 4.储存数据。爬虫程序把这些有用的数据保存起来，便于你日后的使用和分析。这一篇的内容就是：获取数据。首先，我们将会利用一个强大的库——requests来获取数据。在电脑上安装

作为一个程序员，CPU的这些硬核知识你必须会！: CPU对每个程序员来说，是个既熟悉又陌生的东西？如果你只知道CPU是中央处理器的话，那可能对你并没有什么用，那么作为程序员的我们，必须要搞懂的就是CPU这家伙是如何运行的，尤其要搞懂它里面的寄存器是怎么一回事，因为这将让你从底层明白程序的运行机制。随我一起，来好好认识下CPU这货吧把CPU掰开来看对于CPU来说，我们首先就要搞明白它是怎么回事，也就是它的内部构造，当然，CPU那么牛的一个东

破14亿，Python分析我国存在哪些人口危机！: 2020年1月17日，国家统计局发布了2019年国民经济报告，报告中指出我国人口突破14亿。猪哥的朋友圈被14亿人口刷屏，但是很多人并没有看到我国复杂的人口问题：老龄化、男女比例失衡、生育率下降、人口红利下降等。今天我们就来分析一下我们国家的人口数据吧！更多有趣分析教程，扫描下方二维码关注vx公号「裸睡的猪」即可查看！一、背景 1.人口突破14亿 2020年1月17日，国家统计局发布

web前端javascript+jquery知识点总结: Javascript javascript 在前端网页中占有非常重要的地位，可以用于验证表单，制作特效等功能，它是一种描述语言，也是一种基于对象（Object）和事件驱动并具有安全性的脚本语言，语法同java类似，是一种解释性语言，边执行边解释。 JavaScript的组成： ECMAScipt 用于描述: 语法，变量和数据类型，运算符，逻辑控制语句，关键字保留字，对象。浏览器对象模型（Br

Qt实践录：开篇: 本系列文章介绍笔者的Qt实践之路。

在家远程办公效率低？那你一定要收好这个「在家办公」神器！: 相信大家都已经收到国务院延长春节假期的消息，接下来，在家远程办公可能将会持续一段时间。但是问题来了。远程办公不是人在电脑前就当坐班了，相反，对于沟通效率，文件协作，以及信息安全都有着极高的要求。有着非常多的挑战，比如： 1在异地互相不见面的会议上，如何提高沟通效率？ 2文件之间的来往反馈如何做到及时性？如何保证信息安全？ 3如何规划安排每天工作，以及如何进行成果验收？ ......

作为一个程序员，内存和磁盘的这些事情，你不得不知道啊！！！: 截止目前，我已经分享了如下几篇文章：一个程序在计算机中是如何运行的？超级干货！！！作为一个程序员，CPU的这些硬核知识你必须会！作为一个程序员，内存的这些硬核知识你必须懂！这些知识可以说是我们之前都不太重视的基础知识，可能大家在上大学的时候都学习过了，但是嘞，当时由于老师讲解的没那么有趣，又加上这些知识本身就比较枯燥，所以嘞，大家当初几乎等于没学。再说啦，学习这些，也看不出来有什么用啊！

这个世界上人真的分三六九等，你信吗？: 偶然间，在知乎上看到一个问题一时间，勾起了我深深的回忆。以前在厂里打过两次工，做过家教，干过辅导班，做过中介。零下几度的晚上，贴过广告，满脸、满手地长冻疮。再回首那段岁月，虽然苦，但让我学会了坚持和忍耐。让我明白了，在这个世界上，无论环境多么的恶劣，只要心存希望，星星之火，亦可燎原。下文是原回答，希望能对你能有所启发。如果我说，这个世界上人真的分三六九等，

为什么听过很多道理，依然过不好这一生?: 记录学习笔记是一个重要的习惯，不希望学习过的东西成为过眼云烟。做总结的同时也是一次复盘思考的过程。本文是根据阅读得到 App上《万维钢·精英日课》部分文章后所做的一点笔记和思考。学习是一个系统的过程，思维模型的建立需要相对完整的学习和思考过程。以下观点是在碎片化阅读后总结的一点心得总结。

B 站上有哪些很好的学习资源?: 哇说起B站，在小九眼里就是宝藏般的存在，放年假宅在家时一天刷6、7个小时不在话下，更别提今年的跨年晚会，我简直是跪着看完的！！最早大家聚在在B站是为了追番，再后来我在上面刷欧美新歌和漂亮小姐姐的舞蹈视频，最近两年我和周围的朋友们已经把B站当作学习教室了，而且学习成本还免费，真是个励志的好平台ヽ(.◕ฺˇд ˇ◕ฺ;)ﾉ下面我们就来盘点一下B站上优质的学习资源：综合类 Oeasy：综合

雷火神山直播超两亿，Web播放器事件监听是怎么实现的？: Web播放器解决了在手机浏览器和PC浏览器上播放音视频数据的问题，让视音频内容可以不依赖用户安装App，就能进行播放以及在社交平台进行传播。在视频业务大数据平台中，播放数据的统计分析非常重要，所以Web播放器在使用过程中，需要对其内部的数据进行收集并上报至服务端，此时，就需要对发生在其内部的一些播放行为进行事件监听。那么Web播放器事件监听是怎么实现的呢？ 01 监听事件明细表名

3万字总结，Mysql优化之精髓: 本文知识点较多，篇幅较长，请耐心学习 MySQL已经成为时下关系型数据库产品的中坚力量，备受互联网大厂的青睐，出门面试想进BAT，想拿高工资，不会点MySQL优化知识，拿offer的成功率会大大下降。为什么要优化系统的吞吐量瓶颈往往出现在数据库的访问速度上随着应用程序的运行，数据库的中的数据会越来越多，处理时间会相应变慢 数据是存放在磁盘上的，读写速度无法和内存相比如何优化设计

一条链接即可让黑客跟踪你的位置！ | Seeker工具使用: 搬运自：冰崖的部落阁（icecliffsnet）严正声明：本文仅限于技术讨论，严禁用于其他用途。请遵守相对应法律规则，禁止用作违法途径，出事后果自负！上次写的防社工文章里边提到的gps定位信息（如何防止自己被社工或人肉）除了主动收集他人位置信息以外，我们还可以进行被动收集（没有技术含量） Seeker作为一款高精度地理位置跟踪工具，同时也是社交工程学（社会工程学）爱好者...

前端JS初级面试题二 (｡•ˇ‸ˇ•｡)老铁们！快来瞧瞧自己都会了么: 1. 传统事件绑定和符合W3C标准的事件绑定有什么区别？传统事件绑定 <div onclick="">123</div> div1.onclick = function(){}; <button onmouseover=""></button> 注意：如果给同一个元素绑定了两次或多次相同类型的事件，那么后面的绑定会覆盖前面的绑定（不支持DOM事...

Python学习笔记（语法篇）: 本篇博客大部分内容摘自埃里克·马瑟斯所著的《Python编程：从入门到实战》（入门类书籍），采用举例的方式进行知识点提要关于Python学习书籍推荐文章《学习Python必备的8本书》 Python语法特点：通过缩进进行语句组织不需要变量或参数的声明冒号 1 变量和简单数据结构 1.1 变量命名只能包含字母、数字和下划线，且不能以数字打头。 1.2 字符串在Python中，用引号...

[Pyhon疫情大数据分析] 一.腾讯实时数据爬取、Matplotlib和Seaborn可视化分析全国各地区、某省各城市、新增趋势: 思来想去，虽然很忙，但还是挤时间针对这次肺炎疫情写个Python大数据分析系列博客，包括网络爬虫、可视化分析、GIS地图显示、情感分析、舆情分析、主题挖掘、威胁情报溯源、知识图谱、预测预警及AI和NLP应用等。第一篇文章将分享腾讯疫情实时数据抓取，获取全国各地和贵州省各地区的实时数据，并将数据存储至本地，最后调用Maplotlib和Seaborn绘制中国各地区、贵州省各城市、新增人数的图形。希望这篇可视化分析文章对您有所帮助!

小白也会用的情人节表白神器: 鉴于情人节女朋友总说直男，上网找了个模板，改了一下，发现效果还不错。然后又录了一个视频，发现凑合，能用。现在免费分享给程序员，去表白去吧。。当然比较low因为考研没时间优化，懒着优化了。先看一下效果吧：页面太多了，这里我只放几个页面里面有音乐，还凑合不是太单调。所有页面最后的合成效果：接下来教大家如何使用：新建文件夹：love 然后建立这几个...

论如何用python发qq消息轰炸虐狗好友: 因为我的某个好友在情人节的时候秀恩爱，所以我灵光一闪制作了qq消息轰炸并记录了下来。首先我的编程环境是： windows 10系统 python3.6 记得要下载win32 pip install win32 思路介绍其实也非常简单将要发出去的句子储存在列表中然后用随机模块调用将随机出来的元素储存在剪贴板中连接QQ 找到指定对象疯狂输出怎么样，简单吧开始打代码吧 imp...

情人节闲着无聊写个python程序: 用python在图片上写字 ''' 依赖，需要安装Pillow pip install Pillow ''' from PIL import Image, ImageDraw, ImageFont import sys #判断参数个数，可以不要 import os #判断文件是否存在，可以不要 image_path = "1.jpg" font_path = "SIMLI.TTF" tex...

前端 HTML5+CSS3基础知识一睡觉没前途(￣o￣) . z Z 快来学习: 目录 CSS3有哪些新特性？ html5\CSS3有哪些新特性、移除了那些元素？如何处理HTML5新标签的浏览器兼容问题？如何区分 HTML 和 HTML5？本地存储（Local Storage ）和cookies（储存在用户本地终端上的数据）之间的区别是什么？如何实现浏览器内多个标签页之间的通信? 你如何对网站的文件和资源进行优化？什么是响应式设计？新的 HTML5 文档类型和字符集是...

2020程序员面试必备！58道精选面试题，这样学习，大厂没问题！: 面试题目： 1-10题： 1、java中==和equals和hashCode的区别 2、int与integer的区别 3、String、StringBuffer、StringBuilder区别 4、什么是内部类？内部类的作用 5、进程和线程的区别 6、final，finally，finalize的区别 7、Serializable 和Parcelable 的区别 8、静态属性和静态方法是否可以被...

新型冠状病毒，疫情实时追踪。: 说来惭愧，享受CSND的帮助已经16年了，却从来没有为他人做过贡献。今天开始本人将坚持在CSDN发布个人技术文章，为自己巩固理解、也为他人排忧解难。最近，新型冠状病毒的实时疫情一直牵动着每个人的心，作为一名程序员在这非常时期希望能通过技术手段为大家提供实时的调情播报。项目名称：新型冠状病毒，疫情实时追踪技术标签：Html5、Css、JavaScript、Jquery、Ajax、Echa...

在三线城市工作爽吗？: 我是一名程序员，从正值青春年华的 24 岁回到三线城市洛阳工作，至今已经 6 年有余。一不小心又暴露了自己的实际年龄，但老读者都知道，我驻颜有术，上次去看房子，业务员肯定地说：“小哥肯定比我小，我今年还不到 24。”我只好强颜欢笑：“你说得对。” 从我拥有记忆到现在进入而立之年，我觉得，我做过最明智的选择有下面三个： 1）高中三年，和一位女同学保持着算不上朋友的冷淡关系；大学半年，把这位女同学追到...

Python原来这么好学-1.1节:在windows中安装Python: 目录 1.1.1 在windows中安装python 1.1.2 本节知识要点 1.1.3 课后习题这是一本教同学们彻底学通Python的高质量学习教程，认真地学习每一章节的内容，每天只需学好一节，帮助你成为一名卓越的Python程序员: 本教程面向的是零编程基础的同学，非科班人士，以及有一定编程水平的中高级程序员。 1.1.1 在windows中安装python 笔者所在...

HTML零基础入门教程（十分详细）、HTML详细教程、HTML基础: 参考：http://www.runoob.com/html/html-tutorial.html 1 什么是HTML HTML 是用来描述网页的一种语言。HTML 是一种在 Web 上使用的通用标记语言。HTML 允许你格式化文本，添加图片，创建链接、输入表单、框架和表格等等，并可将之存为文本文件，浏览器即可读取和显示。 HTML 指的是超文本标记语言: HyperText Markup Lan...

前后端开发人员必备Chrome插件: 这里介绍前后端开发人员必备的多款Chrome插件，有了这些插件，可以为你的开发助力不少，其中包括接口调试，定时等插件。

努力做个中年程序员: 27岁的那年，我问一个本科毕业就从事软件行业的同学，我说：“我准备去读研究生，30岁的时候才毕业，是不是有点儿晚？”他告诉我：“30岁是技术最好的时候。” 我吓了一跳，但是我实在不想继续当初中计算机老师了，有什么意思呢？虽然感觉前面的路可能会有困难，但还是硬着头皮去读吧。终于，2011年1月毕业了，2011年2月开始进公司，到现在，2020年2月，刚好9年。9年，也应该小有成就...

更快学习编程的7个重要技巧: 无论您是正在攻读计算机科学的学位，还是使用GI Bill选择下一个任务的资深人士，有抱负的自学成才的开发人员或编码训练营的学生，精通编程技术都是永恒的斗争。为了帮助您的学习（由Coding Dojo讲师提供），这是有关如何更快地学习编程的七个技巧。 1.边干边学。在学习时始终使用代码对于每个新主题，您越早开始使用代码，您就会越快地学习给定的概念。即使您精读了一整章的内容，并且for循环之类的...

IT小公司管理的几点思考: 我最近好几年一直在小公司待着，基本做的都是技术架构+管理的工作。最近我也进行了一下总结，所以决定也写一篇博文，把我所遇到的一些问题和困惑都写出来，和大家讨论讨论。首先我认为：小公司管理很困难，而所有的管理困境的根源都在于钱！ ...

超级旋风1.9.260.204下载: 1.速度快 2.界面漂亮 3.批量下载 4.使用各种链接相关下载链接：[url=//download.csdn.net/download/hmxgk10/2170967?utm_source=bbsseo]//download.csdn.net/download/hmxgk10/2170967?utm_source=bbsseo[/url]

ASP.NET 2.0中的partial下载: ASP.NET 2.0中的partial 1. 什么是局部类型？ C# 2.0 引入了局部类型的概念。局部类型允许我们将一个类、结构或接口分成几个部分,分别实现在几个不同的.cs文件中。相关下载链接：[url=//download.csdn.net/download/udd2011/3235954?utm_source=bbsseo]//download.csdn.net/download/udd2011/3235954?utm_source=bbsseo[/url]

JavaWeb应用开发模式研究下载: 论文详细阐述了开发JavaWeb应用的集中常见模式，包括MVC，jsp+javabean+servlet, SSH 等。相关下载链接：[url=//download.csdn.net/download/liangniechui1795/10880052?utm_source=bbsseo]//download.csdn.net/download/liangniechui1795/10880052?utm_source=bbsseo[/url]

相关热词 c# 识别回车 c#生成条形码ean13 c#子控制器调用父控制器 c# 写大文件 c# 浏览pdf c#获取桌面图标的句柄 c# list反射 c# 句柄进程 c# 倒计时线程 c# 窗体背景色

我们是很有底线的