Mysql JDBC执行大数据量操作卡死 [问题点数:21分]

Bbs1
本版专家分:0
结帖率 96.77%
Bbs1
本版专家分:22
白话 MySQL TCP 通信协议-5分钟理解
MySQL协议简短说明 大致上采用一问多答的方式,由client发问。 所有包头前3个字节为整个包的大小,第3个字节为此次应答中包的序号。 故单包大小上限(2^24)-1=(16M-1)字节,序号0~255循环使用。 client端第一次连接时,先由服务端发送一个handshake报文给客户端。 handshake报文包含: 协议版本、服务端版本、协议支持(兼容)内容标志位(32位)、分配连接ID
java.lang.outofMemoryError解决方法
servicemix6.0.1报错如下: 解决方法: 增加环境变量: JAVA_PERM_MEM 及 JAVA_MAX_PERM_MEM 其值分别为: 256m 1024m 然后再重启  servicemix.bat 调试看看
Mysql删除数据特别慢
<em>Mysql</em>删除数据特别慢 1.前言 笔者的mysql表<em>数据量</em>大概是1亿条,然后直接删除某一批次数据的时候,删除<em>操作</em>极其缓慢,<em>执行</em>了很久之后都不能删除成功。我就终止这个<em>操作</em>了。 2.问题 但是再次<em>执行</em>删除<em>操作</em>,但是是根据分区<em>执行</em>的时候,遇到的问题是:刚开始删除特别快,但是越删越慢。<em>执行</em>过程如下: mysql&amp;gt; delete from fact_sales_temp where process_...
Java OutOfMemoryError 汇总
1、OOM for Heap=>例如:java.lang.OutOfMemoryError: Java heap space 分  析 此OOM是由于JVM中heap的最大值不满足需要,将设置heap的最大值调高即可,参数样例为:-Xmx2G 解决方法 调高heap的最大值,即-Xmx的值调大。2、OOM for Perm=>例如:java.lang.OutOfMemoryError: J
关于mysql的useCursorFetch参数
由于用到mysql的游标,希望可以一次返回10条记录(防止OOM),为
mysql jdbc驱动设置fetchsize 要连接字串里有useCursorFetch=true 才行
jdbc:mysql://127.0.0.1/:3306/test?useCursorFetch=true mysql版本,即驱动版本都在5 以上,就可以。测试过了,debug过了.如果无此参数,则只有  setFetchSize(Integer.MIN_VALUE);  才有效果,但就是每次rs.next() 取一条了。oracle 一般默认设置10条。 参考 http://bl
高分请教如何终止mysql正在执行的任务
昨天在mysql中的一个库中<em>执行</em>了source xx.sql这么一个命令,但今天都没跑完,现在我想终止这个任务,请问在不从启mysql的情况下,应该怎么办。这是个远程<em>操作</em>,我现在已经失去了当时的命令行
Mysql删除大量数据几种方案
有时候,数据多了就有烦恼了。将库内相关表数据移除(存入其他库内)可能是定期需要做的必要工作。 基本步骤如下: 1.导出预定的表内数据 2.导入到指定库内 3.移除原库的表内数据 很简单吧。我们一步一步来实现。 1.导出预定的表内数据 一般来说,大部分表不会将数据全部导出,会保留符合条件的数据。一般,以时间条件较为常见。比如:要求保留2个月内的数据。 我们使用mysqldump这个工...
优化mysql2006
check   table   table_name;解决mysql<em>卡</em><em>死</em>的问题 彻底优化mysql2006-12-06 17:56:47同时在线访问量继续增大 对于1G内存的服务器明显感觉到吃力 严重时甚至每天都会<em>死</em>机 或者时不时的服务器<em>卡</em>一下 这个问题曾经困扰了我半个多月 MySQL使用是很具伸缩性的算法,因此你通常能用很少的内存运行或给MySQL更多的被存以得到更好的性能
MySQL数据库操作问题
在MySQL数据库<em>操作</em>的时候难免会遇到<em>卡</em><em>死</em>的问题, 下面给出一个常用的小技巧: 1、show full processlist;   列出当前的<em>操作</em>process,一般会看到很多waiting的process,说明已经有<em>卡</em>住的proces了,我们要杀<em>死</em>这些process!! 2、kill processid;   processid表示process的id
Mysql删除数据时出现执行很慢并且删除失败的情况--线程堵塞
今天在<em>执行</em>一条sql语句时,之前这条sql语句用的好好的,今天<em>执行</em>很慢,到最后报1205的错,查看sql语句并没有错,百思不得其解,最后网上搜到是线程堵塞问题 DELETE FROM `wechat_user_r_department` WHERE `WECHAT_USER_ID`=1000 sql语句明明没错,报1205错误 解决办法: 数据库<em>执行</em>SQL语句 查询是哪个线程堵住了 SELECT...
求mysql大数据量的解决方案
有这么一种场景,燃气表,每分钟会采集一条数据进数据库,有数以万计的表,一年的<em>数据量</em>有1T左右,如果单台服务器,一年还可以,3、5年就不能胜任了,无论是磁盘空间还是读写压力,这时候,如何来做扩容?有没有
Windows10 mysql解决MySQL服务无法启动 系统出错 发生系统错误 1067
查看日志就是这个问题:Fatal error: Can't open and lock privilege tables: Table 'mysql.host' doesn't exi 最近学习用到mysql,之前装的mysql5.7莫名其妙出了问题,上次就是打不开mysql服务,一气之下重装了一个低版本的mysql5.5,删数据库真的好麻烦,好在重装了之后5.5用了一段时间,但是今天5.5版本...
解决Java从MySQL读取大量数据时
今天晚上突然有个服务无法启动。这个服务在启动的时候会从数据库中加载一些数据。查看日志:有开始加载的日志,但没有完成加载的日志,判断问题是在加载数据时<em>卡</em>住。用top查看进程,发现CPU占用为0%。又怀疑可能是因为jvm内存不够,用jstat查看jvm内存使用情况,发现各区内存占用率较低,连young gc都没有出现。再用jstack查看线程栈,发现线程<em>卡</em>在<em>JDBC</em>底层的TCP套接字读取上:  --
JDBC读取大量数据时的解决方法
测试JDK:1.8 测试系统:WIN10 先排除一些情况: 1、打开任务管理器,查看内存是否占满,然后进入资源管理器,查看CPU、硬盘、网络是否占满 2、如果你链接的是远程的服务器,请查看远程服务器的以上四种是否占满 (当年我也吃过这两亏) 3、排除以上两点,说明确实是<em>数据量</em>过大造成的,把代码添加以下的内容即可 connection.setAutoCommit(fals...
jdbc连接mysql 8 的一些坑
1、驱动包要升级为 mysql-connector-java-8.0.11.jar   2、<em>JDBC</em> driver 由“com.mysql.jdbc.Driver”改为“com.mysql.cj.jdbc.Driver”   3、url中加上“userSSL=false”。否则会出现以下错误: “Establishing SSL connection withoutserver's id...
mysql的四种连接方式--端口,TCP,SOCKET,PIPE,SHARED MEMORY
mysql的四种连接方式: 一、我们平时用的: 实际上 这种方式就是通过本地sock连接 mysql -utest -ptest 看到红线部分是@localhost 二、通过端口连接 需要加端口号,ip地址 mysql -utest -ptest -h127.0.0.1 -P3307 MySQL除了最常见的TCP连接方式外,还提供SOCKET(LINUX默认连接方式)、PIPE和SHARE...
帮忙看个异常!
这个异常有时出现,有时不出现,不知道是什么原因,希望大家能帮下忙 Exception in thread "AWT-EventQueue-0" java.lang.NullPointerExcepti
记一次mysql删除大量数据的优化
最近工作中,遇到了要删除一些相关库的数据信息,涉及的数据有点多。 实际场景是这样的,公司的一个电商项目,电商为卖家准备了报表的相关数据,报表业务在实现时,将一些订单信息冷库备份到报表的库中,然后再在报表的库中进行相关的报表相关业务的计算。 由于项目起步时间晚,客户留存率不高,就遗留了相当大的一部分流失用户的数据,现在,开始着手删除这些已经不再使用系统的客户的历史数据。 数据库中做了分表将相关
记一次mysql 执行查询语句的问题
背景 表里面有上亿条数据, 写了一条左联的查询语句, 比如这样 select a.city, b.value from tablea as a left join tableb as b on a.cid = b.cid where a.source = 10 然后语句<em>执行</em>就<em>卡</em><em>死</em>了, 实际上这条语句在tablea 只有30条数据, 在tableb没有数据, 然后用 explain 查看语句也走索...
问题解决7:由于数据量大,导致Mysql查询阻塞解决.
1、在mysql中查看当前<em>执行</em>的程序 -- 查看当前系统正在<em>执行</em>的sql show full PROCESSLIST; -- 杀<em>死</em>造成阻塞的进程 KILL id
大家帮忙看看这个异常
我设置了一个vector全局变量,而且这个可能存放上万条UINT类型变量 是不是内存不够
JDBC数据量结果集返回的问题
如果sql查到的结果集很大 不希望一次把它们全部读到本地内存里, 有没有办法多次返回,一次只返回固定数量的行集 另外,不想使用如select * from table limit index,end这
解决 SqlServer执行脚本,文件过大,内存溢出问题
解决 SqlServer<em>执行</em>脚本,SQL文件太大,内存溢出问题,直接编辑文件复制粘贴形式没有任何反应; <em>执行</em>.sql脚本文件,如果文件较大时,<em>执行</em>会出现内存溢出问题,可用命令替代 cmd 中输入 osql -S127.0.0.1,1433 -U sa -P sa -i d:\pfcms.sql ,-S 服务器名 -U 用户名 -P 密码 -i 文件地址,等待<em>执行</em>完毕即可 1433为端口号 d...
MySql jdbc 连接参数
  jdbc:mysql://192.168.1.25:3306/test?useUnicode=true&amp;amp;characterEncoding=UTF-8    见官网: http://dev.mysql.com/doc/connector-j/en/connector-j-reference-configuration-properties.html 5.1 Dr...
从mysql 连接断开到tcp 包原理分析
http://compgroups.net/comp.databases.mysql/lost-connection-to-mysql-server-during-q/198927
MySQL删除数据库时无响应解决办法
今天在删除远程主机上MySQL中的一个数据库时,遇到了这样一个问题。 <em>执行</em>drop database语句的时候,远程主机一直在响应,无法正常删除。登录到远程主机上删除也无响应。 这个问题的解决办法如下:在远程主机上登录MySQL,<em>执行</em>show full processlist观察state和info两列,查看有哪些线程在运行。经过查询发现之前远程删除的时候由于网络中断,锁表了。所以导致再次登录的
jdbc 跟mysql 的连接是 基于tcp协议吗
jdbc 跟mysql 的连接是 基于tcp协议吗,求大神讲解
MySQL表不能修改、删除等操作、锁情况的处理办法。
MySQL如果频繁的修改一个表的数据,那么这么表会被锁<em>死</em>。造成假<em>死</em>现象。 比如用Navicat等连接工具<em>操作</em>,Navicat会直接未响应,只能强制关闭软件,但是重启后依然无效。 解决办法: 首先<em>执行</em>: show full processlist; //列出当前的<em>操作</em>process,一般会看到很多waiting的process,说明已经有<em>卡</em>住的proces了,我们要杀<em>死</em>这些pr...
解决Java从MySQL读取大量数据时在SocketInputStream.socketRead0的问题
今天晚上突然有个服务无法启动。这个服务在启动的时候会从数据库中加载一些数据。查看日志:有开始加载的日志,但没有完成加载的日志,判断问题是在加载数据时<em>卡</em>住。用top查看进程,发现CPU占用为0%。又怀疑可能是因为jvm内存不够,用jstat查看jvm内存使用情况,发现各区内存占用率较低,连young gc都没有出现。再用jstack查看线程栈,发现线程<em>卡</em>在<em>JDBC</em>底层的TCP套接字读取上:  --
mysql socket连接比tcp连接方式更快
mysql有两种连接方式,常用的一般是tcp mysql -h(ip) -uroot -pxxx #常用的 mysql -S /tmp/mysqld.sock  mysql 采用unix socket连接方式,比用tcp的方式更快,但只适用于mysql和应用同在一台PC上。如果不在同一台pc上,就没有办法连接了。而且我们可以把socket文件放在/dev/shm (内存)。/etc/mysql
JDBC驱动无法加载成功?一天了还没解决。。。
1)已经将驱动bin.jar拷贝到工程下的WEB-INF\lib下了, 2)并且把驱动包路径加入了classpath; 3)且在Myeclipse中的Java Buid Path/Libraries/
今天启动weblogic7时,运行到config.xml文件后,提示:java.lang.OutOfMemoryError
问题如题,请问怎么能解决呢?
postgre执行以下语句时提示内存溢出。
我在GP也就是postgre数据库中<em>执行</em>: select entry_id ,array_agg(g_no) as g_no,array_agg(G_NAME) as g_name from entr
"http-bio-8080"-exec-1" java.lang.OutOfMemoryError: PermGen space
Exception in thread ""http-bio-8080"-exec-1" java.lang.OutOfMemoryError: PermGen space Exception in
java系统突然
最近不知道为什么,JAVA系统会无原无故的突然<em>卡</em><em>死</em>,看了一下服务器的CPU和内存都是正常的。使用率并不高。后台JOB也停跑了,日志没有任何记录,就突然从某个时间点断了似的。无论什么日志都没有了记录,也
如何使用DBeaver来查看内置数据库的表
在JBoss中可以使用内置的数据库,即Derby数据库,该数据库短小灵活,可以存储
终于明白阿里百度这样的大公司,为什么面试经常拿ThreadLocal考验求职者了
点击上面↑「爱开发」关注我们每晚10点,捕获技术思考和创业资源洞察什么是ThreadLocalThreadLocal是一个本地线程副本变量工具类,各个线程都拥有一份线程私有的数
《奇巧淫技》系列-python!!每天早上八点自动发送天气预报邮件到QQ邮箱
此博客仅为我业余记录文章所用,发布到此,仅供网友阅读参考,如有侵权,请通知我,我会删掉。 补充 有不少读者留言说本文章没有用,因为天气预报直接打开手机就可以收到了,为何要多此一举发送到邮箱呢!!!那我在这里只能说:因为你没用,所以你没用!!! 这里主要介绍的是思路,不是天气预报!不是天气预报!!不是天气预报!!!天气预报只是用于举例。请各位不要再刚了!!! 下面是我会用到的两个场景: 每日下
面试官问我:什么是消息队列?什么场景需要他?用了会出现什么问题?
你知道的越多,你不知道的越多 点赞再看,养成习惯 GitHub上已经开源 https://github.com/JavaFamily 有一线大厂面试点脑图、个人联系方式,欢迎Star和完善 前言 消息队列在互联网技术存储方面使用如此广泛,几乎所有的后端技术面试官都要在消息队列的使用和原理方面对小伙伴们进行360°的刁难。 作为一个在互联网公司面一次拿一次Offer的面霸,打败了无数
8年经验面试官详解 Java 面试秘诀
    作者 | 胡书敏 责编 | 刘静 出品 | CSDN(ID:CSDNnews) 本人目前在一家知名外企担任架构师,而且最近八年来,在多家外企和互联网公司担任Java技术面试官,前后累计面试了有两三百位候选人。在本文里,就将结合本人的面试经验,针对Java初学者、Java初级开发和Java开发,给出若干准备简历和准备面试的建议。   Java程序员准备和投递简历的实
究竟你适不适合买Mac?
我清晰的记得,刚买的macbook pro回到家,开机后第一件事情,就是上了淘宝网,花了500元钱,找了一个上门维修电脑的师傅,上门给我装了一个windows系统。。。。。。 表砍我。。。 当时买mac的初衷,只是想要个固态硬盘的笔记本,用来运行一些复杂的扑克软件。而看了当时所有的SSD笔记本后,最终决定,还是买个好(xiong)看(da)的。 已经有好几个朋友问我mba怎么样了,所以今天尽量客观
MyBatis研习录(01)——MyBatis概述与入门
C语言自学完备手册(33篇) Android多分辨率适配框架 JavaWeb核心技术系列教程 HTML5前端开发实战系列教程 MySQL数据库实操教程(35篇图文版) 推翻自己和过往——自定义View系列教程(10篇) 走出思维困境,踏上精进之路——Android开发进阶精华录 讲给Android程序员看的前端系列教程(40集免费视频教程+源码) 版权声明 本文原创作者:谷哥的小弟 作者博客
程序员一般通过什么途径接私活?
二哥,你好,我想知道一般程序猿都如何接私活,我也想接,能告诉我一些方法吗? 上面是一个读者“烦不烦”问我的一个问题。其实不止是“烦不烦”,还有很多读者问过我类似这样的问题。 我接的私活不算多,挣到的钱也没有多少,加起来不到 20W。说实话,这个数目说出来我是有点心虚的,毕竟太少了,大家轻喷。但我想,恰好配得上“一般程序员”这个称号啊。毕竟苍蝇再小也是肉,我也算是有经验的人了。 唾弃接私活、做外
Python爬虫爬取淘宝,京东商品信息
小编是一个理科生,不善长说一些废话。简单介绍下原理然后直接上代码。 使用的工具(Python+pycharm2019.3+selenium+xpath+chromedriver)其中要使用pycharm也可以私聊我selenium是一个框架可以通过pip下载 pip install selenium -i https://pypi.tuna.tsinghua.edu.cn/simple/ 
阿里程序员写了一个新手都写不出的低级bug,被骂惨了。
你知道的越多,你不知道的越多 点赞再看,养成习惯 本文 GitHub https://github.com/JavaFamily 已收录,有一线大厂面试点思维导图,也整理了很多我的文档,欢迎Star和完善,大家面试可以参照考点复习,希望我们一起有点东西。 前前言 为啥今天有个前前言呢? 因为你们的丙丙啊,昨天有牌面了哟,直接被微信官方推荐,知乎推荐,也就仅仅是还行吧(心里乐开花)
Java工作4年来应聘要16K最后没要,细节如下。。。
前奏: 今天2B哥和大家分享一位前几天面试的一位应聘者,工作4年26岁,统招本科。 以下就是他的简历和面试情况。 基本情况: 专业技能: 1、&nbsp;熟悉Sping了解SpringMVC、SpringBoot、Mybatis等框架、了解SpringCloud微服务 2、&nbsp;熟悉常用项目管理工具:SVN、GIT、MAVEN、Jenkins 3、&nbsp;熟悉Nginx、tomca
Python爬虫精简步骤1 获取数据
爬虫的工作分为四步: 1.获取数据。爬虫程序会根据我们提供的网址,向服务器发起请求,然后返回数据。 2.解析数据。爬虫程序会把服务器返回的数据解析成我们能读懂的格式。 3.提取数据。爬虫程序再从中提取出我们需要的数据。 4.储存数据。爬虫程序把这些有用的数据保存起来,便于你日后的使用和分析。 这一篇的内容就是:获取数据。 首先,我们将会利用一个强大的库——requests来获取数据。 在电脑上安装
Python绘图,圣诞树,花,爱心 | Turtle篇
1.画圣诞树 import turtle screen = turtle.Screen() screen.setup(800,600) circle = turtle.Turtle() circle.shape('circle') circle.color('red') circle.speed('fastest') circle.up() square = turtle.Turtle()
作为一个程序员,CPU的这些硬核知识你必须会!
CPU对每个程序员来说,是个既熟悉又陌生的东西? 如果你只知道CPU是中央处理器的话,那可能对你并没有什么用,那么作为程序员的我们,必须要搞懂的就是CPU这家伙是如何运行的,尤其要搞懂它里面的寄存器是怎么一回事,因为这将让你从底层明白程序的运行机制。 随我一起,来好好认识下CPU这货吧 把CPU掰开来看 对于CPU来说,我们首先就要搞明白它是怎么回事,也就是它的内部构造,当然,CPU那么牛的一个东
破14亿,Python分析我国存在哪些人口危机!
2020年1月17日,国家统计局发布了2019年国民经济报告,报告中指出我国人口突破14亿。 猪哥的朋友圈被14亿人口刷屏,但是很多人并没有看到我国复杂的人口问题:老龄化、男女比例失衡、生育率下降、人口红利下降等。 今天我们就来分析一下我们国家的人口数据吧! 更多有趣分析教程,扫描下方二维码关注vx公号「裸睡的猪」 即可查看! 一、背景 1.人口突破14亿 2020年1月17日,国家统计局发布
web前端javascript+jquery知识点总结
Javascript javascript 在前端网页中占有非常重要的地位,可以用于验证表单,制作特效等功能,它是一种描述语言,也是一种基于对象(Object)和事件驱动并具有安全性的脚本语言 ,语法同java类似,是一种解释性语言,边<em>执行</em>边解释。 JavaScript的组成: ECMAScipt 用于描述: 语法,变量和数据类型,运算符,逻辑控制语句,关键字保留字,对象。 浏览器对象模型(Br
Python实战:抓肺炎疫情实时数据,画2019-nCoV疫情地图
文章目录1. 前言2. 数据下载3. 数据处理4. 数据可视化 1. 前言 今天,群里白垩老师问如何用python画武汉肺炎疫情地图。白垩老师是研究海洋生态与地球生物的学者,国家重点实验室成员,于不惑之年学习python,实为我等学习楷模。先前我并没有关注武汉肺炎的具体数据,也没有画过类似的数据分布图。于是就拿了两个小时,专门研究了一下,遂成此文。 2月6日追记:本文发布后,腾讯的数据源多次变更u
听说想当黑客的都玩过这个Monyer游戏(1~14攻略)
第零关 进入传送门开始第0关(游戏链接) 请点击链接进入第1关: 连接在左边→ ←连接在右边 看不到啊。。。。(只能看到一堆大佬做完的留名,也能看到菜鸡的我,在后面~~) 直接fn+f12吧 &lt;span&gt;连接在左边→&lt;/span&gt; &lt;a href="first.php"&gt;&lt;/a&gt; &lt;span&gt;←连接在右边&lt;/span&gt; o
在家远程办公效率低?那你一定要收好这个「在家办公」神器!
相信大家都已经收到国务院延长春节假期的消息,接下来,在家远程办公可能将会持续一段时间。 但是问题来了。远程办公不是人在电脑前就当坐班了,相反,对于沟通效率,文件协作,以及信息安全都有着极高的要求。有着非常多的挑战,比如: 1在异地互相不见面的会议上,如何提高沟通效率? 2文件之间的来往反馈如何做到及时性?如何保证信息安全? 3如何规划安排每天工作,以及如何进行成果验收? ......
作为一个程序员,内存和磁盘的这些事情,你不得不知道啊!!!
截止目前,我已经分享了如下几篇文章: 一个程序在计算机中是如何运行的?超级干货!!! 作为一个程序员,CPU的这些硬核知识你必须会! 作为一个程序员,内存的这些硬核知识你必须懂! 这些知识可以说是我们之前都不太重视的基础知识,可能大家在上大学的时候都学习过了,但是嘞,当时由于老师讲解的没那么有趣,又加上这些知识本身就比较枯燥,所以嘞,大家当初几乎等于没学。 再说啦,学习这些,也看不出来有什么用啊!
渗透测试-灰鸽子远控木马
木马概述 灰鸽子( Huigezi),原本该软件适用于公司和家庭管理,其功能十分强大,不但能监视摄像头、键盘记录、监控桌面、文件<em>操作</em>等。还提供了黑客专用功能,如:伪装系统图标、随意更换启动项名称和表述、随意更换端口、运行后自删除、毫无提示安装等,并采用反弹链接这种缺陷设计,使得使用者拥有最高权限,一经破解即无法控制。最终导致被黑客恶意使用。原作者的灰鸽子被定义为是一款集多种控制方式于一体的木马程序
Python:爬取疫情每日数据
前言 有部分同学留言说为什么412,这是因为我代码里全国的cookies需要你自己打开浏览器更新好后替换,而且这个cookies大概只能持续20秒左右! 另外全国卫健委的数据格式一直在变,也有可能会导致爬取失败! 我现在已根据2月14日最新通报稿的格式修正了! 目前每天各大平台,如腾讯、今日头条都会更新疫情每日数据,他们的数据源都是一样的,主要都是通过各地的卫健委官网通报。 为什么已经有大量平台做
这个世界上人真的分三六九等,你信吗?
偶然间,在知乎上看到一个问题 一时间,勾起了我深深的回忆。 以前在厂里打过两次工,做过家教,干过辅导班,做过中介。零下几度的晚上,贴过广告,满脸、满手地长冻疮。   再回首那段岁月,虽然苦,但让我学会了坚持和忍耐。让我明白了,在这个世界上,无论环境多么的恶劣,只要心存希望,星星之火,亦可燎原。   下文是原回答,希望能对你能有所启发。   如果我说,这个世界上人真的分三六九等,
B 站上有哪些很好的学习资源?
哇说起B站,在小九眼里就是宝藏般的存在,放年假宅在家时一天刷6、7个小时不在话下,更别提今年的跨年晚会,我简直是跪着看完的!! 最早大家聚在在B站是为了追番,再后来我在上面刷欧美新歌和漂亮小姐姐的舞蹈视频,最近两年我和周围的朋友们已经把B站当作学习教室了,而且学习成本还免费,真是个励志的好平台ヽ(.◕ฺˇд ˇ◕ฺ;)ノ 下面我们就来盘点一下B站上优质的学习资源: 综合类 Oeasy: 综合
雷火神山直播超两亿,Web播放器事件监听是怎么实现的?
Web播放器解决了在手机浏览器和PC浏览器上播放音视频数据的问题,让视音频内容可以不依赖用户安装App,就能进行播放以及在社交平台进行传播。在视频业务大数据平台中,播放数据的统计分析非常重要,所以Web播放器在使用过程中,需要对其内部的数据进行收集并上报至服务端,此时,就需要对发生在其内部的一些播放行为进行事件监听。 那么Web播放器事件监听是怎么实现的呢? 01 监听事件明细表 名
3万字总结,Mysql优化之精髓
本文知识点较多,篇幅较长,请耐心学习 MySQL已经成为时下关系型数据库产品的中坚力量,备受互联网大厂的青睐,出门面试想进BAT,想拿高工资,不会点MySQL优化知识,拿offer的成功率会大大下降。 为什么要优化 系统的吞吐量瓶颈往往出现在数据库的访问速度上 随着应用程序的运行,数据库的中的数据会越来越多,处理时间会相应变慢 数据是存放在磁盘上的,读写速度无法和内存相比 如何优化 设计
Python新型冠状病毒疫情数据自动爬取+统计+发送报告+数据屏幕(三)发送篇
今天介绍的项目是使用 Itchat 发送统计报告 项目功能设计: 定时爬取疫情数据存入<em>Mysql</em> 进行数据分析制作疫情报告 使用itchat给亲人朋友发送分析报告(本文) 基于Django做数据屏幕 使用Tableau做数据分析 来看看最终效果 目前已经完成,预计2月12日前更新 使用 itchat 发送数据统计报告 itchat 是一个基于 web微信的一个框架,但微信官方并不允
粒子群算法求解物流配送路线问题(python)
粒子群算法求解物流配送路线问题(python) 1.查找论文文献 找一篇物流配送路径优化+粒子群算法求解的论文 参考文献:基于混沌粒子群算法的物流配送路径优化 2.了解粒子群算法的原理 讲解通俗易懂,有数学实例的博文:https://blog.csdn.net/daaikuaichuan/article/details/81382794 3.确定编码方式和解码策略 3.1编码方式 物流配送路线的
教你如何编写第一个简单的爬虫
很多人知道爬虫,也很想利用爬虫去爬取自己想要的数据,那么爬虫到底怎么用呢?今天就教大家编写一个简单的爬虫。 下面以爬取笔者的个人博客网站为例获取第一篇文章的标题名称,教大家学会一个简单的爬虫。 第一步:获取页面 #!/usr/bin/python # coding: utf-8 import requests #引入包requests link = "http://www.santostang.
前端JS初级面试题二 (。•ˇ‸ˇ•。)老铁们!快来瞧瞧自己都会了么
1. 传统事件绑定和符合W3C标准的事件绑定有什么区别? 传统事件绑定 &lt;div onclick=""&gt;123&lt;/div&gt; div1.onclick = function(){}; &lt;button onmouseover=""&gt;&lt;/button&gt; 注意: 如果给同一个元素绑定了两次或多次相同类型的事件,那么后面的绑定会覆盖前面的绑定 (不支持DOM事...
情人节来了,教你个用 Python 表白的技巧
作者:@明哥 公众号:Python编程时光 2020年,这个看起来如此浪漫的年份,你还是一个人吗? 难不成我还能是一条狗? 18年的时候,写过一篇介绍如何使用 Python 来表白的文章。 虽然创意和使用效果都不错,但有一缺点,这是那个exe文件,女神需要打开电脑,才有可能参与进来,进而被你成功"调戏”。 由于是很早期的文章了,应该有很多人没有看过。 没有看过的,你可以点击这里查看:用Pyt...
用Python开发实用程序 – 计算器
作者:隋顺意 一段时间前,自己制作了一个库 “sui-math”。这其实是math的翻版。做完后,python既然可以轻易的完成任何的数学计算,何不用python开发一个小程序专门用以计算呢? 现在我们越来越依赖于计算器,很多复杂的计算都离不开它。我们使用过各式各样的计算器,无论是电脑自带的,还是网也上的计算器,却都没有自己动手编写属于自己计算器。今天就让我们走进计算器的世界,用python来编写...
经典算法(19)教你两分钟学会【选择排序】
这篇博客使用图文并茂的方式讲解选择排序算法,并有完整的算法逻辑以及代码实现。
Python学习笔记(语法篇)
本篇博客大部分内容摘自埃里克·马瑟斯所著的《Python编程:从入门到实战》(入门类书籍),采用举例的方式进行知识点提要 关于Python学习书籍推荐文章 《学习Python必备的8本书》 Python语法特点: 通过缩进进行语句组织 不需要变量或参数的声明 冒号 1 变量和简单数据结构 1.1 变量命名 只能包含字母、数字和下划线,且不能以数字打头。 1.2 字符串 在Python中,用引号...
用Python打造你的专属情人节贺,赶快发给TA浪漫一下吧
明天就是情人节了。这个情人节,注定是一个不能约会的情人节,但不能约会不代表不能浪漫。古人比我们出生早,那些浪漫的诗词早都被他们挖掘一空,比诗词我们肯定没有机会了。好在我们还有Python,不然都不知道该如何表达浪漫。接下来,浪导教你制作一个浪漫的情人节专属贺<em>卡</em>。
Python绘图与可视化
文章目录使用的库Matplotlib程序包绘图命令的扩展及其属性设置 使用的库 Python有很多可视化工具,如:Matplotlib。 Matplotlib是一种2D的绘图库,它可以支持硬拷贝和跨系统的交互,它可以在Python脚本、IPython的交互环境下、Web应用程序中使用。如果结合使用一种GUI工具包(如IPython),Matplotlib还具有诸如缩放和平移等交互功能。它不仅支持各...
计算机考研经验总结
计算机考研指导建议背景开始备考时间学校选择复习计划学科复习考研资料和平台心得杂杂答疑 背景     我是广东双非本科计算机类专业,大一高数没学好,英语在大四最后一次考试里过了6级,专业课掌握情况尚好。选择报考暨南大学,因为它的专业课那年只考一门数据结构,而我数据结构学的还不错,不用在专业课上花很多的时间。暨南大学和华师是广东省内仅有的两所211高校,而听说华师学校稍老,环境没有暨大好。 开始备考时...
MySQL表的增删查改(提高篇)
MySQL表的增删查改(基本篇) 接上一篇MySQL表基本的增删查改,下面看一下提高篇: 一、数据库约束 1、约束类型 NOT NULL:不为空约束。创建表时,可以指定某列不为空 UNIQUE :唯一约束。指定某列为唯一的、不重复的 DEFAULT :默认值约束。指定插入数据时,某列为空,设置默认值 PRIMARY KEY : 主键约束。NOT NULL 和 UNIQUE 的结合。确保某列(或两个...
Java实现 LeetCode 35 搜索插入位置
35. 搜索插入位置 给定一个排序数组和一个目标值,在数组中找到目标值,并返回其索引。如果目标值不存在于数组中,返回它将会被按顺序插入的位置。 你可以假设数组中无重复元素。 示例 1: 输入: [1,3,5,6], 5 输出: 2 示例 2: 输入: [1,3,5,6], 2 输出: 1 示例 3: 输入: [1,3,5,6], 7 输出: 4 示例 4: 输入: [1,3,5,6], 0 输出:...
整理一波国外前端学习网站
国内的普通开发者对于掌握一门新的技术不知道从哪里下手,看哪些书。为了获得相关知识会关注各种公众号、购买各种视频课程来学习,但由于这些内容本身有碎片化的特点,效果往往不太理想。以至于付出了大量的时间到最后不能够形成系统化的知识。 我同样也遇到过类似的问题,不是说公众号与视频课程不好,这些也有自身的优势,但是往往都是别人经过实践沉淀下来的,我们读过之后往往仅限于了解而已。如果要掌握还需要大量的实践、探...
Linux运维面试总结
1.ssh远程连接的问题? 第一种是远程连接慢的问题: (1)可以通过ssh -v 来检测哪个步骤出现的问题。根据对应的问题,来针对性的进行解决。 (2)可能是DNS反向解析不正确导致的.正常情况下默认配置下 sshd 初次接受 ssh 客户端连接的时候会自动反向解析客户端 IP 以得到 ssh 客户端的域名或主机名。如果这个时候 DNS 的反向解析不正确,sshd 就会等到 DNS 解析超...
那些年搞的计算机奇淫技巧
最近在家宅着,闲来无事,就回忆起以前钻研过的电脑小技巧,虽然算不上高精深,但也比较有意思,如今记录下来,也是别有一番韵味。 一开始我比较的执着于cmd命令,因为觉得其比较酷,就学习了很多命令; 我用calc调出计算器;用matsc启动远程桌面界面,虽然没有其他的计算机供我远程连接,但我仍然为此乐此不疲;用mspaint调出画图工具,这个是以前我使用最频繁的命令了;用Taskmgr调出任务管理器,当...
小白也会用的情人节表白神器
鉴于情人节女朋友总说直男,上网找了个模板,改了一下,发现效果还不错。然后又录了一个视频,发现凑合,能用。现在免费分享给程序员,去表白去吧。​​​​​​。当然比较low因为考研没时间优化,懒着优化了。 先看一下效果吧:页面太多了,这里我只放几个页面里面有音乐,还凑合不是太单调。 所有页面最后的合成效果: 接下来教大家如何使用: 新建文件夹:love 然后建立这几个...
SpringBoot整合Junit
和整合Mybatis一样分几个步骤 添加Junit的起步依赖 编写测试类 控制台打印信息 总的来说这个还是很简单的 添加Junit的起步依赖 &lt;!--测试的起步依赖--&gt; &lt;dependency&gt; &lt;groupId&gt;org.springframework.boot&lt;/groupId&gt; &lt;artifactId&gt;s...
论如何用python发qq消息轰炸虐狗好友
因为我的某个好友在情人节的时候秀恩爱,所以我灵光一闪制作了qq消息轰炸并记录了下来。 首先 我的编程环境是: windows 10系统 python3.6 记得要下载win32 pip install win32 思路介绍 其实也非常简单 将要发出去的句子储存在列表中 然后用随机模块调用 将随机出来的元素储存在剪贴板中 连接QQ 找到指定对象 疯狂输出 怎么样,简单吧 开始打代码吧 imp...
Python爬取冠状病毒“谣言”新闻进行数据分析
一、前言 今天给大家介绍的爬虫项目是爬取冠状病毒谣言数据,因为最近网络上有很多关于冠状病毒的谣言,官方也积极的出来辟谣,作为一名数据爱好者,我也想尽自己一份微薄之力,分享一些有用的数据分享,希望大家在特殊情况下能明辨是非,保护好自己和家人! 二、爬取数据 话不多说了,直接上代码( copy即可用 ) import requests import pandas as pd class Sp...
浅谈JAVA设计模式之——单例模式
看几个单例对象的示例代码,其中有些代码是线程安全的,有些则不是线程安全的,需要大家细细品味,这些代码也是冰河本人在高并发环境下测试验证过的。 代码一:SingletonExample1 这个类是懒汉模式,并且是线程不安全的 package io.binghe.concurrency.example.singleton; /** * @author binghe * @versio...
猫眼电影Top100爬取
猫眼电影的TOP100榜爬取步骤: 第一步:打开网页猫眼电影榜单网页(https://maoyan.com/board/4) 第二步:打开开发者模式,分析网页源代码,找到需爬取的信息 第三步:编写代码,将整个html请求下来,然后解析网页,获取我们需要的信息并将之存为excel表格 网页分析 依次点击图中箭头所指的位置,可以观察到我们所需的信息 通过上述<em>操作</em>可以发现,我们所需的每部电影的信息...
HTML5大前端学习过程第一周(Day04)
2020年2月14日 今天收获还算可以,Android studio终于可以能好可以用了,运行出了HelloWorld,昨天晚上能了三四个小时都没有能好,今天也能了挺长时间吧,除了上课就在搞这个,从来没有用那个软件运行出来HelloWorld这样开心过,可能这就是传说中程序员的HelloWorld的情节吧! 一. 本节课学习目标。 掌握CSS选择器的优先级以及选择器的区别。 Div和span的用...
Java导出数据到Excel表格
Java导出数据到Excel表格 今天是2020年2月14日,首先祝各位情人节快乐 下面言归正传开始正文。 在后台管理系统中经常会有导出数据到Excel表格的功能需求,这个功能是难以规避的,而且这也是一个非常使用且人性化的一个功能。下面就给大家分享一下我在项目中实现此功能的方式和方法。 我使用的是POI进行一个Excel的<em>操作</em>,POI组件是由Apache提供的组件包,主要是为我们的Java程序提供...
颠覆Web前端开发的HTML5技术
移动互联网迫使一些传统的互联网浏览器厂商不得不做改变,不管哪个移动端<em>操作</em>系统,浏览器内核技术达到了前所未有的统一,大部分都使用wbkit内核,移动的浏览器一开始就支持新出的html5(PC时代无法做的)。   90%以上的手机支持html5,html5提升了浏览器客户端的开发能力,这种提升是质的变化,使客户端更加丰富。      移动领域让html5发挥了价值   据分析,是移动...
情人节闲着无聊写个python程序
用python在图片上写字 ''' 依赖,需要安装Pillow pip install Pillow ''' from PIL import Image, ImageDraw, ImageFont import sys #判断参数个数,可以不要 import os #判断文件是否存在,可以不要 image_path = "1.jpg" font_path = "SIMLI.TTF" tex...
Python自动查询考研成绩并发送到邮箱
声明:本人原创,搬运自本人知乎。 使用selenium模拟浏览器<em>操作</em>,判断有无出成绩,若出则截图发送到邮箱。 代码如下: import smtplib import time from email.mime.image import MIMEImage from email.mime.multipart import MIMEMultipart from email.mime.text i...
Python十个实例(四)
0x00 约瑟夫环 def josephus(n,k): #n代表总人数,k代表报数的数字 List = list(range(1,n+1)) index = 0 while List: temp = List.pop(0) index += 1 if index == k: index = ...
2020程序员面试必备!58道精选面试题,这样学习,大厂没问题!
面试题目: 1-10题: 1、java中==和equals和hashCode的区别 2、int与integer的区别 3、String、StringBuffer、StringBuilder区别 4、什么是内部类?内部类的作用 5、进程和线程的区别 6、final,finally,finalize的区别 7、Serializable 和Parcelable 的区别 8、静态属性和静态方法是否可以被...
python使用TensorFlow进行图像处理的方法
本篇文章主要介绍了使用TensorFlow进行图像处理的方法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧 文章目录一、图片的放大缩小二、图片的亮度调整三、图片的对比度调整四、图片的饱和度调整 一、图片的放大缩小 在使用TensorFlow进行图片的放大缩小时,有三种方式: 1、tf.image.resize_nearest_neighbor():临界点插值 2、tf...
python基础教程:Random和Math模块学习笔记
这篇文章主要介绍了Python中Random和Math模块学习笔记,本文讲解了math模块的数学常量、常用简单函数、三角函数等,讲解了random模块的常用函数、随机挑选和排序等内容,需要的朋友可以参考下 由于最近经常使用到Python中random,math和time``datetime模块, 所以决定花时间系统的学习一下 math模块 math中的函数不可以用于太过复杂的数的运算, 如果需...
赶快拿走!你期待的USB2.0协议中文版出炉啦!
得到
2020美赛A题解题思路(Moving North)
Problem A:Moving North 由于海洋温度升高的原因,美国东北海岸的龙虾种群正在往北迁移到海洋温度更低的加拿大海岸附近。 但是这会影响到加拿大东岸(即苏格拉北大西洋)的渔业公司的经营。他们想知道,如果全球温度继续升温,苏格拉渔场的鲱鱼和鲭鱼会如何迁移,因为这两种鱼是他们主要的经济来源(而他们的渔船又没有制冷设备,无法长期保存活鱼)。 问题1:建立数学模型,预测50年内该两种鱼群的迁...
Python 进阶(四):数据库操作之 MySQL
你知道几种<em>操作</em> MySQL 的方式?
我要成为的样子2020年
2020年我要成为的样子 1、和李小姐恋爱 每天给李小姐写信 看李小姐的微信和微博,和她交朋友聊天 增高到180cm 承诺1000个 好的事情记录10万字 2、改掉自己的坏习惯 每天反思自己的至少五条坏习惯并且改掉不再犯了 记录自己的坏习惯和改正态度 3、专业技能 每天两个小时大学知识学习 每天一个大学的mooc 每天看一本书 学习拍照技术一个小时 学习视频制作软件 ps实例3个 pr...
C语言复习(一)——程序内存
因为寒假空闲时间少,加之今年疫情比较严重,所以就有时间把C语言重点与难点复习一遍。 数据类型 概念 类型是对数据的抽象。 类型相同的数据具有相同的表示形式、存储格式以及相关的<em>操作</em>。 程序中使用的数据类型必定属于某一种数据类型。 如下图示 这张图片展示了C语言中的数据类型。 数据类型的本质:固定大小内存块的别名。 数据类型的作用:编译器预先为变量分配的内存大小。 数据类型的大小:sizeof...
Source Insight3.5下载
Source Insight3.5 Source Insight3.5 Source Insight3.5 相关下载链接:[url=//download.csdn.net/download/sjm5210/2336392?utm_source=bbsseo]//download.csdn.net/download/sjm5210/2336392?utm_source=bbsseo[/url]
VB中RichTextBox控件的编程技术.pdf下载
这是介绍RichTextBox控年的书。对rtf编程有帮助 相关下载链接:[url=//download.csdn.net/download/sclcml/3445486?utm_source=bbsseo]//download.csdn.net/download/sclcml/3445486?utm_source=bbsseo[/url]
音乐资源下载系统 PHP+SQL.ppt下载
音乐资源下载系统 PHP+MYSQL.ppt 相关下载链接:[url=//download.csdn.net/download/libaojian1014/4006957?utm_source=bbsseo]//download.csdn.net/download/libaojian1014/4006957?utm_source=bbsseo[/url]
相关热词 c# 压缩图片好麻烦 c#计算数组中的平均值 c#获取路由参数 c#日期精确到分钟 c#自定义异常必须继承 c#查表并返回值 c# 动态 表达式树 c# 监控方法耗时 c# listbox c#chart显示滚动条
我们是很有底线的