更新库一直报超时,是单纯的网络问题么

2021-03-24 09:26发布

就贼慢,几kb的速度,然后就报超时(read time out)要把numpy更新到1.19.3 ,然后就用pip install numpy==1.19.3然后就疯狂跑不动,疯狂报错,是我自己的网络...

就贼慢,几kb的速度,然后就报超时(read time out)

要把numpy更新到1.19.3 ,然后就用pip install numpy==1.19.3

然后就疯狂跑不动,疯狂报错,是我自己的网络问题嘛?


3条回答
我是大脸猫
2楼 · 2021-03-26 14:25

错误日志:


RuntimeError: The current Numpy installation ('D:\\code\\python\\pythonProject\\venv\\lib\\site-packages\\numpy\\__init__.py') fails to pass a sanity check due to a bug in the windows runtime. See this issue for more information: https://tinyurl.com/y3dm3h86

原因是Windows 10最新的系统版本升级导致的错误。微软说未来会修复这个Windows错误。


解决方案:把numpy暂时降级到1.19.3


先卸载numpy


pip uninstall numpy

再安装numpy的版本1.19.3


pip install numpy==1.19.3



开发中那些事儿:为啥update会超时呢?

前一段时间,生产环境碰到一个异常,更新数据库的时候,提示锁等待超时(Lock wait timeout exceeded; try restarting transaction),超时时间是50秒,修改一条数据需要等待50秒+,我就有点纳闷了。异常如下:



第一时间没想太多,觉的是可能操作数据库太频繁了。代码中,一般的业务逻辑是,请求过来了,先数据入库,每次调用一个接口(不通的业务)就会修改一下数据库中数据的状态。最后被我优化为,所有的业务处理完毕,执行一次数据插入,接口部分加了try/catch,保证数据可以肯定会入库。我真的是太天真了,问题依然存在。


然后,就去查资料,网上有说可以把超时时间设置长一点。允许可以解决问题,但是并不能真正的解决问题,并且会影响正常的业务,比如对接接口超时,触发重试,数据就会有问题(已经出现这个问题了)。


咨询了我们的DBA,一般都是减少超时时间的,还是应该减少锁和资源的争用,说白了就是再去排查一下自己的sql。查询数据库锁超时时间如下:


其实,更新语句数据库会默认添加行级锁,可以整个业务流程(同步流程和异步流程),操作这个表就只有一个插入数据,和两个更新语句,已经不能再优化了。


难道是表锁了?继续查询资料,查看数据库事务级别为已提交读(Read Committed),网上说这种数据级别不会锁表,其实这种看法是错误的,误导了我很长一段时间。


在什么情况下会锁表呢?真实情况是,mysql的默认引擎是InnoDB,属于悲观锁,默认锁级别是:行锁。


加锁规则:


1、查询或者修改的where筛选条件中使用索引字段的,加的是行锁;不是使用索引字段筛选的,加的是表锁。


2、对于UPDATE、DELETE和INSERT语句,InnoDB会自动给涉及数据集加排他锁(行锁);


3、对于普通SELECT语句,InnoDB不会加任何锁。


我上面的是根据主键更新的,所以不可能锁表。经过排查,是因为同事批量更新数据库的where条件没有添加索引,造成数据表锁,然后锁锁超时。添加索引以后问题解决。


普及知识点:

一、事务的四大特性(ACID):


如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下四个特性:


1、原子性(Atomicity):原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,因此事务的操作如果成功就必须要完全应用到数据库,如果操作失败则不能对数据库有任何影响。


2、一致性(Consistency):一致性是指事务必须使数据库从一个一致性状态变换到另一个一致性状态,也就是说一个事务执行之前和执行之后都必须处于一致性状态。


3、隔离性(Isolation):隔离性是当多个用户并发访问数据库时,比如操作同一张表时,数据库为每一个用户开启的事务,不能被其他事务的操作所干扰,多个并发事务之间要相互隔离。


4、持久性(Durability):持久性是指一个事务一旦被提交了,那么对数据库中的数据的改变就是永久性的,即便是在数据库系统遇到故障的情况下也不会丢失提交事务的操作。


二、事务的隔离级别:


1、脏读:脏读是指在一个事务处理过程里读取了另一个未提交的事务中的数据。


2、不可重复读:不可重复读是指在对于数据库中的某个数据,一个事务范围内多次查询却返回了不同的数据值,这是由于在查询间隔,被另一个事务修改并提交了。


3、虚读(幻读):幻读是事务在操作过程中进行两次查询,第二次查询的结果包含了第一次查询中未出现的数据或者缺少了第一次查询中出现的数据。幻读和不可重复读都是读取了另一条已经提交的事务(这点就脏读不同),所不同的是不可重复读查询的都是同一个数据项,而幻读针对的是一批数据整体(比如数据的个数)


一般而言,出现该提示表示客户端计算机已经找到了数据库服务器且能够进行连接,不过由于连接的时间大于允许的时间而导致出错。当用户在Internet上运行“企业管理器”注册另外一台同样在Internet上的服务器,并且是较慢的网络连接时,会经常出现超时错误。当然在局域网中由于网络故障而导致该问题的出现也时有发生

相关问题推荐

  • 回答 3

    换行。比如,print hello\nworld效果就是helloworld\n就是一个换行符。\是转义的意思,'\n'是换行,'\t'是tab,'\\'是,\ 是在编写程序中句子太长百,人为换行后加上\但print出来是一整行。...

  • 回答 42

    十种常见排序算法一般分为以下几种:(1)非线性时间比较类排序:a. 交换类排序(快速排序、冒泡排序)b. 插入类排序(简单插入排序、希尔排序)c. 选择类排序(简单选择排序、堆排序)d. 归并排序(二路归并排序、多路归并排序)(2)线性时间非比较类排序:...

  • 回答 70
    已采纳

    前景很好,中国正在产业升级,工业机器人和人工智能方面都会是强烈的热点,而且正好是在3~5年以后的时间。难度,肯定高,要求你有创新的思维能力,高数中的微积分、数列等等必须得非常好,软件编程(基础的应用最广泛的语言:C/C++)必须得很好,微电子(数字电...

  • 回答 28

    迭代器与生成器的区别:(1)生成器:生成器本质上就是一个函数,它记住了上一次返回时在函数体中的位置。对生成器函数的第二次(或第n次)调用,跳转到函数上一次挂起的位置。而且记录了程序执行的上下文。生成器不仅记住了它的数据状态,生成器还记住了程序...

  • 回答 9

    python中title( )属于python中字符串函数,返回’标题化‘的字符串,就是单词的开头为大写,其余为小写

  • 回答 6

    第一种解释:代码中的cnt是count的简称,一种电脑计算机内部的数学函数的名字,在Excel办公软件中计算参数列表中的数字项的个数;在数据库( sq| server或者access )中可以用来统计符合条件的数据条数。函数COUNT在计数时,将把数值型的数字计算进去;但是...

  • 回答 1

    head是方法,所以需要取小括号,即dataset.head()显示的则是前5行。data[:, :-1]和data[:, -1]。另外,如果想通过位置取数据,请使用iloc,即dataset.iloc[:, :-1]和dataset.iloc[:, -1],前者表示的是取所有行,但不包括最后一列的数据,结果是个DataFrame。...

  • Python入门简单吗2021-09-23 13:21
    回答 45

    挺简单的,其实课程内容没有我们想象的那么难、像我之前同学,完全零基础,培训了半年,直接出来就工作了,人家还在北京大公司上班,一个月15k,实力老厉害了

  • 回答 4

    Python针对众多的类型,提供了众多的内建函数来处理(内建是相对于导入import来说的,后面学习到包package时,将会介绍),这些内建函数功用在于其往往可对多种类型对象进行类似的操作,即多种类型对象的共有的操作;如果某种操作只对特殊的某一类对象可行,Pyt...

  • 回答 8

     相当于 ... 这里不是注释

  • 回答 4

    还有FIXME

  • 回答 3

    python的两个库:xlrd和xlutils。 xlrd打开excel,但是打开的excel并不能直接写入数据,需要用xlutils主要是复制一份出来,实现后续的写入功能。

  • 回答 8

    单行注释:Python中的单行注释一般是以#开头的,#右边的文字都会被当做解释说明的内容,不会被当做执行的程序。为了保证代码的可读性,一般会在#后面加一两个空格然后在编写解释内容。示例:#  单行注释print(hello world)注释可以放在代码上面也可以放在代...

  • 回答 2

    主要是按行读取,然后就是写出判断逻辑来勘测行是否为注视行,空行,编码行其他的:import linecachefile=open('3_2.txt','r')linecount=len(file.readlines())linecache.getline('3_2.txt',linecount)这样做的过程中发现一个问题,...

  • 回答 4

    或许是里面有没被注释的代码

  • 回答 26

    自学的话要看个人情况,可以先在B站找一下视频看一下

没有解决我的问题,去提问