分类：全部列表

2021
03-30

Android 简单服务定位器模式实现

依赖注入(DependencyInjection)和服务定位器(ServiceLocator)是实现控制反转(InversionofControl)的两种主要手段。Android的主流依赖注入框架有：Dagger和Kion这些依赖注入框架都感觉比较重。服务定位器比如少见，这里提供一个一个简单的服务定位器模式实现。引入项目地址：github.com/czy1121/ser…repositories{maven{url"https://gitee.com/ezy/repo/raw/android_public/"}}dependencies{implementation"me.r... 继续阅读 >
2021
03-30

pandas读取excel,txt,csv,pkl文件等命令的操作

pandas读取txt文件读取txt文件需要确定txt文件是否符合基本的格式，也就是是否存在\t,,,等特殊的分隔符一般txt文件长成这个样子txt文件举例下面的文件为空格间隔12019-03-2200:06:24.4463094中文测试22019-03-2200:06:32.4565680需要编辑encoding32019-03-2200:06:32.6835965ashshsh42017-03-2200:06:32.8041945eggg读取命令采用read_csv或者read_table都可以importpandasaspddf=pd.read_table("./test.txt"... 继续阅读 >
2021
03-30

python pandas合并Sheet,处理列乱序和出现Unnamed列的解决

使用python中的pandas，xlrd，openpyxl库完成合并excel中指定sheet的操作#-*-coding:UTF-8-*-importxlrdimportpandasaspdfrompandasimportDataFramefromopenpyxlimportload_workbook#表格位置excel_name='1.xlsx'#获取workbook中所有的表格wb=xlrd.open_workbook(excel_name)#获取sheetssheets=wb.sheet_names()#循环所需sheetnewdata=DataFrame()#in后（）里填写需要合并的sheet页数foriin(3,4,5):... 继续阅读 >
2021
03-30

Android事件分发机制全面解析

事件分发机制事件分发机制的两个阶段：分发：事件从父视图往子视图分发，被拦截后不再传递，进入回溯阶段回溯：事件从子视图往父视图回溯，被消费后不再回溯关键方法：ViewGroup.dispatchTouchEvent往子视图分发事件ViewGroup.onInterceptTouchEvent返回true表示拦截分发事件，不再传递，进入当前视图onTouchEventView.dispatchTouchEvent默认事件分发，调用onTouchEventView.onTouchEvent通常重载此方法处理... 继续阅读 >
2021
03-30

删除pandas中产生Unnamed:0列的操作

我们在数据处理，往往不小心，pandas会“主动”加上行和列的名称，我现在就遇到了这个问题。这个是pandas中to_csv生成的数据各种拼接之后的最终数据（默认参数，index=True,column=True）Unnamed:0ipUnnamed:0.1...766767class00google.com0...0.3764520.148091011facebook.com1...-0.044634-0.180167022youtube.com2...0.1720280.002102033yahoo.com3...0.286067... 继续阅读 >
2021
03-30

pycharm 如何跳出服务器证书不受信任的提示

出现这个问题解决方法：点击File>Settings>Tools>ServerCertificates>Acceptnon-trustedcertificatesautomatically勾上就好啦~补充：pycharm启动出现Server'scertificateisnottrusted提示框的问题解决windows下pycharm启动出现Server'scertificateisnottrusted提示框的问题工具/原料pycharmprowindows1064bit方法/步骤现象：pycharm安装完成后，启动pycharm出现Server'scertificateisnottrusted提示框... 继续阅读 >
2021
03-30

python如何实现单向链表及单向链表的反转

链表的定义链表中的每个节点会存储相邻节点的位置信息，单链表中的每个节点只存储下一关节点的位置信息单向链表的实现classListNode:def__init__(self,val):self.val=valself.next=None要实现单向链表只需要把几个节点关联起来就可以了，把一个节点的next设置为另一个节点就可以了，例如创建一个A->B->C的单向链表可以这么写：first_node=ListNode("A")second_node=ListNode("B")third_node=ListNode("... 继续阅读 >
2021
03-30

python jinja2模板的使用示例

模板的用处jinja2可以用来修改配置文件，把配置文件的关键地方可以用变量来进行替换模板语法模板语法和django的模板语法差不多在jinja2中，存在三种语法：控制结构{%%}变量取值{{}}注释{##}for循环{%foruserinusers%}{{user.username}}{%endfor%}迭代字典{%forkey,valueinmy_dict.iteritems()%}{{key}}{{value}}{%endfor%}过滤器常用的过滤器有：safe:渲染时值不转义capitialize:把值的首... 继续阅读 >
2021
03-30

正确的使用Python临时文件

1、前言临时文件通常用来保存无法保存在内存中的数据，或者传递给必须从文件读取的外部程序。一般我们会在/tmp目录下生成唯一的文件名，但是安全的创建临时文件并不是那么简单，需要遵守许多规则。永远不要自己去尝试做这件事，而是要借助库函数实现。而且也要小心清理临时文件。临时文件引起的最大问题就是，可以预测文件名，导致恶意用户可以预测临时文件名，从而创建软链接劫持临时文件。2.tempfile模块介绍创建临时文件一般使... 继续阅读 >
2021
03-30

python3 如何读取python2的npy文件

python3读取python2打包的npy文件会报错，原因是编码方式不同，所以只要在读取的时候加上编码方式即可。解决方法docs_train=np.load('./data/20news_clean/train.txt.npy',allow_pickle=True,encoding='bytes')docs_test=np.load('./data/20news_clean/test.txt.npy',allow_pickle=True,encoding='bytes')路径中的文件是python2打包的。补充：在Python3中加载Python2.npy文件时出错我有.npy文件，它们是使用Python2.7.... 继续阅读 >
2021
03-30

Pytorch数据读取与预处理该如何实现

在炼丹时，数据的读取与预处理是关键一步。不同的模型所需要的数据以及预处理方式各不相同，如果每个轮子都我们自己写的话，是很浪费时间和精力的。Pytorch帮我们实现了方便的数据读取与预处理方法，下面记录两个DEMO，便于加快以后的代码效率。根据数据是否一次性读取完，将DEMO分为：1、串行式读取。也就是一次性读取完所有需要的数据到内存，模型训练时不会再访问外存。通常用在内存足够的情况下使用，速度更快。... 继续阅读 >
2021
03-30

pytorch 实现冻结部分参数训练另一部分

1）添加下面一句话到模型中forpinself.parameters():p.requires_grad=False比如加载了resnet预训练模型之后，在resenet的基础上连接了新的模快，resenet模块那部分可以先暂时冻结不更新，只更新其他部分的参数，那么可以在下面加入上面那句话classRESNET_MF(nn.Module):def__init__(self,model,pretrained):super(RESNET_MF,self).__init__()self.resnet=model(pretrained)forpinself.parameters():p.re... 继续阅读 >
2021
03-30

MySQL GTID全面总结

01GTID简介     GTID，全称Globaltransactionidentifiers，也称之为全局事务ID。MySQL-5.6.2开始支持，MySQL-5.6.10后完善，GTID分成两部分，一部分是服务的UUid,UUID保存在mysql数据目录的auto.cnf文件中,这是一个非常重要的文件，不能删除，这一部分是不会变的。下面是一个uuid的值举例：[root@dev01 mysql]# cat auto.cnf [auto]server-uuid=ac1ebad0-ef76-11e7-872b-080027... 继续阅读 >
2021
03-30

Pytorch BertModel的使用说明

基本介绍环境:Python3.5+,Pytorch0.4.1/1.0.0安装:pipinstallpytorch-pretrained-bert必需参数:--data_dir:"str":数据根目录.目录下放着,train.xxx/dev.xxx/test.xxx三个数据文件.--vocab_dir:"str":词库文件地址.--bert_model:"str":存放着bert预训练好的模型.需要是一个gz文件,如"..x/xx/bert-base-chinese.tar.gz",里面包含一个bert_config.json和pytorch_model.bin文件.--task_name:"str":用来选择对应数据... 继续阅读 >
2021
03-30

Apache压力测试工具的安装使用

1.下载进入apache官网http://httpd.apache.org/下载apache即可2.启动ab以windows环境下，apache安装路径为C:\apache\Apache24\为例打开cmd命令，输入命令到bin目录cdC:\apache\Apache24\bin3.进行接口并发测试提示：windows环境只支持get请求，post请求我试了几次不行实例命令ab-c30-n600http://v1-a.xgwl.net.cn/v1040_ordersAddPage?id=31其中－n表示请求数，－c表示并发数到此这篇关于Apache压力测试工具的安装使... 继续阅读 >
2021
03-30

MySQL大库搭建主从的一种思路分享

  这个周忙的就像打仗一样，感觉有点被别人牵着鼻子走了，每天都是早出晚归，干不完的活儿，有时候感觉DBA这碗饭真的不好吃，要有强大的抗压能力和心理承受能力。今天下午吃饭的时候，真的感觉整个人快要垮掉了，吃完饭就依然决然的下班了，走在路上，看着下班的人群，心想这不就是正常的下班时间么，为什么我还有种早走惭愧的感觉？可能整个人都被洗脑了吧。 这个周的公众号内容更新也是耽搁了两天，周二那天实... 继续阅读 >
2021
03-30

Python 字符串去除空格的五种方法

在处理Python代码字符串的时候，我们常会遇到要去除空格的情况，所以就总结了多种方法供大家参考。1、strip()方法去除字符串开头或者结尾的空格str="Helloworld"str.strip()输出："Helloworld"2、lstrip()方法去除字符串开头的空格str="Helloworld"str.lstrip()输出：'Helloworld'3、rstrip()方法去除字符串结尾的空格str="Helloworld"str.lstrip()输出：'Helloworld'4、replace()方法可以去除全部空格#repla... 继续阅读 >
2021
03-30

PyTorch 迁移学习实践(几分钟即可训练好自己的模型)

前言如果你认为深度学习非常的吃GPU，或者说非常的耗时间，训练一个模型要非常久，但是你如果了解了迁移学习那你的模型可能只需要几分钟，而且准确率不比你自己训练的模型准确率低，本节我们将会介绍两种方法来实现迁移学习迁移学习方法介绍微调网络的方法实现迁移学习，更改最后一层全连接，并且微调训练网络将模型看成特征提取器，如果一个模型的预训练模型非常的好，那完全就把前面的层看成特征提取器，冻结所有层并且更改... 继续阅读 >
2021
03-30

解决python3 中的np.load编码问题

由于在Python2中的默认编码为ASCII，但是在Python3中的默认编码为UTF-8。问题：所以在使用np.load(det.npy)的时候会出现错误提示：youmayneedtopasstheencoding=optiontonumpy.load解决方法：当遇到这种情况的时候，用np.load(det.npy,encoding="latin1")就可以了。补充：python解决numpy导入乱码问题------已解决使用numpy的loadtxt时，发现报错。经历如下：//VisualStudioCodevarfoo='bar';importnumpyasnpi... 继续阅读 >
2021
03-30

VMware Workstation Pro 16搭建CentOS8虚拟机集群的图文教程

在日常学习、工作当中，我们经常需要用到分布式集群环境，如nacos集群，mysql集群，zookeeper集群，redis集群，大数据集群等，而通常并没有那么多的物理机器可以使用，因此，通过虚拟机搭建一套分布式集群环境以供开发和测试，是一个不错的选择。那今天我们就来尝试在Windows10下使用VMWare搭建一套CentOS8的集群。准备工作硬件环境：既然是安装虚拟机，物理机本身硬件配置最好不要太低，笔者使用的环境是Windows1064位、i732G... 继续阅读 >
2021
03-30

解决python 读取npy文件太大不能完全显示的问题

python读取npy文件时，太大不能完全显示，其解决方法当用python读取npy文件时，会遇到npy文件太大，用print函数打印时不能完全显示，如以下情况：解决办法添加一行代码：np.set_printoptions(threshold=1e6)，其中threshold表示输出数组的元素数目其结果如下：补充：PyCharm打开大文件时提示文件过大，只显示前一小部分使用pycharm打开一些大文件时，会出现上述提示，表明文件过大，只能以只读的方式显示前一小部分内容，这种情... 继续阅读 >
2021
03-30

超详细PyTorch实现手写数字识别器的示例代码

前言深度学习中有很多玩具数据，mnist就是其中一个，一个人能否入门深度学习往往就是以能否玩转mnist数据来判断的，在前面很多基础介绍后我们就可以来实现一个简单的手写数字识别的网络了数据的处理我们使用pytorch自带的包进行数据的预处理importtorchimporttorchvisionimporttorchvision.transformsastransformsimportnumpyasnpimportmatplotlib.pyplotasplttransform=transforms.Compose([transforms.ToTensor()... 继续阅读 >
2021
03-30

MySQL锁等待与死锁问题分析

前言： 在MySQL运维过程中，锁等待和死锁问题是令各位DBA及开发同学非常头痛的事。出现此类问题会造成业务回滚、卡顿等故障，特别是业务繁忙的系统，出现死锁问题后影响会更严重。本篇文章我们一起来学习下什么是锁等待及死锁，出现此类问题又应该如何分析处理呢？1.了解锁等待与死锁出现锁等待或死锁的原因是访问数据库需要加锁，那你可能要问了，为啥要加锁呢？原因是为了确保并发更新场景下的数据正确性，保证数据库事... 继续阅读 >
2021
03-30

PyTorch数据读取的实现示例

前言PyTorch作为一款深度学习框架，已经帮助我们实现了很多很多的功能了，包括数据的读取和转换了，那么这一章节就介绍一下PyTorch内置的数据读取模块吧模块介绍pandas用于方便操作含有字符串的表文件，如csvzipfilepython内置的文件解压包cv2用于图片处理的模块,读入的图片模块为BGR,NHWCtorchvision.transforms用于图片的操作库，比如随机裁剪、缩放、模糊等等，可用于数据的增广，但也不仅限于内置的图片操作，... 继续阅读 >