分类：全部列表

2021
06-05

python数据库批量插入数据的实现(executemany的使用)

正常情况下往数据库多张表中批量插入1000条数据，若一条一条insert插入，则调用sql语句查询插入需要执行几千次，花费时间长现使用cursor.executemany（sql，args），可对数据进行批量插入，其中args是一个包含多个元组的list列表，每个元组对应mysql当中的一条数据以下是实例：往数据库中的order表、order_detail表和pay表中插入1000条订单数据，订单详情数据以及支付数据1.pay表中的id字段是order表中的pay_id字段2.order表中的i... 继续阅读 >
2021
06-05

MongoDB使用profile分析慢查询的步骤

   在MongoDB中，如果发生了慢查询，我们如何得到这些慢查询的语句，并优化呢？今天来看这块儿的一些心得。01如何收集慢查询？  在MongoDB中，通常可以开启profile来收集慢日志，查看当前profile状态的语句如下：test1:PRIMARY> db.getProfilingStatus(){        "was" : 2,        "slowms"&nbs... 继续阅读 >
2021
06-05

Python如何把不同类型数据的json序列化

现代网络应用Web APP或大型网站的后台一般只有一个，然后客户端却是各种各样的(iOS,android, 浏览器), 而且客户端的开发语言很可能与后台的开发语言不一样。这时我们需要后台能够提供可以跨平台跨语言的一种标准的数据交换格式供前后端沟通(这就是WebAPI的作用)。如今大家最常用的跨平台跨语言数据交换格式就是JSON（JavaScriptObjectNotation）了。JSON是一种文本序列化格式（它输出的是unicode文件，大多数时... 继续阅读 >
2021
06-05

SpringBoot内置tomcat调优测试优化

问题怎么配置springBoot内置tomcat，才能使得自己的服务效率更高呢？基础配置SpringBoot能支持的最大并发量主要看其对Tomcat的设置，可以在配置文件中对其进行更改。我们可以看到默认设置中，Tomcat的最大线程数是200，最大连接数是10000。这个不同SpringBoot版本可能有所细微差别。本文测试基于Springboot2.0.7.RELEASE默认配置/***Maximumamountofworkerthreads.*/privateintmaxThreads=200;/***Mi... 继续阅读 >
2021
06-05

SpringBoot整合Tomcat连接池的使用

连接池大小及性能选项maxActive：最主要参数，配置连接池同时能维持的最大连接数，如果客户端理论上需要100个连接，则这个值设为100。maxIdle：如果客户端一段时间内不需要使用连接，如果一直把所有连接池中的所有连接都维持在活动状态是很浪费资源的，maxIdle这个选项告诉tomcat，如果客户端没有需求，那么最多维持maxIdle个空闲连接。minIdle：和maxIdle类似，maxIdle告诉tomcat最多维持多少个空闲连接，minIdle告诉... 继续阅读 >
2021
06-05

解决Go gorm踩过的坑

使用gorm.Model后无法查询数据Scanerroroncolumnindex1,name“created_at”提示：Scanerroroncolumnindex1,name“created_at”:unsupportedScan,storingdriver.Valuetype[]uint8解决办法：打开数据库的时候加上parseTime=trueroot:123456@tcp(127.0.0.1:3306)/mapdb?charset=utf8&parseTime=true补充：golangGorm的使用总结建立结构体时可以通过TableName来指定要查找的表名func(CoinLog)TableName()... 继续阅读 >
2021
06-05

Python collections模块的使用技巧

一般来讲，python的collections是用于存储数据集合(比如列表list,字典dict,元组tuple和集合set)的容器。这些容器内置在Python中，可以直接使用。该collections模块提供了额外的，高性能的数据类型，可以增强你的代码，使事情变得更清洁，更容易。让我们看一看关于集合模块最受欢迎的数据类型以及如何使用它们的教程！CounterCounter()是字典对象的子类。Counter()可接收一个可迭代遍历的对象（例如字符串、列表或元组）作为参数... 继续阅读 >
2021
06-05

react配置px转换rem的方法

安装相关的依赖npmilib-flexible--savenpmipostcss-px2rem--save主要用来暴露项目配置npmruneject！如果运行npmruneject报错，出错的原因应该是仓库里面代码没有提交，如下提交一下gitadd.gitcommit-m'自定义名'npmruneject然后打开项目中config->webpack.config.js进行配置//在配置文件中添加如下两行代码//px2rem({remUnit:75})的意思就是1rem=75px这个是根据750px设计稿来的，如果是620的就写62c... 继续阅读 >
2021
06-05

Python爬虫之必备chardet库

一、chardet库的安装与介绍玩儿过爬虫的朋友应该知道，在爬取不同的网页时，返回结果会出现乱码的情况。比如，在爬取某个中文网页的时候，有的页面使用GBK/GB2312，有的使用UTF8，如果你需要去爬一些页面，知道网页编码很重要的。虽然HTML页面有charset标签，但是有些时候是不对的，那么chardet就能帮我们大忙了。使用chardet可以很方便的实现字符串/文件的编码检测。如果你安装过Anaconda，那么可以直接使用chardet库。如果你只... 继续阅读 >
2021
06-05

SpringBoot内置tomcat启动原理详解

前言不得不说SpringBoot的开发者是在为大众程序猿谋福利，把大家都惯成了懒汉，xml不配置了，连tomcat也懒的配置了，典型的一键启动系统，那么tomcat在springboot是怎么启动的呢？内置tomcat开发阶段对我们来说使用内置的tomcat是非常够用了，当然也可以使用jetty。<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId><version>2.1.6.RELEASE</version></dependen... 继续阅读 >
2021
06-05

golang 实现一个负载均衡案例(随机,轮训)

今天用go实现一个简单的负载均衡的算法，虽然简单，还是要写一下。1.首先就是服务器的信息packagebalancetypeInstancestruct{hoststringportint}funcNewInstance(hoststring,portint)*Instance{return&Instance{host:host,port:port,}}func(p*Instance)GetHost()string{returnp.host}func(p*Instance)GetPort()int{returnp.port}2.接着定义接口packagebalanc... 继续阅读 >
2021
06-05

一文秒懂JavaScript DOM操作基础

DOM概念DOM：documentobjectmodel:文档对象模型通过js去操作HTML的代码，添加元素，删除元素。。。获取元素（1）getElementById通过id获取，获取到的是一个元素（2）getElementsByTagName通过标签名获取，获取到的是一个元素集合（数组）（3）getElementsByClassName通过class获取，获取到的是一个元素集合（数组）（4）getElementsByName通过name属性获取，获取到的是一个元素集合（数组）总结：获取元素可以根据标签名、... 继续阅读 >
2021
06-05

Python机器学习之决策树

一、要求二、原理决策树是一种类似于流程图的结构，其中每个内部节点代表一个属性上的“测试”，每个分支代表测试的结果，每个叶节点代表一个测试结果。类标签（在计算所有属性后做出的决定）。从根到叶的路径代表分类规则。决策树学习的目的是为了产生一棵泛化能力强，即处理未见示例能力强的决策树。因此如何构建决策树，是后续预测的关键！而构建决策树，就需要确定类标签判断的先后，其决定了构建的决策树的性能。决策树的分支... 继续阅读 >
2021
06-05

Spring Security的简单使用

什么是SpringSecuritySpringSecurity是一个功能强大且高度可定制的身份验证和访问控制框架。它实际上是保护基于spring的应用程序的标准。SpringSecurity是一个框架，侧重于为Java应用程序提供身份验证和授权。与所有Spring项目一样，Spring安全性的真正强大之处在于它可以轻松地扩展以满足定制需求在用户认证方面，SpringSecurity框架支持主流的认证方式，包括HTTP基本认证、HTTP表单验证、HTTP摘要认证、Ope... 继续阅读 >
2021
06-05

详解从源码分析tomcat如何调用Servlet的初始化

引言上一篇博客我们将tomcat源码在本地成功运行了，所以在本篇博客中我们从源码层面分析，tomcat在启动的过程中，是如何初始化servlet容器的。我们平常都是将我们的服务部署到tomcat中，然后修改一下配置文件，启动就可以对外提供服务了，但是我们对于其中的一些流程并不是非常的了解，例如如何加载的web.xml等。这是我们分析servlet和sringMVC必不可少的过程。注释源码地址：https://github.com/good-jack/tomcat_source/tree... 继续阅读 >
2021
06-05

golang 实现一个restful微服务的操作

如何用net/http构建一个简单的web服务Golang提供了简洁的方法来构建web服务packagemainimport("net/http")funcHelloResponse(rwhttp.ResponseWriter,request*http.Request){fmt.Fprintf(w,"Helloworld.")}funcmain(){http.HandleFunc("/",HelloResponse)http.ListenAndServe(":3000",nil)}其中核心的两个方法：funcHandleFunc(patternstring,handlerfunc(ResponseWriter,*Request))：HandleF... 继续阅读 >
2021
06-05

Java实战之基于swing的QQ邮件收发功能实现

一、电子邮件详解假设自己的电子邮件是me@163.com，对方的邮件是you@163.com我们编写好文件填写好对方文件，点击发送，这些电子邮件就发出去了而这些电子邮件被称为MUA：MailUserAgent——邮件用户代理。Email发送出去的时候，不是直接到达对方的电脑，而是先发送到MTA：MailTransferAgent——邮件传输代理。如：网易Email到达MTA后，MTA会把Emain投递到邮件的最终目的MDA：MailDeliveryAgent——邮件投递代理。... 继续阅读 >
2021
06-05

Spring Boot整合Lombok的方法详解

上篇文章给大家介绍了，喜欢的朋友点击查看下。SpringBoot开发提速神器Lombok+MybatisPlus+SwaggerUILombok为啥这么牛逼?SpringBoot和IDEA官方都要支持它一、Lombok简介Lombok是一种Java实用工具，可用来帮助开发人员消除Java的冗长，尤其是对于简单的Java对象（POJO）。它通过注释实现这一目的。通过在开发环境中实现 Lombok，开发人员可以节省构建诸如 hashCode() 和 equals() 这样的方... 继续阅读 >
2021
06-05

Java基础之TreeMap详解

一、写在前面TreeMap的底层数据结构是红黑树，且TreeMap可以实现集合元素的排序。所以TreeMap的源码需要实现：1.红黑树的数据结构，以及红黑树的节点插入，删除，以及红黑树的自平衡操作，如左旋，右旋，以及节点变色2.红黑树需要支持按照指定的比较器进行排序，或者进行自然排序。二、定义publicclassTreeMap<K,V>extendsAbstractMap<K,V>implementsNavigableMap<K,V>,Cloneable,java.io.Serializablepublicinterf... 继续阅读 >
2021
06-05

SpringCloud使用Zookeeper作为配置中心的示例

在上一篇文章中介绍了Zookeeper作为注册中心使用，在这篇文章中将介绍Zookeeper作为配置中心的使用，废话不多说，直接上代码。相关依赖<?xmlversion="1.0"encoding="UTF-8"?><projectxmlns="http://maven.apache.org/POM/4.0.0"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation="http://maven.apache.org/POM/4.0.0https://maven.apache.org/xsd/maven-4.0.0.xsd"><modelVersion>4.0.0</m... 继续阅读 >
2021
06-05

Spring/Spring Boot 中优雅地做参数校验拒绝 if/else 参数校验

数据的校验的重要性就不用说了，即使在前端对数据进行校验的情况下，我们还是要对传入后端的数据再进行一遍校验，避免用户绕过浏览器直接通过一些HTTP工具直接向后端请求一些违法数据。最普通的做法就像下面这样。我们通过if/else语句对请求的每一个参数一一校验。@RestController@RequestMapping("/api/person")publicclassPersonController{@PostMappingpublicResponseEntity<PersonRequest>save(@RequestBody... 继续阅读 >
2021
06-05

python+opencv图像分割实现分割不规则ROI区域方法汇总

在图像分割领域，一个重要任务便是分割出感兴趣（ROI）区域。如果是简易的矩形ROI区域其实是非常容易分割的，opencv的官方python教程里也有教到最简易的矩形ROI分割（剪裁），其本质是多维数组（矩阵）的切片。但是现实情况中，ROI是不规则的多边形，也可能是曲线边界，那么该如何分割出来呢？下面总结几种思路。可能只提供核心部分的代码示例，具体应用要结合你自己的项目来修正。一、已知边界坐标，直接画出多边形例：最基础的画... 继续阅读 >
2021
06-05

Java设计模式之责任链模式详解

一、前言各个部门协同合作完成一个任务，每个部门都有各自的职责，一个部门完成后，变回转交给下一个部门，直到所有部门都处理了，这个任务才完成。将请求与处理解耦。处理者只需要关注自己感兴趣的请求进行处理，对于不感兴趣的请求，直接转发给下一个节点对象。二、登录校验举例。1、校验用户名或密码是否为空。2、校验用户名是否存在。3、校验是否有权限。@DatapublicclassMember{privateStringloginName;private... 继续阅读 >