分类：全部列表

2021
02-21

docker 添加端口及获取dockerfile的方法

从dockerimage中获取dockerfiledockerhistory--format{{.CreatedBy}}--no-trunc=true$DockerImage|sed“s//bin/sh\-c\#(nop)\//g”|sed“s//bin/sh\-c/RUN/g”|tac注：该dockerfile不对目录，端口进行映射同时不执行docker开机启动的脚本及server服务docker多端口映射Docker多端口dockerrun-it-d--namecontainer-name-pp1:p1-pp2:p2new-image-name-ipxxxxx—restart=always方式一：运行时添加端... 继续阅读 >
2021
02-21

python爬虫利用代理池更换IP的方法步骤

0.前言周日在爬一个国外网站的时候，发现用协程并发请求，并且请求次数太快的时候，会出现对方把我的服务器IP封掉的情况。于是网上找了一下开源的python代理池，这里选择的是star数比较多的proxy_pool1.安装环境#安装python虚拟环境，python环境最好为python3.6，再往上的话，安装依赖时会报错sudoaptupdatesudoaptinstallpython3.6pip3installvirtualenvvirtualenvvenv--python=python3.6sourcevenv/bin/activate#... 继续阅读 >
2021
02-21

ASP.NET Core对不同类型的用户进行区别限流详解

前言老板提出了一个新需求，从某某天起，免费用户每天只能查询100次，收费用户100W次。这是一个限流问题，聪明的你也一定想到了如何去做：记录用户每一天的查询次数，然后根据当前用户的类型使用不同的数字做比较，超过指定的数字就返回错误。嗯，原理就是这么简单。不过真正写起来还要考虑更多问题：统计数据的数据结构是什么样的？字典or行记录？统计数据记录到哪里？内存orMySQLorRedis？分布式应用怎么精确计数？... 继续阅读 >
2021
02-21

Python用requests库爬取返回为空的解决办法

首先介?一下我??用360搜索派取城市排名前20。我们爬取的网址：https://baike.so.com/doc/24368318-25185095.html我们要爬取的内容：html字段：robots协议：现在我们开始用pythonIDLE爬取importrequestsr=requests.get("https://baike.so.com/doc/24368318-25185095.html")r.status_coder.text结果分析，我们可以成功访问到该网页，但是得不到网页的结果。被360搜索识别，我们将headers修改。输出有个小插曲，网页内容很多，我... 继续阅读 >
2021
02-21

Java动态加载类示例详解

在讲解动态加载类之前呢，我们先弄清楚为什么要动态加载类，静态加载不行吗？我们可以看下面的实例：我在文件夹里写了Office.java类和Word.java类，如下：Office.javaclassOffice{publicstaticvoidmain(String[]args){if(args[0].equals("Word")){Wordw=newWord();w.start();}if(args[0].equals("Excel")){Excele=newExcel();e.start();}}}Word.javaclassWord{publicvoidstart(){Syste... 继续阅读 >
2021
02-21

java反射机制的一些学习心得小结

概述之前在了解Spring的类加载机制的时候，了解了java的反射机制。但是，我对反射理解一直不深。也一直有点疑惑：Spring为什么利用反射创建对象？直接new对象和依靠反射创建对象有什么区别？什么是动态加载类？什么是反射？要想知道反射到底是什么，首先需要知道java的类加载和对象创建的机制。当我们写完一个java文件的时候，后缀是.java。在我们利用IDE执行java文件的时候，其实IDE也帮我们运行了javac，即java编译器。编译器会... 继续阅读 >
2021
02-21

Java中Singleton的3种实现方式详解

一、什么是Singleton？《设计模式》的作者、Eclipse和Junit的开发者ErichGamma在它的理论体系中将Singleton定义为仅仅被实例化一次的类。在当今面向对象程序的实际开发中，Singleton通常被用来代表一个无状态的对象，例如函数和那些本质上唯一的系统组件。值得注意的是，使类成为Singleton会使得它的客户端测试变得非常困难，因为我们不可能给Singleton替换模拟实现，除非我们实现一个充当其类型的接口。实现Singleton... 继续阅读 >
2021
02-21

使用原生javascript开发计算器实例代码

计算器的主要作用是进行数字运算，开发一个计算器功能的web实例，有助于更好的掌握js基础的数字运算能力。本实例详细分析一个js计算器的开发步骤，学习本教程时最好先具备一些基础的js知识。计算器包括显示数字区域和按键区域两大部分，先把计算器的这两个区域的html元素编写出来，如下所示：<divclass="calculator_wrap"id="calculator"><!--计算器外包元素--><divclass="show_num"><!--显示数字区域--><divclass="num_save... 继续阅读 >
2021
02-21

Golang中的自定义类型之间的转换的实现(type conversion)

这里不讨论数值与字符串之间、或者整型与浮点型之间的转换。这里要讨论的是自定义类型之间的转换，这个转换与其他语言都不一样，而且在go的源码中也被大量使用。这里列举两个实用的例子。转换成实现了某个（些）接口的自定义类型比如：sort包里面的IntSlice，是一个[]int的自定义类型，并且实现了sort.Interface接口，如下所示：typeIntSlice[]int//实现sort.Interface接口的方法func(pIntSlice)Len()int{returnlen... 继续阅读 >
2021
02-21

golang 中string和int类型相互转换

总结了golang中字符串和各种int类型之间的相互转换方式：string转成int：int,err:=strconv.Atoi(string)string转成int64：int64,err:=strconv.ParseInt(string,10,64)int转成string：string:=strconv.Itoa(int)int64转成string：string:=strconv.FormatInt(int64,10)字符串到float32/float64float32,err=ParseFloat(string,32)float64,err=ParseFloat(string,64)interface{}与其他类型之间的转换转换方式包括隐... 继续阅读 >
2021
02-21

Golang 之区分类型别名与类型定义的方法

一、类型别名（TypeAlias）、类型定义是什么？类型别名是Go1.9版本添加的新功能。主要应用于代码升级、工程重构、迁移中类型的兼容性问题。C/C++语言中，代码的重构升级可以使用宏快速定义新的代码。Go语言中并未选择通过宏，而是选择通过类型别名解决重构中最复杂的类型名变更问题。在Go1.9版本之前内建类型定义的代码如下：typebyteuint8typeruneint32在Go1.9版本之后内建类型定义的代码如下：typebyte=uint8... 继续阅读 >
2021
02-21

Golang使用WebSocket通信的实现

使用Golang能够创建WebSocket通信，只需要使用golang.org/x/net/websocket包即可，该包有可能被墙，无法使用goget下载，但是我们可以从golang中国提供的地址下载，然后将包放在对应的路径下。WebSocket是一种通信协议，旨在改善HTTP作为无状态协议通信的效率问题，WebSocket是客户端与服务器之间的全双工连接，客户端和服务器只需要建立一次连接就可以使用该连接进行通信。在我们的项目中，一般客户端是前端页面，使用JavaScript... 继续阅读 >
2021
02-21

golang 字符串比较是否相等的方法示例

golang字符串比较的三种常见方法fmt.Println("go"=="go")fmt.Println("GO"=="go")fmt.Println(strings.Compare("GO","go"))fmt.Println(strings.Compare("go","go"))fmt.Println(strings.EqualFold("GO","go"))输出truefalse-10true1，自建方法“==”，区分大小写，最简单的方法2，Compare函数，区分大小写，自建方法“==”的速度要比Compare快，下面是注释/Compareisincludedonlyforsymmetrywithpackagebytes.//Itis... 继续阅读 >
2021
02-21

Nest.js环境变量配置与序列化详解

环境变量配置简述程序在不同的环境下需要不同的环境变量，例如生产环境、测试环境以及开发环境所需要不同的数据库信息：链接地址、链接端口号、登录用户名和密码相关信息。为了解决这个问题需要进行相关操作。在Nest中最佳方案创建一个ConfigModule，该ConfigModule公开一个ConfigService，在ConfigService加载特有环境的.env文件。Nest提供了@nestjs/config开箱即用的依赖包。配置npm生态有很多相关的依赖包，比... 继续阅读 >
2021
02-21

golang的强制类型转换实现

golang是一种强类型语言，虽然在代码中经常看到这种写法，i:=10这其实这是编译器自动做了类型推断在编译期间。编译器会对数据进行类型检查。不同类型的数据不能赋值,不能在函数中传参。强类型语言有一些优势，很多的错误会在编译期间被检查出来，不想php和python等弱类型语言，很多错误只有运行到才能被发现。同样，强类型也有一些缺点，写代码的时候要考虑数据类型了，失去了一些灵活性。言归正传，开始golang的类型转换问题golan... 继续阅读 >
2021
02-21

关于Js中new操作符的作用详解

前言Js是当今时代最常用的代码操作语言，其中new操作符尤为常见。对于很多代码小白来说，并不清楚new在Js中扮演着怎样的角色，具体是做什么用，干了什么。本文从new操作符的作用着手，简单介绍new操作符相关知识。什么是new？众所周知，在JS中，new的作用是通过构造函数来创建一个实例对象。像下面这样：（和普通函数不一样，当函数用作构造函数时，首字母一般要大写，以作区分。）functionFoo(name){this.name=name;}consol... 继续阅读 >
2021
02-21

详解go语言中type关键词的几种使用

type是go语法里的重要而且常用的关键字，type绝不只是对应于C/C++中的typedef。搞清楚type的使用，就容易理解go语言中的核心概念struct、interface、函数等的使用。以下我用例子代码总结描述，请特别留意代码中的注释。1、定义结构体//结构体定义typepersonstruct{namestring//注意后面不能有逗号ageint}funcmain(){//结构体初始化p:=person{name:“taozs",//注意后面要加逗号age:18,//或者下面的}提到这儿来可以省... 继续阅读 >
2021
02-21

python利用proxybroker构建爬虫免费IP代理池的实现

前言写爬虫的小伙伴可能遇到过这种情况：正当悠闲地喝着咖啡，满意地看着屏幕上的那一行行如流水般被爬下来的数据时，突然一个Error弹出，提示抓不到数据了...然后你反复检查，确信自己代码莫得问题之后，发现居然连浏览器也无法正常访问网页了...难道是网站被我爬瘫痪了？然后你用手机浏览所爬网站，惊奇地发现居然能访问!才原来我的IP被网站给封了，拒绝了我的访问这时只能用IP代理来应对禁IP反爬策略了，但是网上高速稳定的代理... 继续阅读 >
2021
02-21

python实现图片转字符画的完整代码

前言最初是在实验楼看到的一个小实验实验楼-Python图片转字符画原文是需要通过命令行运行程序这里改为直接运行，需要固定一些参数运行平台：WindowsPython版本：Python3.6IDE：SublimeText1、实验准备pillow库的安装pipinstallpillow2、实验原理字符画是一系列字符的组合，我们可以把字符看作是比较大块的像素，一个字符能表现一种颜色，字符的种类越多，可以表现的颜色也越多，图片也会更有层次感。最终显示的是黑白色的字... 继续阅读 >
2021
02-21

利用Python实现最小二乘法与梯度下降算法

导入所需库%matplotlibinlineimportsympyimportnumpyasnpimportmatplotlib.pyplotaspltfromsympy.abcimportxasa,yasb生成模拟数据#模拟函数y=3x-1#自变量x=np.linspace(-5,5,num=1000)#加入噪声noise=np.random.rand(len(x))*2-1#因变量y=3*x-1+noise查看所生成数据的图像plt.figure(figsize=(10,10))plt.scatter(x,y,s=1)求代价函数的偏导y=ax+b#目标函数e=1/2*Σ([axi+b]-yi)^2#代价函数，求使得代价函数... 继续阅读 >
2021
02-21

Java8 Optional的详细使用教程

Optional介绍Optional是Jdk1.8提供的一个新类，希望可以通过该类的引入解决令人烦躁的null判断问题，非常好用。个人理解：这个类是一个包装类，将要操作的javabean封装到该类的对象里面，同时将一些常用的判断逻辑封装为成员方法，结合lambda语法，实现比较优雅的链式调用。现在对Optional的API使用做一个简单的说明。API介绍Optional的所有的方法如下图所示，这些API大致可以分为以下几类：1、构建API：构建一个Optional对象；方... 继续阅读 >
2021
02-21

MySQL 8.0新特性之隐藏字段的深入讲解

前言MySQL8.0.23版本增加了一个新的功能：隐藏字段（InvisibleColumn），也称为不可见字段。本文给大家介绍一下MySQL隐藏字段的相关概念和具体实现。基本概念隐藏字段需要在查询中进行显式引用，否则对查询而言是不可见的。MySQL8.0.23开始支持隐藏字段，在此之前所有的字段都是可见字段。考虑以下应用场景，假如一个应用程序使用SELECT*语句访问某个表，并且必需持续不断地进行查询，即使我们为该表增加了一个该应用不需... 继续阅读 >
2021
02-21

Spring boot validation校验方法实例

前言接触springboot一年多，是时候摆脱这种校验方式了233，每个参数都if判断，一眼看过去就是很low的程序员。Validation有了这个插件就再也不用这样去校验参数了，可以让我们在项目中不用浪费很多时间在参数校验这里，从而更专注于业务逻辑正文首先引入依赖<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency>这里创建一个用户的DTO对象@Data@ApiModel... 继续阅读 >
2021
02-21

java新人基础入门之递归调用

一、递归概念递归本质：程序调用自身的编程技巧叫做递归。程序调用自身的编程技巧称为递归（recursion）。递归做为一种算法在程序设计语言中广泛应用。一个过程或函数在其定义或说明中有直接或间接调；用自身的一种方法，它通常把一个大型复杂的问题层层转化为一个与原问题相似的规模较小的问题来求解，递归策略只需少量的程序就可描述出解题过；程所需要的多次重复计算，大大地减少了程序的代码量。递归的能力在于用有限的语句... 继续阅读 >