分类：编程语言

2020
10-09

Python 解析库json及jsonpath pickle的实现

1.数据抽取的概念2.数据的分类3.JSON数据概述及解析3.1JSON数据格式3.2解析库jsonjson模块是Python内置标准库，主要可以完成两个功能：序列化和反序列化。JSON对象和Python对象映射图如下：3.2.1json序列化对象(字典/列表)通过json.dump()/json.dumps()==>json字符串。示例代码如下：importjsonclassPhone(object):def__init__(self,name,price):self.name=nameself.price=priceclassDefault(json.JSONEn... 继续阅读 >
2020
10-09

php开发最强大的IDE编辑的phpstorm 2020.2配置Xdebug调试的详细教程

时间：2020年8月15日10:25:47Xdebug插件安装省略，自己百度安装，win和linux环境安装方式不一样。注意和php版本匹配1、phpinfo信息2、php.ini配置[xdebug]zend_extension=/usr/lib64/php/modules/xdebug.soxdebug.remote_enable=1xdebug.profiler_enable=Onxdebug.auto_trace=Onxdebug.profiler_enable_trigger=Onxdebug.profiler_output_name=cachegrind.out.%t.%pxdebug.remote_handler="dbgp"xdebug.remote_host="172.... 继续阅读 >
2020
10-09

Python实现爬取网页中动态加载的数据

在使用python爬虫技术采集数据信息时，经常会遇到在返回的网页信息中，无法抓取动态加载的可用数据。例如，获取某网页中，商品价格时就会出现此类现象。如下图所示。本文将实现爬取网页中类似的动态加载的数据。1.那么什么是动态加载的数据?我们通过requests模块进行数据爬取无法每次都是可见即可得，有些数据是通过非浏览器地址栏中的url请求得到的。而是通过其他请求请求到的数据，那么这些通过其他请求请求到的数据就是动... 继续阅读 >
2020
10-09

IDEA中如何查找jar包之间的依赖关系并忽略依赖的某个包

问题背景实际开发过程中，如果用maven管理jar包，在pom文件中加入某个依赖时，可能会导入该包的许多子jar包。有时候这些jar包不需要，那么如何找到jar包之间的关系，又如何解耦jar包“子父”之间的关系呢？问题描述这几天开发过程中，有3个与tomcat的jar包，由于公司私服上没有对应版本的jar包，所以下载不了，导致报错经查找发现pom文件中并未直接引用tomcat的jar包，并且这3个jar包在工程里也没有用。所以就考虑直接忽略这些jar... 继续阅读 >
2020
10-09

Python 如何操作 SQLite 数据库

写在之前SQLite是一个小型的关系型数据库，它最大的特点在于不需要单独的服务、零配置。我们在之前讲过的两个数据库，不管是MySQL还是MongoDB，都需要我们安装。安装之后，然后运行起来，其实这就相当于已经有一个相应的服务在跑着。SQLite与前面所说的两个数据库不同。首先Python已经将相应的驱动模块作为了标准库的一部分，只要是你安装了Python，就可以使用；再者它可以类似于操作文件那样来操作SQLite数据库文件。还... 继续阅读 >
2020
10-09

Python使用正则表达式实现爬虫数据抽取

1.为什么要使用正则表达式?首先，大家来看一个例子。一个文本文件里面存储了一些市场职位信息，格式如下所示：Python3高级开发工程师上海互教教育科技有限公司上海-浦东新区2万/月02-18满员测试开发工程师（C++/python）上海墨?数码科技有限公司上海-浦东新区2.5万/每月02-18未满员Python3开发工程师上海德拓信息技术股份有限公司上海-徐汇区1.3万/每月02-18剩余11人测试开发工程师（Python）赫里普（上海）信息科技有... 继续阅读 >
2020
10-09

Spring Cache整合Redis实现方法详解

导入依赖<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-cache</artifactId></dependency><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId></dependency><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency>基本配置spring.redis.port=638... 继续阅读 >
2020
10-09

vscode配置setting.json文件实现eslint自动格式代码

一、ESlint+Vetur实现ESlint代码规范二、重点----旧版本（旧版本配置在setting.json会出现警告）{“eslint.autoFixOnSave”:true,“eslint.validate”:[“javascript”,{“language”:“vue”,“autoFix”:true},{“language”:“html”,“autoFix”:true}]}三、新版配置----新版本{“editor.codeActionsOnSave”:{“source.fixAll.eslint”:true},“eslint.probe”:[“javascript”,“vue”,“html”]}以下是对自己v... 继续阅读 >
2020
10-09

Java Integer.valueOf()和Integer.parseInt()的区别说明

前言大家都知道Integer类中有Integer.valueOf(Strings)和Integer.parseInt(Strings)两个静态方法，他们都能够将字符串转换为整型。说到这里你肯定会想同一个功能为什么要提供两个不同的方法，这不是浪费吗？区别Integer.parseInt(Strings)将会返回int常量。Integer.valueOf(Strings)将会返回Integer类型，如果存在缓存将会返回缓存中已有的对象。使用不当将会产生的问题由于Java的自动拆箱和装箱机制导致我们在使用时一般分别... 继续阅读 >
2020
10-09

Android实现指针刻度转盘

本文实例为大家分享了Android实现指针刻度转盘的具体代码，供大家参考，具体内容如下一.先上个效果图，实现如图所示刻度转盘和2个文本的绘制，最后1个刻度绘制的比较长一些（后期会添加动画效果，未完待续…）：二.话不多说，上代码,Timber可使用Log代替，也可根据自身需求将配置属性放到attrs.xml中去:packagecom.landleaf.householdtype.widget;importandroid.content.Context;importandroid.graphics.Canvas;importandroi... 继续阅读 >
2020
10-09

Python 通过正则表达式快速获取电影的下载地址

在爬取网页信息时，如果在HTML代码中通过获取标签的方式来提取电影的下载地址时，不仅要编写比较多的代码，还需要不断的确认每一层的标签是否正确，这样的操作无疑是烦琐的。如下图所示。那么通过什么方式既可以减少代码量，又可以很简单的提取指定标签的内容呢？本文将实现通过正则表达式快速获取电影的下载地址。如果对正则表达式不熟悉的读者，点击此处学习正则表达式。在爬取网页信息的任务中，可以使用正则表达式的方式快速... 继续阅读 >
2020
10-09

java8新特性 stream流的方式遍历集合和数组操作

前言：在没有接触java8的时候，我们遍历一个集合都是用循环的方式，从第一条数据遍历到最后一条数据，现在思考一个问题，为什么要使用循环，因为要进行遍历，但是遍历不是唯一的方式，遍历是指每一个元素逐一进行处理（目的），而并不是从第一个到最后一个顺次处理的循环，前者是目的，后者是方式。所以为了让遍历的方式更加优雅，出现了流（stream）！1.流的目的在于强掉做什么假设一个案例：将集合A根据条件1过滤为子集B,然后根... 继续阅读 >
2020
10-09

Python 程序员必须掌握的日志记录

写在之前在我们的现实生活中，「日志记录」其实是一件非常重要的事情，比如银行的转账记录，汽车的行车记录仪记录行驶过程中的一切，如果出现了什么问题，我们可以通过「日志记录」来搞清楚到底发生了什么事情。除了在生活中，在日常的系统开发以及调试等过程中，记录日志同样是一件很重要的事情。很多编程初学者并没有「记录日志」的习惯，认为记录日志是一件可有可无的事情，出现问题的时候只要使用print函数打印一下程序的中... 继续阅读 >
2020
10-09

在 asp.net core 的中间件中返回具体的页面的实现方法

前言在asp.netcore中，存在着中间件这一概念，在中间件中，我们可以比过滤器更早的介入到http请求管道，从而实现对每一次的http请求、响应做切面处理，从而实现一些特殊的功能在使用中间件时，我们经常实现的是鉴权、请求日志记录、全局异常处理等等这种非业务性的需求，而如果你有在asp.netcore中使用过swashbuckle(swagger)、healthcheck、miniprofiler等等这样的组件的话，你会发现，这些第三方的组件往往都提供... 继续阅读 >
2020
10-09

Python使用urlretrieve实现直接远程下载图片的示例代码

在实现爬虫任务时，经常需要将一些图片下载到本地当中。那么在python中除了通过open()函数，以二进制写入方式来下载图片以外，还有什么其他方式吗？本文将使用urlretrieve实现直接远程下载图片。下面我们再来看看urllib模块提供的urlretrieve()函数。urlretrieve()方法直接将远程数据下载到本地。>>>help(urllib.urlretrieve)Helponfunctionurlretrieveinmoduleurllib:urlretrieve(url,filename=None,reporthook=No... 继续阅读 >
2020
10-09

Python 如何查找特定类型文件

写在之前今天的文章是介绍如何用Python去定位特定类型的文件，会讲到用字符串匹配文件名定位特定文件以及顺带介绍一下遍历目录树的函数，通过今天的这一部分以及之前文章讲到的文件获取属性的操作，可以做很多有意思的事情。定位特定文件定位特定的文件，可以使用fnmatch以及glob这两个标准库，我们下面来分别看一下。1.使用fnmatch标准库一般的话我们想要查找特定类型的文件，可以通过字符串的前缀匹配和后缀匹配来查找... 继续阅读 >
2020
10-09

Python 通过爬虫实现GitHub网页的模拟登录的示例代码

1.实例描述通过爬虫获取网页的信息时，有时需要登录网页后才可以获取网页中的可用数据，例如获取GitHub网页中的注册号码时，就需要先登录账号才能在登录后的页面中看到该信息，如下图所示。那么该如何实现模拟登录的功能呢？本文实现将通过爬虫实现GitHub网页的模拟登录。2.代码实现在实现GitHub网页的模拟登录时，首先需要查看提交登录请求时都要哪些请求参数，然后获取登录请求的所有参数，再发送登录请求。如果登录成功... 继续阅读 >
2020
10-09

Spring Security基于数据库实现认证过程解析

创建数据库SETFOREIGN_KEY_CHECKS=0;--------------------------------Tablestructureforrole------------------------------DROPTABLEIFEXISTS`role`;CREATETABLE`role`(`id`int(11)NOTNULLAUTO_INCREMENT,`name`varchar(32)DEFAULTNULL,`nameZh`varchar(32)DEFAULTNULL,PRIMARYKEY(`id`))ENGINE=InnoDBAUTO_INCREMENT=4DEFAULTCHARSET=utf8;--------------------------------Record... 继续阅读 >
2020
10-09

无需压缩软件，用python帮你操作压缩包

写在之前压缩包是互联网上软件发布的标准格式，同时对于系统管理很有用处。当我们需要将多份文件发送给别人的时候，最好通过压缩包的形式发送，还有在备份某些文件的时候，为了减少磁盘空间的占用，也需要对备份的数据进行压缩。Python中有一系列对压缩包进行处理的工具，包括创建压缩包，解压压缩包以及获取压缩包中的文件列表等，今天的文章，我们就来学习一下与压缩包相关的Python标准库。管理zip压缩包在大多数情况下，我... 继续阅读 >
2020
10-09

Java8 Stream对两个 List 遍历匹配数据的优化处理操作

使用场景，有两个List<Map<String,Object>>集合，第一个集合的所有元素都是需要保留的。第一个集合的值为：{name=张三丰1,id=1}{name=张三丰2,id=2}{name=张三丰3,id=3}{name=张三丰4,id=4}{name=张三丰5,id=5}{name=张三丰6,id=6}{name=张三丰7,id=7}{name=张三丰8,id=8}第二个集合的值为：{grade=61,id=1}{grade=62,id=2}{grade=63,id=3}{grade=64,id=4}需要根据两个集合中id值相同，就把第二个集合中的grade值赋给... 继续阅读 >
2020
10-09

SpringSecurity如何实现配置单个HttpSecurity

一、创建项目并导入依赖<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-security</artifactId></dependency><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency>二、相关配置和代码在创建完项目时，我们得springboot项目所有接口都被保护起来了，如果要想访问必须登陆，用户名默认是user，密码在项目启动时生成在... 继续阅读 >
2020
10-09

用Python制作mini翻译器的实现示例

1.实例描述在平时编程的过程中，会经常在网上翻译一些单词，本文使用Python制作一款翻译小工具，不仅可以自己用，还可以嵌入到程序当中。运行程序，效果如下图所示，在文本框输入英文或中文，单击翻译按钮即可翻译，并将翻译内容显示在下面的文本框中。单击保存按钮将输入内容和翻译内容保存到文本文件中以便日后复习。单击清空按钮，将清除文本框中的内容。2.技术要点利用requests模块获取有道词典web页面的post信... 继续阅读 >
2020
10-09

vue项目里面引用svg文件并给svg里面的元素赋值

前言项目里面用的svg图片比较复杂，还要对里面的元素赋值等等的。在HTML里面有试着用过svg，在vue里面还是第一次尝试。百度了很多要配置webpack.base.conf.js,还要封装组件什么的，但是没有用，那些方法应该是对icon的svg或者简单的svg图片有用吧。后面改变思路，想着能不能组件的形式引入svg文件。静态界面下看看能不能实现，然后在做动态赋值。折腾了一天，还是弄出来了。真不容易，看来svg这一块还是要好好学学的。话不多说，直... 继续阅读 >