分类：全部列表

2021
03-05

pytorch 实现L2和L1正则化regularization的操作

1.torch.optim优化器实现L2正则化torch.optim集成了很多优化器，如SGD，Adadelta，Adam，Adagrad，RMSprop等，这些优化器自带的一个参数weight_decay，用于指定权值衰减率，相当于L2正则化中的λ参数，注意torch.optim集成的优化器只有L2正则化方法，你可以查看注释，参数weight_decay的解析是：weight_decay(float,optional):weightdecay(L2penalty)(default:0)使用torch.optim的优化器，可如下设置L2正则化optimizer=... 继续阅读 >
2021
03-05

MySQL中查询json格式的字段实例详解

工作开发过程遇到一个需求：需要动态存储客户的姓名、手机号码、身份证、证件类型，意思是可能前端会传一个人或二个人或者三个人的信息是动态的不固定人数的四个字段（姓名、手机号码、身份证、证件类型）。前端页面如下：我是使用List来接收前端传过来json，mysql用varchar来保存这个json数组[{"cardId":"110101199003072316","cstName":"张双儿1","cstMobile":"13263654144","idCardType":"1"},{"cardId":"1101... 继续阅读 >
2021
03-05

PHP的imageTtfText()函数深入详解

图片处理，是许多程序的功能之一；而文字渲染则是绘图的基本组成部分。PHP通过很多扩展库来支持图片的处理，最常用的还是GD库，通过一系列imagexxx()函数来提供绘图功能。本文专注于非常细小的一点：绘制文字。熟悉Win32的人都知道，TextOut()就可以轻松显示任何文字了，然而到了PHP的世界里，有些事情并不轻松。1详细解释imageTtfText()函数对于PHP绘图初学者，首先遇到的一个问题就是，imageString()这个函数并不支持汉字的绘制... 继续阅读 >
2021
03-05

一台linux主机启动多个MySQL数据库的方法

今天来说下一台Linux主机如何启动4个MySQL数据库：1.要确定你的机器上面已经安装MySQL，我的MySQL在/usr/loacl/下面：cd/usr/local/mysql-5.7.18/ll2.进入/usr/loacl/data文件夹（没有自行创建），在data下分别创建四个文件夹，如：3307330833093310：mkdirdatacddatamkdir3307mkdir3308mkdir3309mkdir33103.在/usr/loacl/mysql-5.7.18/bin/下初始化数据库，指定到这四个文件夹：./mysqld--initialize-insecure--ba... 继续阅读 >
2021
03-05

Docker镜像构建原理解析(不装docker也能构建镜像)

在devops流程里面构建镜像是一个非常重要的过程，一般构建镜像是写dockerfile文件然后通过dockerclient来构建的image。dockerclient会先检查本地有没有image，如果没有帮你从镜像仓库pull下来然后解析你写的dockerfile构建新的image。本文带你了解pull命令背后是怎么做的？ build命令背后是怎么做的？下篇文章带你解析：如果我不用docker我如何构建一个镜像？我们以微软的aspnet2.2为基础构建一个aspnetcore... 继续阅读 >
2021
03-05

MySQL如何从不固定位置提取字符串元素详解

前言备注:测试数据库版本为MySQL8.0测试数据:createtablezqs(idint,strvarchar(1000));insertintozqs(id,str)values(1,'【京东】abc【中国电信】');insertintozqs(id,str)values(1,'【京东】abc【中国电信】def');insertintozqs(id,str)values(1,'****【京东】abc【中国电信】def');insertintozqs(id,str)values(1,'****【京东】abc');insertintozqs(id,str)values(1,'【京东】abc【中国电信】【中国联通... 继续阅读 >
2021
03-05

Pytorch自定义Dataset和DataLoader去除不存在和空数据的操作

【源码GitHub地址】：点击进入1.问题描述之前写了一篇关于《pytorchDataset,DataLoader产生自定义的训练数据》的博客，但存在一个问题，我们不能在Dataset做一些数据清理，如果我们传递给Dataset数据，本身存在问题，那么迭代过程肯定出错的。比如我把很多图片路径都传递给Dataset，如果图片路径都是正确的，且图片都存在也没有损坏，那显然运行是没有问题的；但倘若传递给Dataset的图片路径有些图片是不存在，这时你通过Datase... 继续阅读 >
2021
03-05

Java 实现简单Socket 通信的示例

Javasocket封装了传输层的实现细节，开发人员可以基于socket实现应用层。本文介绍了Javasocket简单用法。1.传输层协议传输层包含了两种协议，分别是TCP(TransmissionControlProtocol，传输控制协议)和UDP(UserDatagramProtocol，用户数据报协议)。TCP是一种面向连接，可靠的流协议。通信双方在“发送-接收”数据之前需要先建立TCP连接，然后通过互相发送二进制数据流来进行通信。所谓连接，指的是各种设备、线... 继续阅读 >
2021
03-05

MySQL双主（主主）架构配置方案

在企业中，数据库高可用一直是企业的重中之重，中小企业很多都是使用mysql主从方案，一主多从，读写分离等，但是单主存在单点故障，从库切换成主库需要作改动。因此，如果是双主或者多主，就会增加mysql入口，增加高可用。不过多主需要考虑自增长ID问题，这个需要特别设置配置文件，比如双主，可以使用奇偶，总之，主之间设置自增长ID相互不冲突就能完美解决自增长ID冲突问题。主从同步复制原理在开始之前，我们先来了解主从同步复... 继续阅读 >
2021
03-05

使用Spring Data R2DBC +Postgres实现增删改查功能

在本教程中，我想向您展示如何通过带有SpringWebFlux的SpringDataR2DBC执行各种PostgresCRUD操作。R2DBC代表反应式关系数据库连接。像JPA（Java持久性API）一样，R2DBC是关系数据库的反应性驱动程序的规范。由于它是一个单独的规范，因此请勿与JPA/Hibernate功能（如@OneToMany，@ManyToMany等）比较。我们将开发一个名为product-service的SpringBoot应用程序，该应用程序负责创建新产品/检索所有产品/删除或更新现有产品... 继续阅读 >
2021
03-05

java语言基础之标识符和命名规则详解

标识符Java对各种变量、方法和类等要素命名时使用的字符序列称为标识符技巧：凡是自己可以起名字的地方都叫标识符定义合法标识符规则：由26个英文字母大小写，0-9，_或$组成数字不可以开头。不可以使用关键字和保留字，但能包含关键字和保留字。Java中严格区分大小写，长度无限制。标识符不能包含空格下面是代码说明：(帮助大家理解一下每句话的意思)classIdentifierTest{publicstaticvoidmain(String[... 继续阅读 >
2021
03-05

python爬取youtube视频的示例代码

  这几天正在追剧，原名《大秦帝国之天下》的《大秦赋》，看着看着又想把前几部刷一遍了，但第一部《裂变》自己没有高清资源，搜了一波发现youtube上有个48集版的高清资源，有删减就有删减吧，就想着写个脚本批量下载一下，记录一下过程，主要是youtube1080p及以上的分辨率做了音视频分离，下载后需要用ffmpeg做一次音视频融合。参考了pytube模块。1.下载音视频数据pytube可以通过pip安装$pipinstallpytubefrompytu... 继续阅读 >
2021
03-05

pytorch Dataset,DataLoader产生自定义的训练数据案例

1.torch.utils.data.Datasetdatasets这是一个pytorch定义的dataset的源码集合。下面是一个自定义Datasets的基本框架，初始化放在__init__()中，其中__getitem__()和__len__()两个方法是必须重写的。__getitem__()返回训练数据，如图片和label，而__len__()返回数据长度。classCustomDataset(data.Dataset):#需要继承data.Datasetdef__init__(self):#TODO#1.Initializefilepathorlistoffilenames.passdef__ge... 继续阅读 >
2021
03-05

详解MySQL实时同步到Oracle解决方案

1需求概述将MySQL5.6生产库多张表的数据实时同步到Oracle11g数据仓库，MySQL历史数据700G，平均每天产生50G左右日志文件，MySQL日志空间50G，超过后滚动删除日志文件。整个同步过程不可影响MySQL业务操作。2技术原理采用灵蜂数据集成软件BeeDI将MySQL数据实时同步到Oracle，通过ETL全量同步历史数据，通过日志解析方式实时同步增量数据。受限于日志空间，如果将所有历史数据一次性同步，需要的时间会超过一天，全量同步过程产生... 继续阅读 >
2021
03-05

使用 Java 开发 Gradle 插件的步骤

Gradle插件代码可以在build.gradle中，buildSrc项目中，以及独立的插件项目中编写。本文将介绍如何在一个独立的项目中使用Java语言编写Gradle插件，并发布到仓库中。1创建项目Gradle插件项目和普通的Java项目没有什么不同，普通项目是基于其它三方包进行开发，而Gradle插件项目基于Gradle的API进行开发。基于Gradle创建一个Java项目，项目目录结构如下，和普通项目一样。gradle-plugin-sample|├───build... 继续阅读 >
2021
03-05

解决pytorch 数据类型报错的问题

pytorch报错：RuntimeError:ExpectedobjectoftypeVariable[torch.LongTensor]butfoundtypeVariable[torch.cuda.ByteTensor]forargument#1‘argument1'解决方法：pytorch框架在存储labels时，采用LongTensor来存储，所以在一开始dataset返回label时，就要返回与LongTensor对应的数据类型，即numpy.int64补充：使用pytorch遇到的各种问题及解决方案自己在使用pytorch遇到的各种问题及解决方案：RuntimeError:Expected... 继续阅读 >
2021
03-05

浅谈内存耗尽后Redis会发生什么

前言作为一台服务器来说，内存并不是无限的，所以总会存在内存耗尽的情况，那么当Redis服务器的内存耗尽后，如果继续执行请求命令，Redis会如何处理呢？内存回收使用Redis服务时，很多情况下某些键值对只会在特定的时间内有效，为了防止这种类型的数据一直占有内存，我们可以给键值对设置有效期。Redis中可以通过4个独立的命令来给一个键设置过期时间：expirekeyttl：将key值的过期时间设置为ttl秒。pexpirekey... 继续阅读 >
2021
03-05

python反编译教程之2048小游戏实例

一.背景一道ctf题，通过破解2048游戏获得flag游戏的规则很简单，需要控制所有方块向同一个方向运动，两个相同数字方块撞在一起之后合并成为他们的和，每次操作之后会随机生成一个2或者4，最终得到一个“2048”的方块就算胜利了。二.工具准备1.pyinstxtractor.py脚本用于反编译python脚本内容如下from__future__importprint_functionimportosimportstructimportmarshalimportzlibimportsysimportimpimporttypesfromuuid... 继续阅读 >
2021
03-05

python 如何读、写、解析CSV文件

您知道将表格数据存储到纯文本文件背后的机制是什么吗？答案是CSV（逗号分隔值）文件，该文件允许将数据转换为纯文本格式。在这篇文章中关于“在Python如何阅读CSV文件”中，我们将学习如何读，写和解析的CSV文件的Python。将详细讨论以下方面：什么是CSV文件及其用途？为什么使用CSV文件格式？PythonCSV模块                CSV模块功... 继续阅读 >
2021
03-05

聊聊python在linux下与windows下导入模块的区别说明

我就废话不多说了，大家往下看吧~P|-A|a.py|-B|b.py文件结构如上，在windows下a想运行b中的方法，可以直接写成fromBimpotbb.fun()但是在linux中会出现ModuleNotFoundError:Nomodulenamed'B'可以通过引入sys添加路径解决importsyssys.path.append("/P/B")fromBimpotb在程序中为了也有良好的移植性，可以在代码中显式添加路径，比如用os的方法：BASE_DIR=os.path.dirname(os.path.dirname(os.path.abspath(__file__))... 继续阅读 >
2021
03-05

vite2.0+vue3移动端项目实战详解

一.涉及技术点vite版本vue3ts集成路由集成vuex集成axios配置Vant3移动端适配请求代理二.步骤vite+ts+vue3只需要一行命令npminit@vitejs/appmy-vue-app--templatevue-ts配置路由npminstallvue-router@4--save在src下新建router目录，新建index.ts文件import{createRouter,createWebHashHistory,RouteRecordRaw}from"vue-router";constroutes:Array<RouteRecordRaw>=[{path:"/",name:"Hom... 继续阅读 >
2021
03-05

PHP执行系统命令函数实例讲解

命令注入命令注入（CommandInjection），对一些函数的参数没有做过滤或过滤不严导致的，可以执行系统或者应用指令（CMD命令或者 bash 命令）的一种注入攻击手段。常见的执行系统命令的函数有system()passthru()exec()shell_exec()popen()proc_open()pcntl_exec()system()函数stringsystem(string$command[,int&$return_var])$command为执行的命令，&return_var可选，用来存放命令执行后的状态码... 继续阅读 >
2021
03-05

window10 安装Oracle19C 和SQL Developer 的图文教程

首先注册一个Oracle账号。准备好Oracle和SQLDeveloper的压缩包Oracle下载地址：https://www.oracle.com/database/technologies/oracle-database-software-downloads.html#19cSQLDeveloer下载地址：https://www.oracle.com/tools/downloads/sqldev-downloads.htmlOracle的安装1、把oracle压缩包解压后，点击setup.ext2、选择创建单实例数据库3、选择桌面类4、选择一个用户可以自己创建一个非管理员的window用户。这里博主直接使用... 继续阅读 >