分类：全部列表

2014
12-11

优化MySQL 还是使用缓存？

今天我想对一个Greenfield项目上可以采用的各种性能优化策略作个对比。换言之，该项目没有之前决策强加给它的各种约束限制，也还没有被优化过。具体来说，我想比较的两种优化策略是优化MySQL和缓存。提前指出，这些优化是正交的，唯一让你选择其中一者而不是另一者的原因是他们都耗费了资源，即开发时间。优化MySQL优化MySQL时，一般会先查看发送给mysql的查询语句，然后运行explain命令。稍加审查后很常见的做... 继续阅读 >
2014
12-11

SQL JOIN 简单介绍

前言本文还是秉持之前一贯的写作风格，以简单易懂的示例帮助大家了解各种join的区别。为什么需要join为什么需要join?join中文意思为连接，连接意味着关联即将一个表和多个表之间关联起来。在处理数据库表的时候，我们经常会发现，需要从多个表中获取信息，将多个表的多个字段数据组装起来再返回给调用者。所以join的前提是这些表之间必须有关联字段。join的分类join分为两种，innerjoin和outerjoin，其... 继续阅读 >
2014
12-11

SELECT语句逻辑执行顺序 你知道吗？

引言这不是一个什么多深的技术问题，多么牛叉的编程能力。这跟一个人的开发能力也没有非常必然的直接关系，但是知道这些会对你的SQL编写，排忧及优化上会有很大的帮助。它不是一个复杂的知识点，但是一个非常基础的SQL根基。不了解这些，你一直用普通水泥盖房子；掌握这些，你是在用高等水泥盖房子。然而，就是这么一个小小的知识点，大家可以去调查一下周围的同事朋友，没准你会得到一个“惊喜”。由... 继续阅读 >
2014
12-11

Java中8个顶级开源NoSQL数据库!

NoSQL正在崛起。许多企业和用户已经将MySQL数据库替换成了NoSQL数据库。NoSQL使分析非结构化的数据变得更容易，因此开发者必须意识到存在于NoSQL世界中的趋势和工具。1.Terrastore新的文档存储技术可以提供先进的伸缩性和弹性而不必牺牲一致性。Terrastore基于Trrracotta，它依赖于一个业界公认的，快速的（而且又酷）集群技术。2.Neo4j开源的图形数据库，用Java实现。开发者将Neo4j描述为“嵌入式... 继续阅读 >
2014
12-11

Mysql在大型网站的应用架构演变

写在最前:本文主要描述在网站的不同的并发访问量级下，Mysql架构的演变可扩展性架构的可扩展性往往和并发是息息相关，没有并发的增长，也就没有必要做高可扩展性的架构，这里对可扩展性进行简单介绍一下，常用的扩展手段有以下两种Scale-up: 纵向扩展，通过替换为更好的机器和资源来实现伸缩，提升服务能力Scale-out:横向扩展, 通过加节点（机器）来实现伸缩，提升服务能力对于互... 继续阅读 >
2014
12-11

数据库的最简单实现

所有应用软件之中，数据库可能是最复杂的。MySQL的手册有3000多页，PostgreSQL的手册有2000多页，Oracle的手册更是比它们相加还要厚。但是，自己写一个最简单的数据库，做起来并不难。Reddit上面有一个帖子，只用了几百个字，就把原理讲清楚了。下面是我根据这个帖子整理的内容。一、数据以文本形式保存第一步，就是将所要保存的数据，写入文本文件。这个文本文件就是你的数据库。为了方便读取，数据... 继续阅读 >
2014
12-11

MySQL大数据下Limit使用

对于一直用Oracle的我，今天可是非常诧异，MySQL中同一个函数在不同数量级上的性能居然差距如此之大。先看表ibmng(id,title,info) 唯一 idkey 索引title先看看两条语句：select*fromibmnglimit1000000,10select*fromibmnglimit10,10很多人都会认为不会有多大差别，但是他们都错了，差别太大了，（可能机器不同有点差距，但绝对10倍以上）具体执行时间留给好奇的同学。... 继续阅读 >
2014
12-11

避免误用 Redis

Redis是目前NoSQL领域的当红炸子鸡，它象一把瑞士军刀，小巧、锋利、实用，特别适合解决一些使用传统关系数据库难以解决的问题。但是Redis不是银弹，有很多适合它解决的问题，但是也有很多并不适合它解决的问题。另外，Redis作为内存数据库，如果用在不适合的场合，对内存的消耗是很可观的，甚至会让系统难以承受。 我们可以对系统存储使用的数据以两种角度分类，一种是按数据的大小划分，分成大数据和小数... 继续阅读 >
2014
12-11

Redis 数据结构使用场景

一、redis数据结构使用场景原来看过redisbook这本书，对redis的基本功能都已经熟悉了，从上周开始看redis的源码。目前目标是吃透redis的数据结构。我们都知道，在redis中一共有5种数据结构，那每种数据结构的使用场景都是什么呢？String——字符串Hash——字典List——列表Set——集合SortedSet——有序集合下面我们就来简单说明一下... 继续阅读 >
2014
12-11

SQLite使用入门

什么是SQLiteSQLite是一款非常轻量级的关系数据库系统，支持多数SQL92标准。SQLite在使用前不需要安装设置，不需要进程来启动、停止或配置，而其他大多数SQL数据库引擎是作为一个单独的服务器进程，被程序使用某种内部进程通信(典型的是TCP／IP)，完成发送请求到服务器和接收查询结果的工作，SQLite不采用这种工作方式。使用SQLite时，访问数据库的程序直接从磁盘上的数据库文件读写，没有中间的服务器进程。使用SQLite... 继续阅读 >
2014
12-11

排名前十的SQL和NoSQL数据库

本排名根据DBEngines的排行榜得来，该排行榜从人气上分析了市场上200个不同的数据库，这里一览Top10。无可争议的Top3Oracle、MySQL及MicrosoftSQLServer一直以绝对的优势霸占着排行榜的前三名，以独特的优势瓜分了市场上最多的用户。1. Oracle11g首次发行：1980年许可机制：Proprietary是否SQL：是Oracle是重要商业项目的首选，同时也是市场上最古老的主流数据库产品Oracle有4... 继续阅读 >
2014
12-11

可伸缩NoSQL数据库的五条建议

Bigstep’sFullMetalCloud公司的产品经理AlexBordei分享了他们在NoSQL使用上关于可伸缩性的经验。Alex给出了如下五条建议：1、永远不要假设规模是线性增长的。虽然硬件是可伸缩的，但软件并不能百分百地能利用硬件资源，却需要为这些用不到的硬件资源买单。因而，Alex建议要寻找到硬件成本与硬件能力的切合点。下图展示了水平伸缩与垂直伸缩方面的性价比趋势：2、相信测试而非文档。Alex告诫说，不要信任... 继续阅读 >
2014
12-11

15个初学者必看的基础SQL查询语句

本文将分享15个初学者必看的基础SQL查询语句，都很基础，但是你不一定都会，所以好好看看吧。1、创建表和数据插入SQL我们在开始创建数据表和向表中插入演示数据之前，我想给大家解释一下实时数据表的设计理念，这样也许能帮助大家能更好的理解SQL查询。在数据库设计中，有一条非常重要的规则就是要正确建立主键和外键的关系。现在我们来创建几个餐厅订单管理的数据表，一共用到3张数据表，ItemMaster表、... 继续阅读 >
2014
12-11

MySQL的InnoDB索引原理详解

摘要：本篇介绍下Mysql的InnoDB索引相关知识，从各种树到索引原理到存储的细节。InnoDB是Mysql的默认存储引擎(Mysql5.5.5之前是MyISAM，文档)。本着高效学习的目的，本篇以介绍InnoDB为主，少量涉及MyISAM作为对比。这篇文章是我在学习过程中总结完成的，内容主要来自书本和博客(参考文献会给出)，过程中加入了一些自己的理解，描述不准确的地方烦请指出。1各种树形结构本来不打算从二叉搜索树开始... 继续阅读 >
2014
12-11

优化MySQL的21个建议

今天一个朋友向我咨询怎么去优化MySQL，我按着思维整理了一下，大概粗的可以分为21个方向。还有一些细节东西(tablecache,表设计，索引设计，程序端缓存之类的)先不列了，对一个系统，初期能把下面做完也是一个不错的系统。 1.要确保有足够的内存数据库能够高效的运行，最关建的因素需要内存足更大了，能缓存住数据，更新也可以在内存先完成。但不同的业务对内存需要强度不一样，一推荐内存要占到数据的15-... 继续阅读 >
2014
12-11

我是如何在SQLServer中处理每天四亿三千万记录的

首先声明，我只是个程序员，不是专业的DBA，以下这篇文章是从一个问题的解决过程去写的，而不是一开始就给大家一个正确的结果，如果文中有不对的地方，请各位数据库大牛给予指正，以便我能够更好的处理此次业务。项目背景这是给某数据中心做的一个项目，项目难度之大令人发指，这个项目真正的让我感觉到了，商场如战场，而我只是其中的一个小兵，太多的战术，太多的高层之间的较量，太多的内幕了。具体这个项目的情况... 继续阅读 >
2014
12-11

MongoDB 分页查询的方法及性能

最近有点忙，本来有好多东西可以总结，Redis系列其实还应该有四、五、六…不过《RedisinAction》还没读完，等读完再来总结，不然太水，对不起读者。自从上次Redis之后呢，算是对Nosql类型的产品有些入门了，这会换个方向，研究下真正的NoSql数据库——MongoDB。说起MongoDB，确实是用完了之后颠覆了我的数据管和程序观。怎么说呢？如果用在OO设计的程序里那真的太棒了，像我这种数据驱动、表驱动思想... 继续阅读 >
2014
12-11

标准MySQL数据库外的5个开源兼容方案

MySQL是最受欢迎的免费开源应用之一，它是成千上万个网站的数据库骨干。然而，许多开发人员认为有必要将其拆分成其他项目，并且每个分支项目都要有自己的专长，这些需求以及Oracle对核心产品增长缓慢的担忧，导致出现了许多开发人员感兴趣的子项目和分支。另外，为了满足特殊业务的需要，MySQL有时候不能完全胜任，这就需要开发出新的解决方案。同时，为了兼容旧业务系统的升级维护，新的技术方案多是基于MySQL实现而实现的兼... 继续阅读 >
2014
12-11

5个让DBA爱上你的SQL技巧

我的一个同事MartinMasarik，SQLde的CEO，跟我谈起了他的一个DBA朋友，他管理着一个国际银行的Oracle数据库，数据规模约2TB。MartinMasarik曾问他：“什么样的SQL问题能让你气愤到竖起头发？”，他总结了以下几点，都是经验之谈：一、不要在索引列上调用Function这样做将会阻止数据库使用这个索引，这个问题甚至可以影响这个分区表，因为这样做的话将不会从指定的分区中读取数据，而是扫描整一个表空间... 继续阅读 >
2014
12-11

10个教程教你轻松备份MySQL数据库

今天，小编为大家收集了一些非常有用的MySQL数据库备份教程。在开源数据库管理系统中，MySQL是最好并且应用最为广泛的系统。在下面的教程当中，将帮助大家学习如何进行MySQL数据库的备份，定期备份数据库对开发人员来说非常重要！迫不及待想要查看这些超酷的教程了吗？只需点击图片即可哦！一起来看看吧！如何在Ubuntu的VPS中备份MySQL数据库备份任何类型的数据都是非常重要的，尤其是当我们谈论到数据库时，这一点... 继续阅读 >
2014
12-11

varchar和text说不清的那些事

最近有几个同学问我varchar和text有啥别吗，这个问题，以前说真的也没太多的整理，以前遇到text在设计中就是尽可能的拆到另一个表中，保持主表尽量的瘦小，可以让innodbbp缓存更多的数据。今天借次机会系统整理一下，主要从存储上，最大值，默认值几个方面进行比较。BTW：从ISOSQL:2003上讲VARCHAR是一个标准型，但TEXT不是（包括tinytext）.varchar在MySQL5.0.3之前只支持0-255byte,在5.0.3之后才支持到0-655... 继续阅读 >
2014
12-11

SQL Server 2005 自动远程数据库备份

由于项目需要，需要对目标服务器上的数据库每天进行备份并转移，查阅网上的一些帮助，结合自己的实际需要，写了这篇文章，希望对有同样需求的朋友有所帮助。目标服务器：192.168.1.197，备份服务器：192.168.0.1941、在备份服务器上新建一个文件夹（我的是C:\DbBackupTest），首先要确定对备份服务器要有足够的权限（权限设置如下图所示），最好是“Administrators”组账户。其次到备份服务器上，打开组策略-... 继续阅读 >
2014
12-11

创业公司失败的20大原因 没市场需求排第一

美国科技市场研究公司CBInsights近期通过分析101科技创业公司的失败案例，总结出了创业公司失败的20大主要原因，包括融资烧完、竞争力不足、产品糟糕和商业模式不佳等。以下是这20个原因：1、没有分析需求就贸然开发产品42%的失败创业公司出现过这个问题。创始人执着于执行自己的创意，却没有弄清楚创意是否符合市场需求。PatientCommunicator的创始人对CBInsights说：“我意识到实际上我们没有客户... 继续阅读 >