-
Apache Hive VS Spark:不同目的,同样成功
所属栏目:[MySql教程] 日期:2019-10-16 热度:89
Hive和Spark凭借其在处理大规模数据方面的优势大获成功,换句话说,它们是做大数据分析的。本文重点阐述这两种产品的发展史和各种特性,通过对其能力的比较,来说明这两个产品能够解决的各类复杂数据处理问题。 什么是Hive? Hive是在Hadoop分布式文件系统[详细]
-
「内存数据库」调整插入和数据负载的HANA性能
所属栏目:[MySql教程] 日期:2019-10-16 热度:60
插入和数据加载将写入新数据,而SELECT、UPDATE或DELETE等其他操作必须对现有数据进行操作。 因此,典型的性能因素是部分不同的。如果你想提高插入和数据加载的性能,你可以考虑以下方面: Area Details Lock waits 参见1999998,如果需要,优化锁等待情况[详细]
-
MongoDB与MySQL:如何选择
所属栏目:[MySql教程] 日期:2019-10-16 热度:190
MongoDB和MySQL分别是领先的开源NoSQL和关系数据库。哪个最适合您的应用程序? 在1990年代的互联网泡沫时期,用于Web应用程序的一种通用软件堆栈是LAMP,它最初代表Linux(OS),Apache(Web服务器),MySQL(关系数据库)和PHP(服务器编程语言)。MySQL是首选的数[详细]
-
干货!MySQL DAL中间件总结
所属栏目:[MySql教程] 日期:2019-10-09 热度:131
1.前言 mysql作为互联网公司都会用到的数据库,如果在使用过程中出现性能问题,会采用mysql的横向扩展,使用主从复制来提高读性能,要是解决写入问题,需要进行分库分表。本文不会去介绍mysql的高可用,需要了解Mysql高可用架构相关的请戳浅谈MySQL集群高[详细]
-
代码详解:使用Python从不同表格中提取数据
所属栏目:[MySql教程] 日期:2019-10-09 热度:185
常用的表格数据存储文件格式CSV,Microsoft Excel,Google Excel 。 Python通常称为粘合语言。这个名称归因于人们逐渐开发出的大量接口库和特征,也得益于广泛的使用和良好的开源社区。这些接口库和特征能直接访问不同的文件格式,还可以访问数据源如数据[详细]
-
5分钟使用存储过程,构建百万测试数据
所属栏目:[MySql教程] 日期:2019-10-09 热度:164
一、怎么创建测试数据 如果你会编程语言,那么你可以使用java、python、php等等语言通过对应的工具包操作数据库来完成测试数据的构建。 如果你不会这些语言,恰好你又会一些sql语句,使用存储过程完成测试数据构造是再好不过了。 并且存储过程就是sql脚本[详细]
-
关于MySQL数据库监控指标总结:缓冲池使用情况
所属栏目:[MySql教程] 日期:2019-10-09 热度:111
如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控以下这个与性能及资源利用率相关的指标:缓冲池使用情况。 缓冲池使用情况 MySQL 默认的存储引擎 InnoDB[详细]
-
关于数据库备份恢复方面的15个建议,值得重视
所属栏目:[MySql教程] 日期:2019-10-09 热度:111
概述 数据是一个互联网公司的命脉,数据库的安全以及备案的完整性是至关重要的,所以我们需要在工作中要很熟练的掌握数据的备份与恢复,这也是一个合格的运维DBA必须具有的职业技能. 下面针对数据库备份这块提几个建议。 Mysql 备份过程 1、在二级复制服务[详细]
-
关于MySQL数据库配置优化的15条建议
所属栏目:[MySql教程] 日期:2019-10-09 热度:197
概述 今天主要分享一下关于mysql数据库在配置上的15条建议,仅供参考。 Mysql 配置优化建议 1、使用 innodb_flush_method=O_DIRECT 来避免写的时候出现双缓冲区。 2、避免使用 O_DIRECT 和 EXT3 文件系统 这会把所有写入的东西序列化。 3、分配足够 innodb[详细]
-
小白学MySQL要多久?我整理了10多个问题的答案
所属栏目:[MySql教程] 日期:2019-10-09 热度:72
这是一个偶然碰到的问题,想想蛮有意思,就准备写一篇文章做下分析。 首先啰嗦下学习MySQL的一些背景:MySQL作为目前最为活跃热门的开源数据库之一,以低成本和简易操作的组合方案在互联网企业中被广泛采用而大放异彩。在炙手可热的BAT中,MySQL正被大量使[详细]
-
中国自研数据库打破西方垄断
所属栏目:[MySql教程] 日期:2019-10-09 热度:183
中国基础技术,再破外国垄断。 而且新近提交成绩,大幅刷新之前纪录,斩获全球第一。 荣誉属于阿里巴巴,属于蚂蚁金服。 十一期间,权威机构国际事务处理性能委员会(TPC)官网披露,阿里巴巴自主研发的金融级分布式关系数据库OceanBase,在TPC-C基准测试[详细]
-
公司有一台很重要SQL数据库,如何实现数据库实时同步?
所属栏目:[MySql教程] 日期:2019-10-08 热度:160
一、客户需求 客户现在有一个需求,公司有一台很重要SQL数据库,怕有一天服务器或者系统崩溃,导致所有SQL数据库数据丢失,客户想把数据库数据,通过某种方式将数库进行实时同步到另外一台服务器上,这样可以做个backup。 那客户这个需求如何实现呢? 二、[详细]
-
深入剖析 MySQL 索引和 SQL 调优实战
所属栏目:[MySql教程] 日期:2019-09-29 热度:192
MySQL索引 MySQL支持诸多存储引擎,而各种存储引擎对索引的支持也各不相同,因此MySQL数据库支持多种索引类型,如BTree索引,哈希索引,全文索引等等。 为了避免混乱,本文将只关注于BTree索引,因为这是平常使用MySQL时主要打交道的索引。 MySQL官方对索[详细]
-
MySQL数据库监控指标之执行性能总结
所属栏目:[MySql教程] 日期:2019-09-29 热度:67
概述 如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控与性能及资源利用率相关的指标--查询执行性能。 查询性能 MySQL 用户监控查询延迟的方式有很多,既[详细]
-
详解MySQL数据库监控指标之连接状态
所属栏目:[MySql教程] 日期:2019-09-29 热度:118
概述 如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控数据库的连接情况。 连接情况 监控客户端连接情况相当重要,因为一旦可用连接耗尽,新的客户端连接[详细]
-
高并发环境下如何让Redis和MySQL保持数据统一
所属栏目:[MySql教程] 日期:2019-09-29 热度:182
业务场景 在高并发的业务场景下,数据库大多数情况都是用户并发访问最薄弱的环节。所以,就需要使用redis做一个缓冲操作,让请求先访问到redis,而不是直接访问MySQL等数据库。 这个业务场景,主要是解决读数据从Redis缓存,一般都是按照下图的流程来进行[详细]
-
阿里面试MySQL灵魂拷问20题,Java程序员秋招必会的8个知识点
所属栏目:[MySql教程] 日期:2019-09-29 热度:73
对于程序员来说,面试内容一般分为两个部分:编程面试题部分 + 数据库面试题部分。 据不完全调查,作为数据库中的主流选择 MySQL 的薪资待遇正在逐年增加,而且似乎不仅仅是程序员在学,就连很多产品经理和运营人也开始学习 MySQL 去分析数据。 对于技术面[详细]
-
记一次生产数据库sql优化案例--23秒优化到0.9秒
所属栏目:[MySql教程] 日期:2019-09-29 热度:121
新项目业务人员反馈说最近订单发放模块经常很卡,导致总是有锁的情况发生,在用慢查询和开启锁监控观察后发现实际上只是单条查询慢造成的阻塞锁,这里考虑先对单条查询做一下优化。 一、优化前的表结构、数据量、SQL、执行计划、执行时间 1. 表结构 A表有9[详细]
-
频繁插入(insert)的业务,用什么存储引擎更合适? | 数据库系列
所属栏目:[MySql教程] 日期:2019-09-29 热度:191
继续回答星球水友提问: 沈老师,MyISAM只支持表锁,但网上文章却说,在并发插入量比较大的时候,比较适合使用MyISAM,这矛盾吗? 这个问题,涉及MySQL表锁的一些细节,借着这个问题,系统性说下表锁的所以然。 画外音:网上不少文章只说结论,不说为什么,[详细]
-
详解Oracle中三大类型与隐式数据类型转换
所属栏目:[MySql教程] 日期:2019-09-29 热度:115
在某些情况下,Oracle Server 会收到数据类型与预期的数据类型不同的数据。发生这种情况时,Oracle Server 可自动将该数据转换为预期的数据类型。这种数据类型转换可以由Oracle Server 隐式完成,也可以由用户显式完成。 在MySQL跟Oracle中,如果存在隐式[详细]
-
你不会还在用这8个错误的SQL写法吧?
所属栏目:[MySql教程] 日期:2019-09-27 热度:140
1、LIMIT 语句 分页查询是最常用的场景之一,但也通常也是最容易出问题的地方。比如对于下面简单的语句,一般 DBA 想到的办法是在 type, name, create_time 字段上加组合索引。这样条件排序都能有效的利用到索引,性能迅速提升。 SELECT* FROMoperation WH[详细]
-
删除一张大表时为什么undo占用空间接近原表两倍?
所属栏目:[MySql教程] 日期:2019-09-26 热度:164
概述 Oracle中,undo是保存记录的前镜像的,我理解如果delete from t;那产生的undo应该和t表的大小差不多,但测试结果却差的很远,undo产生的量基本上是t表大小的两倍,不知道为什么,难道我理解错了?下面看下这个奇怪的现象。 1. delete了8个小时 2. 原[详细]
-
几千万记录,数据库表结构如何平滑变更?
所属栏目:[MySql教程] 日期:2019-09-26 热度:163
继续回答知识星球水友提问。 问题域:数据量大、并发量高场景,如何在流量低峰期,平滑实施表结构变更? 画外音,一般来说,是指增加表的属性,因为: 如果是减column,升级程序不使用即可; 如果是修改column,程序兼容性容易出问题; 首先,一起看下有哪些[详细]
-
分享一份MySQL思维导图--MySQL数据库脉络分析
所属栏目:[MySql教程] 日期:2019-09-26 热度:137
抽空整理了mysql数据库学习脉络,比较适合开发入门学习,偏基础,大家凑合看下吧,主要是梳理一下思路。 mysql脉络 1. 数据类型 2. 数据库基本操作 3. 数据表基本操作 4. 数据表其他常用操作 5. 索引 6. 自定义函数 7. 存储过程 8. 视图 9. 触发器 10. 游[详细]
-
MySQL数据库表大小写不敏感处理,看完之后,大部分程序员收藏了
所属栏目:[MySql教程] 日期:2019-09-26 热度:200
MySQL大小写敏感的控制 mysql是通过lower_case_table_names参数来控制大小写敏感的 1:参数含义 lower_case_table_names: 此参数不可以动态修改,必须重启数据库 lower_case_table_names = 1 表名存储在磁盘是小写的,但是比较的时候是不区分大小写 lower[详细]