使用Apache Spark 对 mysql 调优 查询速度提升10倍以上
在这篇文章中我们将讨论如何利用 Apache Spark 来提升 MySQL 的查询性能。介绍在我的前一篇文章 Apache Spark with MyS...
【Spark深入学习 -14】Spark应用经验与程序调优
----本节内容-------1.遗留问题解答2.Spark调优初体验 2.1 利用WebUI分析程序瓶颈 2....
HBase 中读 HDFS 调优
HDFS Read调优在基于 HDFS 存储的 HBase 中，主要有两种调优方式：绕过RPC的选项，称为short circuit reads开启让HDFS推测性地从多个datanode读数据的选项，称为 hedged reads Short-Circuit Reads一般来说，HBas...
JVM（2）实战篇-3 性能调优
3.1 性能调优解决的问题 应用程序在运行过程中经常会出现性能问题，比较常见的性能问题现象是： 1、通过top命令查看CPU占用率高，接近100甚至多核CPU下超过100都是有可能的。 2、请求单个服务处理时间特别长，多服务使用skywalking等监控系统来判断是哪一个环节性能低下。 3、程...
Hive调优——合并小文件
目录 一、小文件产生的原因 二、小文件的危害 三、小文件的解决方案 3.1 小文件的预防 3.1.1 减少Map数量 3.1.2 减少Reduce的数量 3.2 已存在的小文件合并 3.2.1 方式一：insert overwrite (推荐) 3.2.2 方式二：concatenate 3...
(13)Hive调优——动态分区导致的小文件问题
前言 动态分区指的是：分区的字段值是基于查询结果自动推断出来的，核心语法就是insert+select。 具体内容指路文章： https://blog.csdn.net/SHWAITME/article/details/136111924?spm=1001.2014.3001.5501文章浏览阅...
openGauss学习笔记-220 openGauss性能调优-确定性能调优范围-查询最耗性能的SQL
文章目录 openGauss学习笔记-220 openGauss性能调优-确定性能调优范围-查询最耗性能的SQL220.1 操作步骤 openGauss学习笔记-220 openGauss性能调优-确定性能调优范围-查询最耗性能的SQL 系统中有些SQL语句运行了很长时间还没有结束，这些语...
系统状态检查和最大连接数调优，压测
-----top 系统状态1.cpu状态6.7% us — 用户空间占用CPU的百分比。0.4% sy — 内核空间占用CPU的百分比。92.9% id — 空闲CPU百分...
性能调优命令之free
功能说明free 命令显示系统使用和空闲的内存情况，包括物理内存、交互区内存(swap)和内核缓冲区内存。共享内存将被忽略语法free [参数]参数-b ：以Byt...
golang 性能调优分析工具 pprof（下）
golang 性能调优分析工具 pprof（上）篇， 这是下篇。四、net/http/pprof4.1 代码例子 1go version go1.13.9把上面的程...
48 张图 | 手摸手教你微服务的性能监控、压测和调优
开源项目 PassJava 地址：https://github.com/Jackson0714/PassJava-Platform本文已收录至：ww...
WLAN-AC+AP射频一劳永逸的调优方式
AP射频调优组网图 射频调优简介射频调优的主要功能就是动态调整AP的信道和功率，可以使同一AC管理的各AP的信道和功率保持相对平衡，保证AP工作在最佳状态。WLAN网络中，...
Elasticsearch原理解析与性能调优 - 谭英智
Elasticsearch原理解析与性能调优 基本概念定义一个分布式的实时文档存储，每个字段 可以被索引与搜索一个分布式实时分析搜索引擎能胜任上百个服务节点的扩展，并支持 PB 级别...
Presto性能调优的五大技巧
概述Presto架构Presto是一个分布式的查询引擎，本身并不存储数据，但是可以接入多种数据源，并且支持跨数据源的级联查询。Presto的架构分为：Coodina...
JVM篇--JVM调优高频面试题
1 说一下 JVM 调优的工具？ JDK 自带了很多监控工具，都位于 JDK 的 bin 目录下，其中最常用的是jconsole 和 jvisualvm 这两款视图监控工具。jconsole：用于对 JVM 中的内存、线程和类等进行监控；jvisualvm：JDK 自带的全能分析工具，可以分析：内存...
一次jvm调优过程
jvm调优实战前端时间把公司的一个分布式定时调度的系统弄上了容器云，部署在kubernetes，在容器运行的动不动就出现问题，特别容易jvm溢出，导致程序不...
《Tomcat和JVM的性能调优你真的学会了吗？》总结篇
《Tomcat和JVM的性能调优你真的学会了吗？》总结篇 Tomcat性能调优：找到Tomcat根目录下的conf目录，修改server.xml文件的内容。对于这部分的调优，我所了解到的就是无非设置一下Tomcat服务器的最大并发数和T...
简单的sql调优（批处理）
简单的sql调优（批处理）最近在写一个java的爬虫程序时，遇到了一个大量数据进行插入更新和大量数据循环查询的问题，所以查了一下一般的调优的方式，下面主要介绍我采取的调优措施。一 、调优思路 先说说我采取方式的调优的思路，这样便于理解我的选取的调优策略。思路分析首先我们都知道计算机存储空间分为：寄...
性能调优2：CPU
关系型数据库严重依赖底层的硬件资源，CPU是服务器的大脑，当CPU开销很高时，内存和硬盘系统都会产生不必需要的压力。CPU的性能问题，直观来看，就是任务管理器中看到的CPU利用率始终处于100%，而侦测CPU压力的工具，最精确的就是性能监控器。一，使用性能监控器侦测CPU压力性能监控器（PerfMo...
zabbix wait for 15s seconds 出现原因及调优建议
在监控设备的时候，在server端的日志中有时候会见到类似another network error, wait for 15s seconds的异常，今天我们看下这个问题的出现原因和解决方案:问题定位到poller.c，看下下面两份代码:这个get_values的部分代码: for (i =...