• Java实现本地缓存、分布式缓存及多级缓存

    时间:2022-09-26 22:57:03

    以下均为自己参考其它博主文章或自己理解整理而成,如有错误之处,欢迎在评论区批评指正! 0. 缓存简介        像MySql等传统的关系型数据库已经不能适用于所有的业务场景,比如电商系统的秒杀场景,APP首页的访问流量高峰场景,很容易造成关系型数据库的瘫痪,随着缓存技术的出现很好的解决了这个问题...

  • Spring Cloud分布式定时器之ShedLock的实现

    时间:2022-09-26 18:25:05

    这篇文章主要介绍了Spring Cloud分布式定时器之ShedLock的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

  • 消息队列实现分布式事务

    时间:2022-09-26 17:51:09

     业务流转图: 搭建环境:activemq + springboot + mybatis + mysql 1、下载activemq配置activemq配置信息(conf/activemq.xml): 2、建表td_order_event,分别在每个服务对应的每个库创建一张临时流转表记录,这边演...

  • 【Shashlik.EventBus】.NET 事件总线,分布式事务最终一致性

    时间:2022-09-26 14:44:33

    简介github https://github.com/dotnet-shashlik/shashlik.eventbus各位爷高兴了给个star呗。分布式事务、CAP定理、事件总线,在当前微服务、分布式、集群大行其道的架构前提下,是不可逃避的几个关键字,在此不会过多阐述相关的理论知识。Shashl...

  • 消息队列的一些场景及源码分析,RocketMQ使用相关问题及性能优化 分布式事务原理及解决方案案例  分布式事务实战方案汇总 消息队列初见:一起聊聊引入系统mq 之后的问题 

    时间:2022-09-26 14:21:27

     前文目录链接参考: 消息队列的一些场景及源码分析,RocketMQ使用相关问题及性能优化 https://www.cnblogs.com/yizhiamumu/p/16694126.html消息队列的对比测试与RocketMQ使用扩展 https://www.cnblogs.com/yizhiam...

  • MasaFramework -- 锁与分布式锁

    时间:2022-09-26 13:42:32

    前言什么是锁?什么是分布式锁?它们之间有什么样的关系?什么是锁加锁(lock)是2018年公布的计算机科学技术名词,是指将控制变量置位,控制共享资源不能被其他线程访问。通过加锁,可以确保在同一时刻只有一个线程在访问被锁住的代码片段,我们在单机部署时可使用最简单的加锁完成资源的独享,如:public ...

  • 分布式主键生成设计策略

    时间:2022-09-26 12:27:50

    1 写作目的 这几天被虾皮裁员的消息刷屏了,实话实说互联网的行情确实很差,各处都在裁员。而且最近在忙试用期转正答辩,还不错,光荣的成为了一个大厂的正式员工,很庆幸在这么不稳定的情况下还能有自己的一寸方土。还扯别的干什么呢?开卷吧。 注意:本文只讲分布式主键的设计实现原理,不讲具体代码的实现细节。默认...

  • Python 图像处理: 生成二维高斯分布蒙版的实例

    时间:2022-09-25 22:03:20

    今天小编就为大家分享一篇Python 图像处理: 生成二维高斯分布蒙版的实例,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧

  • 使用 Redis 实现分布式系统轻量级协调技术

    时间:2022-09-25 19:23:01

    http://www.ibm.com/developerworks/cn/opensource/os-cn-redis-coordinate/index.html在分布式系统中,各个进程(本文使用进程来描述分布式系统中的运行主体,它们可以在同一个物理节点上也可以在不同的物理节点上)相互之间通常是需要...

  • 基于Greenplum Hadoop分布式平台的大数据解决方案及商业应用案例剖析

    时间:2022-09-25 17:13:40

    随着云计算、大数据迅速发展,亟需用hadoop解决大数据量高并发访问的瓶颈。谷歌、淘宝、百度、京东等底层都应用hadoop。越来越多的企 业急需引入hadoop技术人才。由于掌握Hadoop技术的开发人员并不多,直接导致了这几年hadoop技术的薪水远高于JavaEE及 Android程序员。Had...

  • 【分布式】RPC初探

    时间:2022-09-25 08:10:47

    事先声明:本文代码参考自Dubbo作者的博客。RPC(Remote Procedure Call)远程过程调用,是分布式系统当中必不可少的一个玩意。比如说在单机系统当中,我想调用某个方法,直接调就可以了对吧,但是当环境变成多机分布式系统时,A机器上想调用B机器上的某个方法时,就需要用到RPC了。RP...

  • Hadoop2.X伪分布式安装

    时间:2022-09-25 07:45:21

    安装过程中,hostname 为 YARN。liunx用户为yarn。 为了方便配置,在第七步之前,都是用root用户进行配置。第七步之后改为yarn用户配置。 1. 安装JDKHadoop是用Java语言编写的,因此需要在Java环境下工作。 Hadoop2.0版本以上要求JDK版本在1.6及以上...

  • hadoop-2.2.0.tar.gz的伪分布集群环境搭建(单节点)

    时间:2022-09-25 07:41:17

      Hadoop伪分布单节点环境搭建的“三步”总流程     强烈建议,安装配置之前,先进行如下。请移步 Centos 6.5下的OPENJDK卸载和SUN的JDK安装、环境变量配置  根据本人的经验之谈,别用CentOS自带的openjdk!!!         第一 、Jdk安装和环境变量配置...

  • ubuntu搭建分布式hadoop-2.6.0概略和错误

    时间:2022-09-25 07:41:47

    详细配置: http://blog.csdn.net/ggz631047367/article/details/42426391 1.修改机器/etc/hostname分别为   master    slave1   slave2   重启 2.修改/etc...

  • 基于Docker布署伪分布式hadoop环境(二)

    时间:2022-09-24 23:29:29

    接着上一次的操作,我们来继续配置hadoop 前面的操作请看这儿 5.hadoop配置 (1)core-site.xml配置 打开core-site.xml文件(nano core-site.xml) <span style="font-size:18px;"><configur...

  • hadoop集群环境搭建----完全分布式

    时间:2022-09-24 23:20:13

    1.克隆虚拟机 克隆3台client(centos7)  步骤:右键centos-7-->管理->克隆-> ... -> 完整克隆 2修改主机名 s201 s202 s203 s204 192.168.75.201 s201 192.168.75.202 s202 19...

  • Hadoop(HA)分布式集群部署

    时间:2022-09-24 23:16:28

      Hadoop(HA)分布式集群部署和单节点namenode部署其实一样,只是配置文件的不同罢了。 这篇就讲解hadoop双namenode的部署,实现高可用. 系统环境: OS: CentOS 6.8内存:2GCPU:1核Software:jdk-8u151-linux-x64.rpmhadoo...

  • ZooKeeper 笔记(6) 分布式锁

    时间:2022-09-24 22:17:05

    目前分布式锁,比较成熟、主流的方案有基于redis及基于zookeeper的二种方案。大体来讲,基于redis的分布式锁核心指令为SETNX,即如果目标key存在,写入缓存失败返回0,反之如果目标key不存在,写入缓存成功返回1,通过区分这二个不同的返回值,可以认为SETNX成功即为获得了锁。red...

  • hadoop-2.6.0 完全分布式安装

    时间:2022-09-24 21:14:47

    hadoop-2.6.0集群的配置安装: 机器环境是64位的centos-6.5、jdk-1.8、64位的hadoop-2.6.0 5个机器,机器的主机名分别为slave01、slave02、master、slave04、slave05,其中master为namenode机器,其他为datanode...

  • hadoop-2.6.0单机配置和伪分布式配置

    时间:2022-09-24 20:57:40

    http://blog.csdn.net/ggz631047367/article/details/42426391 需要重新编译的教程:http://blog.csdn.net/ggz631047367/article/details/42460589 在Ubuntu下创建hadoop用户组和用...