分布式计算开源框架Hadoop入门实践（三）
Hadoop基本流程 一个图片太大了，只好分割成为两部分。根据流程图来说一下具体一个任务执行的情况。 在分布式环境中客户端创建任务并提交。 InputFormat做Map前的预处理，主要负责以下工作：验证输入的格式是否符合JobConfig的输入定义，这个在实现Map和构建Conf的时候...
MyCat:开源分布式数据库中间件之数据库分片和读写分离配置
mycat权威文档指南下载 1. MyCAT介绍 1.1. 什么是MyCAT？ 简单的说，MyCAT就是： 一个彻底开源的，面向企业应用开发的“大数据库集群” 支持事务、ACID、可以替代Mysql的加强版数据库 一个可以视为“Mysql”集群的企业级数据库，用来替代昂贵的Oracle集群...
【开源】分布式可编程的云平台，可大规模开展Web服务开发，期待专家点评
. 百万商业圈分布式云平台功能及使用说明 . -------------------需要代码的请留下邮件地址 平台功能概述： 简单的说就是将N台电脑，有序分层(逻辑层次划分)组织起来，形成一个有机体(计算集群)，去完成一台电脑很难完成的任务。 说...
百度、新浪、Mixi、Apache社区赞助的开源key-value分布式存储系统
key-value分布式存储系统查询速度快、存放数据量大、支持高并发，非常适合通过主键进行查询，但不能进行复杂的条件查询。如果辅以Real-Time Search Engine（实时搜索引擎）进行复杂条件检索、全文检索，就可以替代并发性能较低的MySQL等关系型数据库，达到高并发、高性能，节省几十...
【docker Elasticsearch】Rest风格的分布式开源搜索和分析引擎Elasticsearch初体验
概述：Elasticsearch 是一个分布式、可扩展、实时的搜索与数据分析引擎。 它能从项目一开始就赋予你的数据以搜索、分析和探索的能力，这是通常没有预料到的。 它存在还因为原始数据如果只是躺在磁盘里面根本就毫无用处。Elasticsearch 不仅仅只是全文搜索，我们还将介绍结构化搜索、数据分析...
zabbix(一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案)
zabbix 是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。zabbix能监视各种网络参数，保证服务器系统的安全运营；并提供灵活的通知机制以让系统管理员快速定位/解决存在的各种问题。zabbix由2部分构成，zabbix server与可选组件zabbix agen...
华为云分布式数据库中间件DDM和开源MyCAT对比
前言 华为云分布式数据库中间件（Distributed Database Middleware）是解决数据库容量、性能瓶颈和分布式扩展问题的中间件服务，提供分库分表、读写分离、弹性扩容等能力，应对海量数据的高并发访问场景，有效提升数据库读写性能。 图1：DDM产品介绍 DDM前世之：MyCAT...
阿里开源Mysql分布式中间件：Cobar
这几天研究了下Cobar， Cobar是阿里巴巴研发的关系型数据的分布式处理系统（Amoeba的升级版，该产品成功替代了原先基于Oracle的数据存储方案，目前已经接管了3000+个MySQL数据库的schema，平均每天处理近50亿次的SQL执行请求。）（github上面的是源码，大家下...
OpenMessaging开源项目解读 | 阿里发起首个分布式消息领域的国际标准
10月14日，阿里巴巴2017杭州·云栖大会，Linux 基金会Leadship团队 CNCF 执行总裁 Dan Kohn和阿里巴巴集团研究员蒋江伟共同宣布了分布式消息领域的国际标准OpenMessaging开源项目正式入驻Linux基金会，这也是国内首个在全球范围发起的分布式计算领域的国际标准。 ...
两大主流开源分布式存储的对比：GlusterFS vs. Ceph
存储世界最近发生了很大变化。十年前，光纤通道SAN管理器是企业存储的绝对标准，但现在的存储必须足够敏捷，才能适应在新的基础架构即服务云环境内运行。 GlusterFS和Ceph是在现代云环境中表现最出色的两个敏捷存储系统。 在讲述GlusterFS和Ceph的相同点和区别之前，我们先谈一谈云...
开源分享 Unity3d客户端与C#分布式服务端游戏框架
很久之前，在博客园写了一篇文章，《分布式网游server的一些想法语言和平台的选择》，当时就有了用C#做网游服务端的想法。写了个Unity3d客户端分布式服务端框架，最近发布了1.0版本，取名ET框架。ET框架的目标就是简化客户端开发，简化分布式服务端开发，但是功能非常强大，完全可以作为一个大型分布...
转： Tsung：开源多协议分布式负载&压力测试工具
Main features High Performance: the load can be distributed on a cluster of client machines Multi-protocols using a plugin system: HTTP, WebDAV, SOAP...
Tachyon：一个高性能、高容错、基于内存的开源分布式存储系统
作者 李小兵 发布于 2015年3月26日 | 讨论 分享到：微博微信FacebookTwitter有道云笔记邮件分享 稍后阅读 我的阅读清单 从Tachyon的官网得知，Tachyon是一个高性能、高容错、基于内存的开源分布式存储系统，并具有类Java的文件API、插件式的底层文件系统、兼...
阿里开源Mysql分布式中间件：Cobar
http://hualong.iteye.com/blog/2102798 这几天研究了下Cobar， Cobar是阿里巴巴研发的关系型数据的分布式处理系统（Amoeba的升级版，该产品成功替代了原先基于Oracle的数据存储方案，目前已经接管了3000+个MySQL数据库的sch...
开源分布式数据库中间件 DBLE
DBLE 是企业级开源分布式中间件，江湖人送外号 “MyCat Plus”；以其简单稳定，持续维护，良好的社区环境和广大的群众基础得到了社区的大力支持； DBLE官方网站：https://opensource.actionsky.com 可以详细了解DBLE的背景和应用场景，本文不涉及到的细节都...
分布式计算开源框架Hadoop入门实践（一）
分布式计算开源框架Hadoop入门实践（一） 在SIP项目设计的过程中，对于它庞大的日志在开始时就考虑使用任务分解的多线程处理模式来分析统计，在我从前写的文章《Tiger Concurrent Practice --日志分析并行分解设计与实现》中有所提到。但是由于统计的内容暂时还是十分简单，所以就采...
分布式计算开源框架Hadoop入门实践
在SIP项目设计的过程中，对于它庞大的日志在开始时就考虑使用任务分解的多线程处理模式来分析统计，在我从前写的文章《Tiger Concurrent Practice —日志分析并行分解设计与实现》中有所提到。但是由于统计的内容暂时还是十分简单，所以就采用Memcache作为计数器，结合MySQL就完...
深度剖析开源分布式监控CAT
作者：美团点评技术团队 链接：https://zhuanlan.zhihu.com/p/23351994 来源：知乎 著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 CAT（Central Application Tracking）是一个实时和接近全量的监控系统，它...
tsung--开源多协议分布式压力测试工具 .
tsung:开源、多协议、分布式的压力测试工具 tsung index：http://tsung.erlang-projects.org/index.en.htmltsung user's manual：http://tsung.erlang-projects.org/user_manual.ht...
Dapeng框架－开源高性能分布式微服务框架
我们公司性质是新零售，公司也有专门的框架组。这群大牛自己开发了一整套分布式微服务框架。我们也在使用这套框架，有很多心得体会。该框架既Dapeng也！开源github地址：https://github.com/dapeng-soaDapeng-soa 是一个轻量级、高性能的微服务框架，构建在Netty...