文章浏览阅读6.8k次，点赞4次，收藏9次。目前很多框架中都存在消息队列的中间件，例如ActiveMQ，RabbitMQ，ZeroMQ，Kafka等，基本都是封装好，足够我们使用。但是，我们如何自己去实现一个消息队列中间件呢？ 由于公司需求，进......
admin
文章浏览阅读443次。参考:https://www.orchome.com/451Kafka集群的安装见上文，本文介绍使用Java API通过kafka发送和接收消息。1. kafka客户端依赖<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.11..._消息中间件如......
admin
概述本文介绍大数据中间件Alluxio的基本概念。什么是AlluxioAlluxio以内存速度统一数据的访问。它是世界上第一个虚拟分布式存储系统(virtual distributed storage system)。它在计算框架和存储系统之间的搭起了一座桥梁，使应用程序能够......
admin
文章浏览阅读661次。RabbitMQ：始得在两个独立得python程序，或其他语言交互时使用，并且可以跨平台通讯， 可以用于传输数据或者文件。RabbitMQ：erlang语言 开发的。Python中连接RabbitMQ的模块：pika 、Celery(分布式任务队列) 、haigha......
admin
文章浏览阅读488次。Azkaban介绍Azkaban是在LinkedIn（领英）上创建的用于运行Hadoop作业的批处理工作流作业调度程序Azkaban特征分布式多执行器MySQL重试友好的用户界面有条件的工作流程数据触发高安全性支持插件扩展，从Web UI到作......
admin
文章浏览阅读1.4k次。实战：消息中间件，解耦、异步、削峰，到底该如何使用: 消息队列中间件是分布式系统中重要的组件，主要解决应用解耦，异步消息，流量削锋等问题，实现高性能，......
admin
DataXdataxDataX3.0概览DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能DataX 3.0六大核心优势可靠的数据质量监控完美解决数......
admin
参考链接：大数据中台技术架构_数据中台应用中间件...
admin
文章浏览阅读399次。转载自：https://www.toutiao.com/a6898209756142551556/?log_from=6635a73ec5c61_1633014235206今天闲聊下消息中间件的一些关键特性，对于消息中间件基础知识，包括各种开源消息中间件的比较选型文章，网上已经有很多，在这......
admin
文章浏览阅读219次。rabbit常用的几种工作模式1、简易模式 （一对一）2、WorkQueues（工作队列） （一对多）消费者存在竞争关系。3、Publish/Subscribe（发布与订阅） （一对多） 通过交换机将所有消息广播给多有队列4、（Routing）......
admin
文章浏览阅读10w+次，点赞10次，收藏78次。消息中间件的技术选型心得－RabbitMQ、ActiveMQ和ZeroMQ作者：chszs，转载需注明。博客主页：http://blog.csdn.net/chszsRabbitMQ、ActiveMQ和ZeroMQ都是极好的消息中间件，但是我们在项目中该选择哪个......
admin
文章浏览阅读1.7k次。消息中间件也可以称消息队列，是指用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息队列模型，可以在分布式环境下扩展进程的......
admin
文章浏览阅读145次。最近为将进程内部模块交互解耦，故增加了一个消息中间件的模块。处理流程如下：1.进程初始化时，各模块在消息中间件中订阅自己感兴趣的内容；2.需要发送数据时，调用中间件的发布接口，将对应的数......
admin
文章浏览阅读360次。1. 引言Kafka是一个分布式的基于发布、订阅的消息系统，有着强大的消息处理能力，相比与其他消息系统，具有以下特性：快速数据持久化，实现了O(1)时间复杂度的数据持久化能力。 高吞吐，能在普通的服......
admin
最近在参与一个项目的分库分表改造，底层的分库分表中间件完全自研，截止目前为止，主体功能已经完全开发完成，会逐渐进入测试阶段。后面的系列文章会围绕这个中间件对本次分库分表的改造过程做一个记录。作为系列第......
admin
文章浏览阅读395次。在前面的基础上，本文再来介绍下分布式事务中间件seata相关的概念文章目录seata概述seata概述2019年1月，阿里巴巴中间件团队发起了开源项目Fescar(Fast & EaSy Commit AndRollback），其愿景是让分布式事务的使用......
admin
文章浏览阅读378次。1. RabbitMQ1.1. 现实问题目前我们已经完成了商品和搜索系统的开发。我们思考一下，是否存在问题？商品的原始数据保存在数据库中，增删改查都在数据库中完成。搜索服务数据来源是索引库，如果数据库商......
admin
友情链接申请要求： 不违法不降权 权重相当 请联系QQ：737597453
