zeroMQ初体验-8.内存泄漏了？

石头君 2011-03-25

写过"永不停歇"的代码的兄弟应该都或多或少遇到或考虑到内存溢出之类的问题，那么，在ZeroMQ的应用中，又如何处理如是情况？

文中给出了类C这种需要自行管理内存的解决方案(虽然python的GC很强大，不过，关注下总没有坏处)：

这里运用到了这个工具：valgrind

为了避免zeromq中的一些warning的干扰，首先需要重新build下zermq

  • $cdzeromq
  • $exportCPPFLAGS=-DZMQ_MAKE_VALGRIND_HAPPY
  • $./configure
  • $makeclean;make
  • $sudomakeinstall

然后：

valgrind--tool=memcheck--leak-check=fullsomeprog

由此帮助，通过修正代码，应该可以得到如下令人愉快的信息：

==30536==ERRORSUMMARY:0errorsfrom0contexts...

似乎这是技巧章了，与ZeroMQ关联度不是太大啊，读书笔记嘛，书上写了，就记录下，学习下。

(未完待续)

石头君

石头君

相关推荐

ZeroMQ发布-订阅模式（套接字类型ZMQ_PUB、ZMQ_SUB、ZMQ_XPUB等）

0MQ 是一个轻量级消息内核。它可用于C、C++、Python、.NET /Mono、Fortran 和 Java 语言。它运行在AIX ，FreeBSD的，基于HP - UX ， Linux和MacOS下， OpenBSD系统， OpenVMS ， Q

fibbery学习笔记 / 0评论 2020-06-27

Kafka、Flume、Kinesis更多的流方式支持，包括Twitter、ZeroMQ等

可线性伸缩至超过数百个节点；实现亚秒级延迟处理；可与Spark批处理和交互式处理无缝集成；提供简单的API实现复杂算法；更多的流方式支持，包括Kafka、Flume、Kinesis、Twitter、ZeroMQ等。Spark在接收到实时输入数据流后，将数据

jiaomrswang / 0评论 2020-06-26

.net core容器添加时区和libgdi+和下载加速

国内.net core镜像下载加速。国内访问可以把mcr.microsoft.com改为mcr.azk8s.cn. 修改时区和安装libgdi+. 根据基础镜像不同添加的命令也不同。alpine的包管理器是apk，安装软件命令是apk add. 第一行是替

laijunfeng / 0评论 2020-04-07

Kafka、ZeroMq、RabbitMq、ActiveMq性能对比，及实用场景分析

MQ框架非常之多，比较流行的有Kafka、ZeroMq、RabbitMq、ActiveMq。这几种MQ到底应该选择哪个？要根据自己项目的业务场景和需求。下面我列出这些MQ之间的对比数据和资料。其中包括持久化消息和瞬时消息的测试。整个过程共产生1百万条1K的

liuxingen / 0评论 2019-12-27

RabbitMq、ActiveMq、ZeroMq、kafka之间的比较,资料汇总

MQ框架非常之多，比较流行的有RabbitMq、ActiveMq、ZeroMq、kafka。这几种MQ到底应该选择哪个？要根据自己项目的业务场景和需求。下面我列出这些MQ之间的对比数据和资料。这个结论来自于以下这篇文章。其中包括持久化消息和瞬时消息的测试。

laijunfeng / 0评论 2017-07-21

常用消息中间件17个维度全方位对比

本文介绍了Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ 17 个方面综合对比作为消息队列使用时的差异。没有专门写rocketmq的书，网上的资料良莠不齐，官方文档很简洁，但是对技术细节没有过多的描述。没有专门写active

徐二七 / 0评论 2019-09-18

activemq、rabbitmq、kafka，zeromq原理和比较

rabbitmq:分布式存储+备份 ---一般应用优先 -指定入队 先消费后删除。rabbitmq的主题就是交换器，通过key对应到不同的帮定队列，消费端直接消费即可无需关注来于哪个队列。rabbitmq有磁盘节点，内存节点，磁盘节点分布存储exchang

helongzhong / 0评论 2019-01-15

RabbitMq、ActiveMq、ZeroMq、kafka之间的比较

MQ框架非常之多，比较流行的有RabbitMq、ActiveMq、ZeroMq、kafka。这几种MQ到底应该选择哪个？要根据自己项目的业务场景和需求。下面我列出这些MQ之间的对比数据和资料。这个结论来自于以下这篇文章。其中包括持久化消息和瞬时消息的测试。

fibbery学习笔记 / 0评论 2016-09-21

消息中间件对比

在高并发环境下，由于来不及同步处理，请求往往会发生堵塞，比如大量的insert,update之类的请求同时达到mysql，直接导致无数的行锁表锁，甚至最后请求堆积过多，从而触发too many connections错误。通过使用消息队列，我们可以异步处理

fibbery学习笔记 / 0评论 2014-11-18

activemq、rabbitmq、kafka，zeromq原理和比较

rabbitmq:分布式存储+备份 ---一般应用优先 -指定入队 先消费后删除。rabbitmq的主题就是交换器，通过key对应到不同的帮定队列，消费端直接消费即可无需关注来于哪个队列。rabbitmq有磁盘节点，内存节点，磁盘节点分布存储exchang

jiaomrswang / 0评论 2019-01-15

storm集群安装

pfjia / 0评论 2013-08-02

消息队列ZeroMQ

★ZMQ是啥玩意儿？　　通俗地说，ZMQ是一个开源的、跨语言的、非常简洁的、非常高性能、非常灵活的网络通讯库。　　这玩意儿推出的时间不长，貌似09年下半年才推出1.0.1版本。最近一段时间，对ZMQ的好评日渐增多，所以俺也来赶赶潮流，在俺博客里忽悠一下。　

laijunfeng / 0评论 2013-04-16

【消息队列MQ】各类MQ比较

是使用Erlang编写的一个开源的消息队列，本身支持很多的协议：AMQP，XMPP,SMTP,STOMP，也正是如此，使的它变的非常重量级，更适合于企业级的开发。同时实现了一个经纪人构架，这意味着消息在发送给客户端时先在中心队列排队。对路由，负载均衡或者数

聚沙成塔积水成渊 / 0评论 2015-02-06

Storm 集群异常的解决

通过Google搜索,发现有很多人问这个问题,nathanmarz的建议是将ZeroMQ的版本降级为2.1.7;原来系统使用的3.0.2,降级为2.1.7后发现仍然存在这个问题,基本可以排除是由于ZeroMQ导致的.这是做dayoou.com这个项目的时候

shuaiOKshuai / 0评论 2012-12-06

ZeroMQ 的模式

在需要并行化处理数据的时候，采用消息队列通讯的方式来协作，比采用共享状态的方式要好的多。Erlang ，Go 都使用这一手段来让并行任务之间协同工作。最近读完了ZeroMQ的Guide。而 ZeroMQ 把消息通讯方面的模式总结的很不错。ZeroMQ 并不

woaizard00 / 0评论 2012-04-26

ZeroMQ：云计算时代最好的通讯库

还在学socket编程吗？还在研究为什么epoll比select更好吗？在复杂的云计算环境中，我们面临的难题远比这个复杂得多。为什么说ZeroMQ是云计算时代最好的通讯库呢？我们从ZeroMQ的特性来分析吧：。并发是目前云计算这个世界的主题，所以ZMQ提供

asia / 0评论 2012-04-26

分布式系统之分布式中间件zeroMQ

zeroMQ，又称0MQ，是一个非常简单的通信库，它扩展了传统BSD socket能力，提供简单的基于消息的通信。zeroMQ不解析消息体，没有序列化能力，或者说你可以使用任何第三方序列化库比如google的protocol buffer。在zeroMQ的

laijunfeng / 0评论 2011-09-25

Mongrel2服务器配置及控制

Mongrel2是一款面向现代Web应用而设计的Web浏览器。由干净的C语言写成，（目前）在Linux系统上运行。它支持HTTP,Flashsockets,WebSockets,LongPolling，异步等技术，基本上走在当今Web服务端技术的最前沿。按

云端轻躺 / 0评论 2011-08-10

zeroMQ初体验-10.优雅的使用多线程

"或许，ZeroMQ是最好的多线程运行环境！其实它想要支持的是那种类似erlang信号模式。传统多线程总会伴随各种"锁"出现各种稀奇古怪的问题。而zeroMQ的多线程致力于"去锁化"，简单来说，一条数据在同

石头君 / 0评论 2011-03-25

zeroMQ初体验-9.优雅的扩展(代理模式)

前面所谈到的网络拓扑结构都是这样的：。而在实际的应用中，绝大多数会出现这样的结构要求：。zeroMQ中自然也提供了这样的需求案例：。注意代码，这个代理是支持大数据多包发送的。因为zeroMQ天然支持"多对多",所以看似不需要代理啊，如下

fibbery学习笔记 / 0评论 2011-03-25

zeroMQ初体验-7.优雅的卸载工作进程

关掉一个进程有很多种方式，而在ZeroMQ中则推崇通过使用信号通知，可控的卸载、关闭进程。在这里，要援引之前的"分而治之"例子。显然，信号发送是由能够掌握整个进度的"水槽"(下游)来控制，在原有基础上做少许变更即可。

laijunfeng / 0评论 2011-03-25

zeroMQ初体验-6.多模式数据来源处理方案(multi sockets)

之前已经讲过，zeroMQ是可以多对多的，但需要成对匹配才行，即多个发布端都是同一种模式，而这里要涉及到的是，多个发布端模式不统一的情况。显然，如此做既不优雅，还有出现单来源循环不止，另一来源又得不到响应的状况。if receiver in socks a

asia / 0评论 2011-03-24

zeroMQ初体验-5.高级教程初涉

诸位在前面的例子中，已经可以发现所有的关系都是成对匹配出现的。req/rep：主要用于远程调用及任务分配等。push/pull：主要用于多任务并行。由于zeroMQ的发送机制，发送到数据有两种状态，在非Copy下，一旦发送成功，发送端将不再能访问到该数据，

fibbery学习笔记 / 0评论 2011-03-24

zeroMQ初体验-4.传教(为什么要用ZeroMQ?)

既然是读书笔记，按照顺序，原作者在这里"唠嗑"了一大堆Why，看的着实有些热血沸腾，幸而也是他的对头"兔子"的簇拥，略带客观的说说：。zeroMQ从某种层面上甚至都不能称为软件。你是否还在为网络编程中，为繁复的soc

vitasa / 0评论 2011-03-24

zeroMQ初体验-3.分而治之模式(push/pull)

print "Press Enter when the workers are ready: ". # The first message is "0" and signals start of batch. # R

woaizard00 / 0评论 2011-03-24

python zeromq 介绍

ZeroMQ并不是一个对socket的封装，不能用它去实现已有的网络协议。它有自己的模式，不同于更底层的点对点通讯模式。它有比tcp协议更高一级的协议。它改变了通讯都基于一对一的连接这个假设。ZeroMQ把通讯的需要看成4类，其中一类是一对一结对通讯，用来

热爱技术热爱生活 / 0评论 2011-03-10

ZeroMQ、nanomsg

zmq其实更是一种网络包，可以应用于：N-M的网络路由，发布订阅。简单的消息队列，不保证可靠性。异步IO实现对队列排队和简单处理。因为它不是个独立的中间件，讲解关注点不用，终点说他的通信模型，功能实现点。后面作者又再次基础上开发了性能更好的nanomsg。

走位风一样 / 0评论 2019-07-01

RabbitMq、ActiveMq、ZeroMq、kafka之间的比较,资料汇总

MQ框架非常之多，比较流行的有RabbitMq、ActiveMq、ZeroMq、kafka。这几种MQ到底应该选择哪个？要根据自己项目的业务场景和需求。下面我列出这些MQ之间的对比数据和资料。这个结论来自于以下这篇文章。其中包括持久化消息和瞬时消息的测试。

lishijian / 0评论 2017-07-21

storm 安装

看了很多storm 安装的文章，在动手装的时候还是发现zeromq 出现安装不了的情况。本人又通过google找了相应安装方式，现在记录一下作为备份吧！安装环境：本人使用的是centos 6.5 ， java环境， zookeeper环境已经安装完毕。st

早晨的阳光的技术 / 0评论 2014-12-30

ZeroMQ的学习和研究

引用官方的说法：“ZMQ是一个简单好用的传输层，像框架一样的一个socketlibrary，他使得Socket编程更加简单、简洁和性能更高。是一个消息处理队列库，可在多个线程、内核和主机盒之间弹性伸缩。ZMQ的明确目标是“成为标准网络协议栈的一部分，之后进

走位风一样 / 0评论 2014-07-30

zeromq 安装

// We never get here but if we did, this would be how we end

laijunfeng / 0评论 2012-10-14

zeromq的三种简单模式（python实现）

简介ZMQ 是一个简单好用的传输层，像框架一样的一个 socket library，他使得 Socket 编程更加简单、简洁和性能更高。是一个消息处理队列库，可在多个线程、内核和主机盒之间弹性伸缩。ZMQ 的明确目标是“成为标准网络协议栈的一部分，之后进入

石头君 / 0评论 2019-06-26

babel: yet another rpc, but far beyond rpc（中）

2 架构描述简单架构从之前的描述，已经可以看出我们会采用RPC over MQ的方式做底层实现，类似方法调用的通信语义会在client和server两端的库中作封装。所以，rabbitmq成为babel的第一选择，可以实现我们规划功能的全集，我们的SAAS

早晨的阳光的技术 / 0评论 2019-06-21

史上最快 异步消息队列zeromq 简介

是的,我喜欢Z开头的东西.高吞吐,低延时,超乎你的想象.zeromq性能很好,单纯的发简单的小文本消息和python的函数调用一样快.这个特性的很让人喜欢的,可以避免内存被烧完.我们可以做一个实验,在响应请求端运行到一半时,

vitasa / 0评论 2009-04-30

storm单机版部署

storm可以看做是跟hadoop平行的产品，部署storm并不依赖于hadoop而之前部署的hbase、hive、spark等都或多或少的依赖hadoop这里简单记录一下storm的部署过程需要下载包：。部署好之后还需要部署zookeeper这里要下载好

sanamaz / 0评论 2019-06-20

Java消息队列总结篇（ActiveMQ、RabbitMQ、ZeroMQ、Kafka）

消息队列中间件是分布式系统中重要的组件，主要解决应用解耦，异步消息，流量削锋等问题，实现高性能，高可用，可伸缩和最终一致性架构。目前使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ。以下介绍消

forrestou / 0评论 2019-05-29

还在为选择消息中间件苦恼？十年Java程序员来告诉你经验

本文将从，Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ 17 个方面综合对比作为消息队列使用时的差异。# 资料文档Kafka：中。没有专门写rocketmq的书，网上的资料良莠不齐，官方文档很简洁，但是对技术细节没有过多的

woaizard00 / 0评论 2019-05-20

17 个方面，综合对比 Kafka、RabbitMQ、RocketMQ 分布式消息队列

没有专门写activemq的书，网上资料多。分区首领会处理来自客户端的生产请求，kafka分区首领会被分配到不同的broke

woaizard00 / 0评论 2019-05-09

java vuser 采用cmd调用python，执行zeromq请求protobuf反序列化

2、将以上下载的压缩包里，找到jzmq.dll和 libzmq.dll 文件，并把这两个问题，放到jdk1.6的安装路径下in目录下

phd / 0评论 2018-11-04

主流的消息队列MQ比较，详解MQ的4类应用场景

号称最快的消息队列系统，尤其针对大吞吐量的需求场景。ZeroMQ仅提供非持久性的队列，也就是说如果down机，数据将会丢失。其中，Twitter的Storm中使用ZeroMQ作为数据流的传输。性能较好，但是不利于做二次开发和维护。历史悠久的开源项目，是Ap

走位风一样 / 0评论 2018-09-24

ZeroMQ编译安装使用教程

因为工作需要，对ZeroMQ进行简单的研究使用，为了使大家更好、更快的学习使用ZeroMQ，本文将从下载、安装、编译、几方面来对ZeroMQ做个简明的教程总结。主要用于加密、解密、签名和生成密码哈希等等。这是一个可移植的、跨编译器支持、可安装的，基于 Na

fibbery学习笔记 / 0评论 2017-06-30

Twitter Storm安装配置（单机版）笔记

本篇幅讲述Twitter Storm安装配置，也作为自己的笔记。要使用storm首先要安装以下工具：python、zookeeper、zeromq、jzmq、storm第一步，安装Python2.7.2wget http://www.python.org/

guchuanyun / 0评论 2013-05-15

Ubuntu Server 12.10 上安装 Node.js, ZeroMQ

Node.js是一个基于google v8+javascript的服务端编程框架。对于搞云计算，用Node.js,来做系统管理Web站点是非常合适的。4）前后端一致性。好，下面是安装步骤：。首先确保系统安装了Python, gcc, g++，如果没有则安装

石头君 / 0评论 2012-11-01

为什么我希望用C而不是C++来实现ZeroMQ

开始前我要先做个澄清：这篇文章同Linus Torvalds这种死忠C程序员吐槽C++的观点是不同的。在我的整个职业生涯里我都在使用C++，而且现在C++依然是我做大多数项目时的首选编程语言。自然的，当我从2007年开始做ZeroMQ时，我选择用C++来实

不吃鱼的猫 / 0评论 2012-05-18

在Ubuntu 11.04上安装ZeroMQ

$ python setup.py build_ext --inplace $ python setup.py test $ sudo python setup.py install

vitasa / 0评论 2011-07-14

消息队列性能对比——ActiveMQ、RabbitMQ与ZeroMQ

我花了一些时间解剖各种库执行分布式消息。在这个分析中，我看了几个不同的方面，包括API特性，易于部署和维护，以及性能质量.。消息队列已经被分为两组：brokerless和brokered。brokerless消息队列是对等的，没有中间商参与信息的传递，而b

onlylixiaobei / 0评论 2016-12-26

想了解 Kafka, RabbitMQ, ZeroMQ之间的差异？这一篇文章就够了！

本文将从，Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ 17 个方面综合对比作为消息队列使用时的差异。群内提供免费的Java架构学习资料合理利用自己每一分每一秒的时间来学习提升自己，不要再用"没有时间“来掩饰自己

Kafka / 0评论 2019-01-26

消息中间件选型分析：从Kafka与RabbitMQ的对比看全局

消息队列中间件是指利用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下提供应用解耦、弹性伸缩、冗余存储、流量削峰、异步通信、数据同步等等功能，其作为分布式系统架构中的

woaizard00 / 0评论 2018-11-06

Storm在Ubuntu环境下的单机部署

查看Ubuntu安装JDK安装Pythod安装Zookeeper安装ZeroMQ安装Jzmp安装Storm查看Ubuntu是32位还是64. 返回结果 ==> SMP Fri Feb 22 00:31:26 UTC 2013 x86_64 x86_6

Gsdxiaohei / 0评论 2016-03-09