进程同步：一组并发进程进行相互合作、互相等待，使得各进程按一定的顺序执行的过程。 生产者和消费者问题 A生产产品，B取走产品， 让信号量初值为0，生产者不用获取信号量，但要释放信号量1. 消费者要获取信号量，但不用释放信号量0. 生产者producer.c customer.c 先执行： ./pro ...
分类：
其他好文 时间：
2016-06-06 01:05:30
阅读次数：
160
在多线程环境下，通过 BlockingQueue，实现生产者-消费者场景。 Toast 被生产和消费的对象。 ToastQueue 继承了 LinkedblockingQueue ，用于中间存储 Toast 。 Producer 生产 Toast ，并将生产出来的 Toast 放进队列 initia ...
分类：
编程语言 时间：
2016-06-05 18:33:20
阅读次数：
246
解释一下什么是虚假唤醒? 说具体的例子,比较容易说通. pthread_mutex_t lock; pthread_cond_t notempty; pthread_cond_t notfull; void *producer(void *data){ for(int i = 0;i<=16;i++ ...
分类：
其他好文 时间：
2016-06-04 14:57:19
阅读次数：
241
问题导读：
1.zookeeper在kafka的作用是什么？
2.kafka中几乎不允许对消息进行“随机读写”的原因是什么？
3.kafka集群consumer和producer状态信息是如何保存的？
4.partitions设计的目的的根本原因是什么？
一、入门
1、简介
Kafka is a distribu...
分类：
其他好文 时间：
2016-06-02 14:39:21
阅读次数：
215
问题导读
1.Kafka独特设计在什么地方？
2.Kafka如何搭建及创建topic、发送消息、消费消息？
3.如何书写Kafka程序？
4.数据传输的事务定义有哪三种？
5.Kafka判断一个节点是否活着有哪两个条件？
6.producer是否直接将数据发送到broker的leader(主节点)？
7.Kafa consumer是否可以消费指定分区消息？
8.Kafka消息是...
分类：
其他好文 时间：
2016-05-30 14:41:12
阅读次数：
302
1.增大partition最大连接数 kafka的集群有多个Broker服务器组成，每个类型的消息被定义为topic，同一topic内部的消息按照一定的key和算法被分区(partition)存储在不同的Broker上，消息生产者producer和消费者consumer可以在多个Broker上生产/ ...
分类：
其他好文 时间：
2016-05-24 00:17:42
阅读次数：
270
1.Kafka独特设计在什么地方？2.Kafka如何搭建及创建topic、发送消息、消费消息？3.如何书写Kafka程序？4.数据传输的事务定义有哪三种？5.Kafka判断一个节点是否活着有哪两个条件？6.producer是否直接将数据发送到broker的leader(主节点)？7.Kafa con ...
分类：
其他好文 时间：
2016-05-13 12:38:56
阅读次数：
230
第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析
/* 王家林老师授课http://weibo.com/ilovepains 每天晚上20：00YY频道现场授课频道68917580*/
/**
* *第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析
* 论坛数据自动生成代码，该生成的数据会作为Producer的方式发送给...
分类：
编程语言 时间：
2016-05-12 22:46:54
阅读次数：
371
摘要
Kafka是由LinkedIn开发并开源的分布式消息系统，因其分布式及高吞吐率而被广泛使用，现已与Cloudera Hadoop，Apache Storm，Apache Spark集成。本文介绍了Kafka的创建背景，设计目标，使用消息系统的优势以及目前流行的消息系统对比。并介绍了Kafka的架构，Producer消息路由，Consumer Group以及由其实现的不同消息分发方式...
分类：
其他好文 时间：
2016-05-12 13:33:19
阅读次数：
285
（注：参考教材：计算机操作系统第四版 西安电子科技大学出版社） 问题描述：一群生产者进程在生产产品，并将这些产品提供给消费者去消费。为了使生产者进程与消费者进程能够并发进行，在两者之间设置一个具有n个缓冲区的缓冲池，生产者进程将产品放入一个缓冲区中；消费者可以从一个缓冲区取走产品去消费。尽管所有的生 ...
分类：
系统相关 时间：
2016-05-11 23:15:33
阅读次数：
1181
