我们来看一下Akka的一个简单的wordcount的案例架构设计
从图中我们可以看出,不同的行我们是交给不同的actor进行入理的,每行首先进行map操作,识别出每个单词,然后交给reduce步骤的actor,进行字数的统计。最后,将不同行的统计结果都传给一个统计actor进行最后的reduce操作,统计所有行的单词出现的次数。这是一个非常典型的案例。
那么Actor的设计是怎样的呢?我们看看最简单的版本。
从图中我们可以看出,一共需要4个actor。首先需要一个总调度的actor,也就是master actor。这将会把传入的每行字符串通过消息的方式,发送给第一步骤的map操作的actor,然后map actor将map后的结果返回给master actor。master actor接收到消息后,将mapdata发送给reduce操作的reduce actor,进行本行的单词统计操作,然后将统计内容返回给master actor。master actor接收到reduce data后,再将其发送给用于作最后统计工作的 aggregate actor。将全部行的reduce data全部发给Aggregate actor后,master actor会发送一个result消息给aggregate actor,通知其开始做最后的统计计算。最后,Aggregate actor将最后的统计结果返回给master actor。
分享下更多的scala资源吧:
百度云盘:http://pan.baidu.com/s/1gd7133t
微云云盘:http://share.weiyun.com/047efd6cc76d6c0cb21605cfaa88c416
360云盘: http://yunpan.cn/cQN9gvcKXe26M (提取码:13cd)
信息来源于 DT大数据梦工厂微信公众账号:DT_Spark
关注微信账号,获取更多关于scala学习内容