189 8069 5689

如何实现Storm-kafka

这篇文章将为大家详细讲解有关如何实现Storm-kafka,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

10年的合水网站建设经验,针对设计、前端、开发、售后、文案、推广等六对一服务,响应快,48小时及时工作处理。成都营销网站建设的优势是能够根据用户设备显示端的尺寸不同,自动调整合水建站的显示方式,使网站能够适用不同显示终端,在浏览器中调整网站的宽度,无论在任何一种浏览器上浏览网站,都能展现优雅布局与设计,从而大程度地提升浏览体验。创新互联从事“合水网站设计”,“合水网站推广”以来,每个客户项目都认真落实执行。

         实现细节如下:

public static Iterable> generateTuples(
			KafkaConfig kafkaConfig, Message msg) {

		Iterable> tups;

		ByteBuffer payload = msg.payload();
		ByteBuffer key = msg.key();

		if (key != null
				&& kafkaConfig.scheme instanceof KeyValueSchemeAsMultiScheme) {
			tups = ((KeyValueSchemeAsMultiScheme) kafkaConfig.scheme)
					.deserializeKeyAndValue(Utils.toByteArray(key),
							Utils.toByteArray(payload));
		} else {
			tups = kafkaConfig.scheme.deserialize(Utils.toByteArray(payload));
		}
		return tups;
	}

  

      1   :方法内部 Iterable> 类型的tups对象

      2   :  Message对象是kafka的Message。 包括了Key,以及palyload负载

      3    :   在生成元组的时候,需要拿到kafkaConfig.scheme 当中的Scheme,一旦Scheme instanceof

                KeyValueSchemeAsMultiScheme,将强制性转换为 KeyValueSchemeAsMultiScheme,并且调用deserializeKeyAndValue 方法将其反序列化 List

     细节上,让我们查看一下  KeyValueSchemeAsMultiScheme 对象

package com.mixbox.storm.kafka;

import backtype.storm.spout.SchemeAsMultiScheme;
import java.util.Arrays;
import java.util.List;

@SuppressWarnings("serial")
public class KeyValueSchemeAsMultiScheme extends SchemeAsMultiScheme{

    public KeyValueSchemeAsMultiScheme(KeyValueScheme scheme) {
        super(scheme);
    }

    
    //把一个key value 进行反序列化
    public Iterable> deserializeKeyAndValue(final byte[] key, final byte[] value) {
    	
        List o = ((KeyValueScheme)scheme).deserializeKeyAndValue(key, value);
        
        if(o == null) return null;
        
        else return Arrays.asList(o);
    }
}

           首先, KeyValueSchemeAsMultiScheme 继承自SchemeAsMultiScheme,SchemeAsMultiScheme是Storm自身所带有的一个class实现,以上的2个class 都实现了Storm之中【MultiScheme】

关于“如何实现Storm-kafka”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。


分享文章:如何实现Storm-kafka
地址分享:http://cdxtjz.cn/article/gdoepe.html

联系我们

您好HELLO!
感谢您来到成都网站建设公司,若您有合作意向,请您为我们留言或使用以下方式联系我们, 我们将尽快给你回复,并为您提供真诚的设计服务,谢谢。
  • 电话:028- 86922220 18980695689
  • 商务合作邮箱:631063699@qq.com
  • 合作QQ: 532337155
  • 成都网站设计地址:成都市青羊区锣锅巷31号五金站写字楼6楼

小谭建站工作室

成都小谭网站建设公司拥有多年以上互联网从业经验的团队,始终保持务实的风格,以"帮助客户成功"为已任,专注于提供对客户有价值的服务。 我们已为众企业及上市公司提供专业的网站建设服务。我们不只是一家网站建设的网络公司;我们对营销、技术、管理都有自己独特见解,小谭建站采取“创意+综合+营销”一体化的方式为您提供更专业的服务!

小谭观点

相对传统的成都网站建设公司而言,小谭是互联网中的网站品牌策划,我们精于企业品牌与互联网相结合的整体战略服务。
我们始终认为,网站必须注入企业基因,真正使网站成为企业vi的一部分,让整个网站品牌策划体系变的深入而持久。