登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

最新发布 第29页

SuperIT专业IT技术社区之后端大数据与Devops

java

关于Kafka 的 consumer 消费者手动提交详解

关于Kafka 的 consumer 消费者手动提交详解 前言 在上一篇 Kafka使用Java实现数据的生产和消费demo 中介绍如何简单的使用kafka进行数据传输。本篇则重点介绍kafka中的 consumer 消费者的讲解。 应用场景 在上一篇kafka的consumer...

7年前 (2019-03-26) 36℃

java

Java实现Kafka的生产者、消费者

Java实现Kafka的生产者、消费者 一、生产者 import org.apache.kafka.clients.producer.KafkaProducer; import org.apache.kafka.clients.producer.ProducerRecord; ...

7年前 (2019-03-26) 30℃

kafka

java写kafka的生产者与消费者代码

java写kafka的生产者与消费者代码 2017年08月15日 18:37:22 nannan1232 阅读数：2360 1、环境说明： OS:redhat6.5 ,cloudera-mamager5.7 ，zookeeper-3.4.5 ,kafka-0.9.0 2、kaf...

7年前 (2019-03-26) 25℃

kafka

Kafka java api-生产者代码、高性能吞吐

Kafka java api-生产者代码、高性能吞吐
Kafka java api-生产者代码、高性能吞吐 前面做过命令行让生产者发送消息，现在使用java api来进行消息的生产，以及解释kafka高性能是如何实现（来源于学习资料）。 使用shell创建topic和发送消息如下： #参数：zookeeper连接地址和端口号，副本数...

7年前 (2019-03-26) 30℃

kafka

kafka监控topic消费

kafka监控topic消费 2018年01月11日 17:52:33 老蔡Code 阅读数：3565 一、KafkaOffsetMonitor监控 安装 1.wget https://github.com/quantifind/KafkaOffsetMonitor/releas...

7年前 (2019-03-26) 23℃

java

log4j2

org.slf4j slf4j-api 1.7.21 org.apache.logging.log4j log4j-api...

7年前 (2019-03-25) 21℃

java

log4j

<dependency> <groupId>org.slf4j</groupId> <artifactId>slf4j-api</artifactId> <version>1.7.19</v...

7年前 (2019-03-25) 23℃

职位要求

要求1

基础阶段：Linux、Docker、KVM、MySQL基础、Oracle基础、MongoDB、redis。 hadoop mapreduce hdfs yarn：hadoop： Hadoop 概念、版本、历史，HDFS工作原理，YARN介绍及组件介绍。 大数据存储阶段：hbase...

7年前 (2019-03-25) 21℃

php

MAMP安装thrift插件

/Applications/MAMP/bin/php/php7.2.1/bin/pecl install thrift 转载请注明：SuperIT » MAMP安装thrift插件...

7年前 (2019-03-25) 24℃

链接

一些链接

https://mvnrepository.com/ clueshell 集群运维 https://www.cnblogs.com/kevingrace/p/6099205.html http://code.admineap.com/eap/doc#page-top 基于Admi...

7年前 (2019-03-25) 21℃

测试

测试工具地址

https://www.cnblogs.com/q735613050/p/9215631.html https://www.cnblogs.com/hackchecker/archive/2012/01/08/2316531.html https://www.jb51.net/a...

7年前 (2019-03-25) 29℃

kafka

kafka落地端技术

flume rsyslog spark flink logstash filebeat python client php client java client Go client C/C++ client Lua client Storm/JStorm others 转载请注明...

7年前 (2019-03-25) 24℃

未分类

#kafka shell脚本用法详解

#kafka shell脚本用法详解 2018年07月14日 21:18:51 阿飞Javaer 阅读数：4150更多 所属专栏： kafka 版权声明：本文为阿飞Javaer博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/feelwing13...

7年前 (2019-03-25) 28℃

kafka

kafka一些基本操作

kafka一些基本操作 2016年05月31日 15:27:57 yilan1993 阅读数：1967 1. 查看某个topic各个分区的位置： bin/kafka-topics.sh –topic test1349 –describe R...

7年前 (2019-03-24) 24℃

kafka

Kafka 集群搭建 for mac

Kafka 集群搭建 for mac 2018年12月06日 20:35:25 oumuv 阅读数：102 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/oumuv/article/details/84862089 环境要求 ...

7年前 (2019-03-24) 25℃

docker

让Docker容器使用静态独立的外部IP（便于集群组建）

让Docker容器使用静态独立的外部IP（便于集群组建） 需要使用Docker虚拟化Hadoop/Spark等测试环境，并且要可以对外提供服务，要求是完全分布式的部署（尽量模拟生产环境）。那么我们会遇到几个问题： Container IP 是动态分配的 Container IP ...

7年前 (2019-03-24) 26℃

docker

docker 的常用参数和解析

docker 的常用参数和解析 2018年07月11日 01:36:54 yy61658720 阅读数：1408 Docker的应用场景 1.简化配置,同一Docker的配置可以在不同 环境中使用,降低了硬件要求和应用环境之间的耦合度. 2.代码的流水线管理.代码从开发者的假期到...

7年前 (2019-03-24) 27℃

docker

Docker每次启动容器，IP及hosts指定

Docker每次启动容器，IP及hosts指定 2018年05月30日 12:41:40 淡淡的倔强 阅读数：20300 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/u012834750/article/details/805...

7年前 (2019-03-24) 239℃

docker

docker设置容器固定ip

docker设置容器固定ip 版权声明：知识是公共的，有建议大家一起讨论 https://blog.csdn.net/wanghao_0206/article/details/79583325 docker安装后，默认会创建三种网络类型，bridge、host和none，可通过...

7年前 (2019-03-24) 29℃

kafka

Kafka系列(二)特性和常用命令

Kafka系列(二)特性和常用命令 Kafka中Replicas复制备份机制 kafka将每个partition数据复制到多个server上,任何一个partition有一个leader和多个follower(可以没有)，备份的个数可以通过broker配置文件来设定(replic...

7年前 (2019-03-24) 22℃

kafka

Kafka的message存储数据结构

Kafka的message存储数据结构   Message存储：     Topic有多个Partition，一个Partition对应一个log，一个log有多个Segment。     每个Segment存储多个Message，Message的offset决定存储位...

7年前 (2019-03-24) 42℃

kafka

Kafka在zookeeper里面的存储结构详解

Kafka在zookeeper里面的存储结构详解 2018年09月03日 16:06:13 u010020099 阅读数：374 当kafka启动的时候，就会向zookeeper里面注册一些信息，这些数据也称为Kafka的元数据信息。 一、zookeeper存储结构总图 1.根...

7年前 (2019-03-24) 19℃

zookeeper

Docker安装Zookeeper并进行操作

Docker安装Zookeeper并进行操作 2018年07月02日 17:01:12 Radom7 阅读数：10372 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/qq_26641781/article/details/80...

7年前 (2019-03-24) 50℃

kafka

kafka manager的安装和使用

kafka系列二、kafka manager的安装和使用 目录 1. Yahoo kafka manager介绍 2. 环境信息 4. 安装sbt0.13.9 5. 构建kafka manager包 1、下载项目包 2、解压、编译 3、安装 6、启动服务 7、编写服务启动脚本 八...

7年前 (2019-03-24) 27℃

kafka

Kafka中Replicas复制备份机制

Kafka中Replicas复制备份机制 kafka将每个partition数据复制到多个server上,任何一个partition有一个leader和多个follower(可以没有)，备份的个数可以通过broker配置文件来设定(replication-factor的参数配置指...

7年前 (2019-03-24) 23℃

kafka

Kafka系列(一)安装和配置说明

Kafka系列(一)安装和配置说明 单机模式 修改kafak安装文件中 …/kafka_2.9.2-0.8.1.1/config 下面的server.properties 配置文件 1、broker.id=0 [默认不用修改,该值在集群中需要唯一] 2、log.d...

7年前 (2019-03-24) 29℃

kafka

zookeeper 和 kafka 集群搭建

zookeeper 和 kafka 集群搭建 2017年03月30日 17:35:08 my_bai 阅读数：25064 Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题： 我们想分析下用户行为（pageviews...

7年前 (2019-03-22) 25℃