登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

aide_941的文章

Flume

Flume + kafka + HDFS构建日志采集系统

Flume + kafka + HDFS构建日志采集系统 2016年11月25日 22:13:56 iteye_19607 阅读数：741更多 个人分类： 架构 https://blog.csdn.net/iteye_19607/article/details/82...

6年前 (2019-04-30) 23℃

Flume

Flume采集到HDFS

Flume采集到HDFS 原创 Hadoop 作者：13545163656 时间：2018-08-09 22:30:02  544  0 一、需求： 采集指定文件的内容到HDFS 技术选型：exec – memory – hdfs 1 2 ...

6年前 (2019-04-29) 23℃

kafka

Kafka学习笔记（二）：Partition分发策略

Kafka学习笔记（二）：Partition分发策略 kafka版本0.8.2.1 Java客户端版本0.9.0.0   为了更好的实现负载均衡和消息的顺序性，Kafka Producer可以通过分发策略发送给指定的Partition。Kafka保证在partit...

6年前 (2019-04-28) 38℃

kafka

Kafka学习笔记（一）：概念介绍

Kafka学习笔记（一）：概念介绍 Kafka是一个开源的，分布式的，高吞吐量的消息系统。随着Kafka的版本迭代，日趋成熟。大家对它的使用也逐步从日志系统衍生到其他关键业务领域。特别是其超高吞吐量的特性，在互联网领域，使用越来越广泛，生态系统也越来的完善。同时，其设计思路...

6年前 (2019-04-28) 27℃

未分类

Java多线程18：线程池

使用线程池与不使用线程池的差别 先来看一下使用线程池与不使用线程池的差别，第一段代码是使用线程池的： public static void main(String[] args) { long startTime = System.currentTimeMill...

6年前 (2019-04-28) 31℃

kafka

kafka在zookeeper上的节点信息和查看方式

kafka在zookeeper上的节点信息和查看方式 2018年06月03日 00:37:31 MakeGreatEffort 阅读数：4042 kafka在Zookeeper上的节点如下图： 该图片盗自大牛的博客http://blog.csdn.net...

6年前 (2019-04-28) 22℃

shell

java守护进程启动和关闭脚本

java守护进程启动和关闭脚本 2017年12月14日 19:08:48 褚金辉 阅读数：2355 # 程序名称 PROJECT_NAME=route #程序路径 APP_HOME=$(dirname $(pwd))/$PROJECT_NAME ...

6年前 (2019-04-28) 25℃

linux

chattr +i锁定不能删除、添加 chattr –i解锁

chattr +i锁定不能删除、添加 chattr –i解锁 参数 A：即Atime，告诉系统不要修改对这个文件的最后访问时间。 S：即Sync，一旦应用程序对这个文件执行了写操作，使系统立刻把修改的结果写到磁盘。 a：即Append Only，系统只允许在这个文件之后追加数据...

6年前 (2019-04-28) 24℃

linux

对文件锁定、解锁及查看文件锁定状态

对文件锁定、解锁及查看文件锁定状态 2018年03月13日 17:57:49 天涯孤狼x 阅读数：602  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/The_lone_wolfs/article/det...

6年前 (2019-04-28) 25℃

linux

文件锁(lockf)

文件锁(lockf) 2012年07月20日 09:36:05 tonyxf121 阅读数：6902 应用场景 设置了一个每隔一小时执行的cron任务，但发现脚本执行时间大于1小时，所以在下一小时内会有两个该脚本在执行，为了避免这种情况，需要设置文件锁lo...

6年前 (2019-04-28) 25℃

zookeeper

zookeeper递归输出所有节点

zookeeper递归输出所有节点 2018年08月18日 09:55:11 ZJ18712852367 阅读数：730 标签： zookeeper递归 在zk根目录下有a，zookeeper两个节点，在a下有孩子a1. [zk: s201:...

6年前 (2019-04-28) 26℃

zookeeper

Zookeeper命令行操作(常用命令；客户端连接；查看znode路径；创建节点；获取znode数据，查看节点内容，设置节点内容，删除节点；监听znode事件；telnet连接zookeeper)

Zookeeper命令行操作(常用命令；客户端连接；查看znode路径；创建节点；获取znode数据，查看节点内容，设置节点内容，删除节点；监听znode事件；telnet连接zookeeper) 2017年01月05日 01:24:48 toto1297488504 ...

6年前 (2019-04-28) 54℃

docker

给运行中的docker容器添加新的端口

给运行中的docker容器添加新的端口 2018年09月05日 12:39:05 SoLucky2017 阅读数：2754更多 个人分类： linux shel https://blog.csdn.net/zuoshenglo/article/detai...

6年前 (2019-04-28) 28℃

kafka

kafka manager使用教程

kafka manager使用教程 2017年05月04日 10:39:39 LzwGlory 阅读数：23475 1. 前言 市面上主流的kafka监控工具有： Kafka Web Conslole Kafka Manager KafkaOffsetM...

6年前 (2019-04-27) 30℃

架构

java架构

看左侧菜单栏: https://www.cnblogs.com/qdhxhz/p/9521065.html 转载请注明：SuperIT » java架构...

6年前 (2019-04-27) 22℃

hadoop

Hadoop zookeeper高可用HA配置

Hadoop zookeeper高可用HA配置 2018年08月28日 13:21:30 iaMay_____ 阅读数：219 https://blog.csdn.net/iaMay_____/article/details/82145850 ** HDFS...

6年前 (2019-04-27) 31℃

架构

GRPC

gRPC 2018年08月24日 17:44:34 工程师WWW 阅读数：17403 概述 gRPC 一开始由 google 开发，是一款语言中立、平台中立、开源的远程过程调用(RPC)系统。 在 gRPC 里客户端应用可以像调用本地对象一样直接调用另一台...

6年前 (2019-04-27) 26℃

架构

开源巨献：Google最热门60款开源项目

开源巨献：Google最热门60款开源项目 文章整理于互联网。 本文收集了 60款 Google 开源的项目，排名顺序按照 Github ★Star 数量排列。 0、机器学习系统 TensorFlow  ★Star 62533     Tenso...

6年前 (2019-04-26) 22℃

zookeeper

Zookeeper入门看这篇就够了

Zookeeper入门看这篇就够了 2018年07月12日 14:48:06 java_66666 阅读数：15310 Zookeeper是什么 官方文档上这么解释zookeeper，它是一个分布式服务框架，是Apache Hadoop 的一个子项目，它主要...

6年前 (2019-04-26) 30℃

hadoop

hadoop+Zookeeper集群安装配置高可用-HadoopHA

hadoop+Zookeeper集群安装配置高可用-HadoopHA
hadoop+Zookeeper集群安装配置高可用-HadoopHA 2019年01月05日 00:28:30 sxjlinux 阅读数：39  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/sunx...

6年前 (2019-04-26) 40℃

clickhouse

clickhouse安装使用文档

clickhouse安装使用文档 Clickhouse简介 Clickhouse是什么 1. 开源的列存储数据库管理系统 2. 支持线性扩展 3. 简单方便 4. 高可靠性 5. 容错（支持多主机异步复制，可以跨多个数据中心部署。 单个节点或整个数据中心的停机时间不会影响系统的...

6年前 (2019-04-26) 38℃

hadoop

将数据通过shell脚本从hdfs导入到hive中

将数据通过shell脚本从hdfs导入到hive中 漏船载酒 2017-12-01 22:18:18 浏览1422 评论0 编程语言 PostgreSQL hdfs 模块 数据库 shell 脚本 string Hive sqoop 摘要： 在创建项目的时候 需要将数据导...

6年前 (2019-04-26) 39℃

docker

群晖 docker 配置文件

而且下面也给出了具体的操作方法。 通过上一步我们看到群晖下的 Docker 版本是大于 1.10.0 的，按照文档我们可以通过修改daemon配置文件 /etc/docker/daemon.json 来使用加速器。 但是，这里一定要说但是，文档中的方法是对应于在 Ubuntu 等...

6年前 (2019-04-26) 55℃

spark

使用Flume+Kafka+SparkStreaming进行实时日志分析

使用Flume+Kafka+SparkStreaming进行实时日志分析 置顶 2017年05月24日 15:33:29 Trigl 阅读数：41543更多 所属专栏： 从零学习数据挖掘  版权声明：本文为博主原创文章，未经博主允许不得转载。 https:...

6年前 (2019-04-26) 21℃