大数据 – SuperIT-Page 5

ElasticSearch 2.4 版本系列

http://www.cnblogs.com/ljhdo/p/4959412.html 转载请注明：SuperIT » ElasticSearch 2.4 版本系列...

5年前 (2019-05-06) 41℃

elasticsearch启动错误整理

elasticsearch启动错误整理一、elasticsearch错误复现（一）、环境配置环境　　OS：CentOS 7.4 64bit 　　elasticsearch版本：5.4.1 　　hostname：elk-1-1 　　ip：10.18.43.1...

5年前 (2019-05-05) 33℃

elasticsearch max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

Ubuntu elasticsearch max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144] 2017年03月23日 19:35:20 衣...

5年前 (2019-05-05) 105℃

Elasticsearch集群部署

Elasticsearch集群部署 Elastic 的底层是开源库 Lucene。但是，你没法直接用 Lucene，必须自己写代码去调用它的接口。Elastic 是 Lucene 的封装，提供了 REST API 的操作接口，开箱即用。Elastic 的底层是开源库。但...

5年前 (2019-05-05) 28℃

Elasticsearch6.2集群搭建

5年前 (2019-05-05) 51℃

Docker + Elasticsearch 集群环境搭建

Docker + Elasticsearch 集群环境搭建 happyJared发表于happyJared订阅 295 在这篇文章中：运行配置测试无论是安装包形式还是基于Docker，搭建Elasticsearch集群环境还是较为简单的，实操的时候还遇到...

5年前 (2019-05-05) 22℃

docker简易搭建ElasticSearch集群

docker简易搭建ElasticSearch集群 2018年10月23日 09:17:11 belonghuang157405 阅读数：4731 写在前面：为什么要用ElasticSearch？我们的应用经常需要添加检索功能，开源的Elastic Sea...

5年前 (2019-05-05) 28℃

Kafka实战－Flume到Kafka

1.概述前面给大家介绍了整个Kafka项目的开发流程，今天给大家分享Kafka如何获取数据源，即Kafka生产数据。下面是今天要分享的目录：数据来源 Flume到Kafka 数据源加载预览下面开始今天的分享内容。 2.数据来源 Kafka生产的数据，是由Flume的...

5年前 (2019-05-05) 28℃

Flume NG高可用集群搭建

Flume NG高可用集群搭建 2018年09月10日 23:15:44 jinYwuM 阅读数：145 软件版本： CentOS 6.7 hadoop-2.7.4 apache-flume-1.6.0 一、Flume NG简述 Flume 是 Cl...

5年前 (2019-05-05) 32℃

基于Spark2.x新闻网大数据实时分析可视化系统项目

5年前 (2019-05-03) 27℃

基于Nginx1.9+LuaJIT+Kafka的点播监控系统实战（上海卓越智慧树网点播监控系统）

基于Nginx1.9+LuaJIT+Kafka的点播监控系统实战（上海卓越智慧树网点播监控系统） 2016年04月16日 16:06:45 火龙果研究院阅读数：4347 最近在做点监控系统，先后采用了两套方案：方案一：Nginx记录日志 –&...

5年前 (2019-05-03) 26℃

Elasticsearch 学习之携程机票ElasticSearch集群运维驯服记(强烈推荐)

Elasticsearch 学习之携程机票ElasticSearch集群运维驯服记(强烈推荐) 转自： https://mp.weixin.qq.com/s/wmSTyIGCVhItVNPHcH7nsA 一、整体架构为什么采用ES作为搜索引擎呢？在做任何事情的时候，不要一...

5年前 (2019-05-03) 28℃

Kafka+Storm+HDFS 整合示例

Kafka+Storm+HDFS 整合示例消息通过各种方式进入到Kafka消息中间件，比如可以通过使用Flume来收集日志数据，然后在Kafka中路由暂存，然后再由实时计算程序Storm做实时分析，最后将结果保存在HDFS中，这时我们就需要将在Storm的Spout中读取Ka...

5年前 (2019-05-03) 26℃

基于 Flume+Kafka+Spark Streaming 实现实时监控输出日志的报警系统

基于 Flume+Kafka+Spark Streaming 实现实时监控输出日志的报警系统 2018年08月01日 13:39:10 linge1995 阅读数：1758 运用场景：我们机器上每天或者定期都要跑很多任务，很多时候任务出现错误不能及时发现...

5年前 (2019-05-03) 40℃

Storm+HBASE+MySQL 实时读取Kafka信息计算存储

5年前 (2019-05-03) 56℃

storm消费kafka实现实时计算

5年前 (2019-05-03) 25℃

storm从kafka消息队列读取数据进行读写操作

5年前 (2019-05-03) 42℃

使用flume-ng+kafka+storm+mysql 搭建实时日志处理平台

使用flume-ng+kafka+storm+mysql 搭建实时日志处理平台 2018年02月07日 15:25:45 农村外出务工男阅读数：655 https://blog.csdn.net/charry_a/article/details/79279077 ...

5年前 (2019-05-03) 30℃

Kafka+Storm+Elasticsearch整合实时数据分析实践

5年前 (2019-05-03) 26℃

Flume+Elasticsearch搭建实时日志分析系统

5年前 (2019-05-03) 24℃

flume+kafka+storm整合实现实时计算小案例

flume+kafka+storm整合实现实时计算小案例 2018年05月23日 10:39:21 little_strong13 阅读数：622 我们做数据分析的时候常常会遇到这样两个场景，一个是统计历史数据，这个就是要分析历史保存的日志。我们会使...

5年前 (2019-05-03) 45℃

基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台

基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台 2017年01月19日 16:51:50 cowboy_行者无疆阅读数：6648 基于Flume+Kafka+ Elasticsearch+Storm的海量日志...

5年前 (2019-05-03) 27℃

使用nginx lua实现网站统计中的数据收集

使用nginx lua实现网站统计中的数据收集 2016年07月05日 15:42:11 Linux运维阅读数：2688 导读网站数据统计分析工具是各网站站长和运营人员经常使用的一种工具，常用的有谷歌分析、百度统计和腾讯分析等等。所有这些统计...

5年前 (2019-05-03) 24℃

nginx安装ngx_kafka_module插件直接对接kafka集群

安装环境： centos 6.5 64位所需软件版本： jdk1.8.0_171 nginx-1.12.2.tar.gz kafka_2.11-0.10.2.1.tgz zookeeper-3.4.5.tar.gz scala-2.11....

5年前 (2019-05-03) 56℃

nginx+lua+strom+kafka实现热点数据实时展示,实时统计热点数据展示出来

假设最近一段时间内有10万个请求过来，其中1万次请求访问商品1，2万次请求访问商品2，3万次请求访问商品3，其他商品被访问次数均匀。请实时统计热点数据展示出来。说下主要的解决步骤： 1.分发层nginx将所有的请求hash分发到对应的应用层nginx，防止第一次请求落到了应用层...

5年前 (2019-05-03) 36℃

nginx+lua+kafka实现日志统一收集汇总

nginx+lua+kafka实现日志统一收集汇总 2016年08月18日 12:18:50 freeCalluo 阅读数：14691更多个人分类：服务器运维 [转载]原文出处:http://hot66hot.iteye.com/blog/22919...

5年前 (2019-05-03) 28℃

flume的配置详解

Flume： ===================== Flume是一种分布式的、可靠的、可用的服务，可以有效地收集、聚合和移动大量的日志数据。它有一个基于流数据的简单而灵活的体系结构。它具有健壮性和容错能力，具有可调的可靠性机制和许多故障转移和恢复机制。它使用一个简单的...

5年前 (2019-05-03) 25℃

大数据架构入门总结（Flume + Kafka + ZooKeeper + Spark Streaming + Drools + ELK）

大数据架构入门总结（Flume + Kafka + ZooKeeper + Spark Streaming + Drools + ELK） 2017年04月25日 19:05:34 神经质的盛宴阅读数：1608 这两天学习了Flume + Kafka +...

5年前 (2019-05-03) 31℃

基于Spark的电影推荐系统（包含爬虫项目、web网站、后台管理系统以及spark推荐系统）

基于Spark的电影推荐系统（包含爬虫项目、web网站、后台管理系统以及spark推荐系统）置顶 2018年04月19日 16:06:31 xl.zhang 阅读数：39786 标签：sparkssm项目爬虫python更多个人分类：【项目开发】所属专栏：大...

5年前 (2019-05-03) 25℃

Sqoop学习之路（一）

Sqoop学习之路（一）讨论QQ：1586558083 目录一、概述二、工作机制三、安装 1、前提概述 2、软件下载 3、安装步骤四、Sqoop的基本命令基本操作示例五、Sqoop的数据导入 1、从RDBMS导入到HDFS中 2、把My...

5年前 (2019-05-03) 46℃

SuperIT 专业IT技术社区之后端大数据与Devops

分类：大数据

ElasticSearch 2.4 版本系列

elasticsearch启动错误整理

elasticsearch max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

Elasticsearch集群部署

Elasticsearch6.2集群搭建

Docker + Elasticsearch 集群环境搭建

docker简易搭建ElasticSearch集群

Kafka实战－Flume到Kafka

Flume NG高可用集群搭建

基于Spark2.x新闻网大数据实时分析可视化系统项目

基于Nginx1.9+LuaJIT+Kafka的点播监控系统实战（上海卓越智慧树网点播监控系统）

Elasticsearch 学习之携程机票ElasticSearch集群运维驯服记(强烈推荐)

Kafka+Storm+HDFS 整合示例

基于 Flume+Kafka+Spark Streaming 实现实时监控输出日志的报警系统

Storm+HBASE+MySQL 实时读取Kafka信息计算存储

storm消费kafka实现实时计算

storm从kafka消息队列读取数据进行读写操作

使用flume-ng+kafka+storm+mysql 搭建实时日志处理平台

Kafka+Storm+Elasticsearch整合实时数据分析实践

Flume+Elasticsearch搭建实时日志分析系统

flume+kafka+storm整合实现实时计算小案例

基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台

使用nginx lua实现网站统计中的数据收集

nginx安装ngx_kafka_module插件直接对接kafka集群

nginx+lua+strom+kafka实现热点数据实时展示,实时统计热点数据展示出来

nginx+lua+kafka实现日志统一收集汇总

flume的配置详解

大数据架构入门总结（Flume + Kafka + ZooKeeper + Spark Streaming + Drools + ELK）

基于Spark的电影推荐系统（包含爬虫项目、web网站、后台管理系统以及spark推荐系统）

Sqoop学习之路（一）