登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

 分类：大数据

hadoop+Zookeeper集群安装配置高可用-HadoopHA

hadoop+Zookeeper集群安装配置高可用-HadoopHA
hadoop+Zookeeper集群安装配置高可用-HadoopHA 2019年01月05日 00:28:30 sxjlinux 阅读数：39  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/sunx...

6年前 (2019-04-26) 40℃

clickhouse安装使用文档

clickhouse安装使用文档 Clickhouse简介 Clickhouse是什么 1. 开源的列存储数据库管理系统 2. 支持线性扩展 3. 简单方便 4. 高可靠性 5. 容错（支持多主机异步复制，可以跨多个数据中心部署。 单个节点或整个数据中心的停机时间不会影响系统的...

6年前 (2019-04-26) 38℃

将数据通过shell脚本从hdfs导入到hive中

将数据通过shell脚本从hdfs导入到hive中 漏船载酒 2017-12-01 22:18:18 浏览1422 评论0 编程语言 PostgreSQL hdfs 模块 数据库 shell 脚本 string Hive sqoop 摘要： 在创建项目的时候 需要将数据导...

6年前 (2019-04-26) 39℃

使用Flume+Kafka+SparkStreaming进行实时日志分析

使用Flume+Kafka+SparkStreaming进行实时日志分析 置顶 2017年05月24日 15:33:29 Trigl 阅读数：41543更多 所属专栏： 从零学习数据挖掘  版权声明：本文为博主原创文章，未经博主允许不得转载。 https:...

6年前 (2019-04-26) 21℃

zookeeper集群和kafka集群及nginx-kafka整合搭建

zookeeper集群和kafka集群及nginx-kafka整合搭建 2018年09月01日 11:20:57 suveng 阅读数：5708更多 所属专栏： linux之路  版权声明：转载请附带本文链接;个人站点:https://suveng.gi...

6年前 (2019-04-25) 26℃

Kafka、Logstash、Nginx日志收集入门

Kafka、Logstash、Nginx日志收集入门 作者：Zephery 个人网址：http://www.wenzhihuai.com 本文为作者原创，转载请注明出处：https://www.cnblogs.com/w1570631036/p/8283440.html ...

6年前 (2019-04-25) 26℃

导入数据到hive表中的6种方式

数据导入六种方式 1、加载本地文件到hive表 语法 2、加载hdfs文件到hive中 3、加载数据覆盖表中已有的数据 4、创建表时通过select加载 create table if not exists default.dept_cats as select * ...

6年前 (2019-04-23) 30℃

hadoop3.0伪分布式集群搭建

hadoop3.0伪分布式集群搭建  大数据  2018-08-21  203 搭建环境：CentOS7+hadoop3.0.3+jdk8 前提准备 安装配置jdk 配置静态ip地址 修改主机名 配置主机名和ip地址映射 关闭防火墙，设置开机不自启动 注：以上操作...

6年前 (2019-04-21) 24℃

hadoop3.0全分布式集群搭建

hadoop3.0全分布式集群搭建  大数据  2018-08-21  676 hadoop3.0的全分布式搭建折腾了好久，因为网上基本上都是2.x的搭建教程，期间有好几个坑比较难弄，不过最后还是都解决了，下面简要记录笔者的搭建过程，以及遇到的坑。 搭建环境：Cen...

6年前 (2019-04-21) 23℃

用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker

用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker
用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker 如果想在一台电脑上搭建一个多节点的Hadoop集群，传统的方式是使用多个虚拟机。但这种方式占用的资源比较多，一台笔记本能同时运行的虚拟机的数量是很有限的。这个时候我...

6年前 (2019-04-20) 29℃

用Ambari一键部署大数据平台

安装前准备 先明确几个概念： 1. Ambari只能安装Hortonworks Data Platform，即Hortonworks的开源Hadoop，不支持Apach的Hadoop平台； 2. 对于已经安装了Apach Hadoop或者其他Hadoop平台的，不能使用Ambar...

6年前 (2019-04-15) 22℃

大数据平台SkyNet任务调度监控系统

大数据平台任务调度与监控系统 2018年07月12日 23:13:06 灵夕丨月下灵 阅读数：4008  版权声明：未经本人同意，禁止抄袭 https://blog.csdn.net/xiaolong_4_2/article/details/81023908...

6年前 (2019-04-15) 25℃

大数据平台docker一键搭建

大数据平台docker一键搭建 2018年12月07日 17:20:31 dounine 阅读数：503  版权声明：多一份转载,多一份环保 https://blog.csdn.net/dounine/article/details/84881092 想不...

6年前 (2019-04-15) 29℃

HDFS、MR、Kafka、Storm、Spark、Hbase、Redis原理图

HDFS、MR、Kafka、Storm、Spark、Hbase、Redis原理图 1、大数据分析阶段图 2、大数据分析平台总体架构 3、大数据分析平台技术栈 4、HDFS分布式存储原理图 5、MR计算原理图 6、Kafka分布式消息队列原理图 7、Storm分布式流...

6年前 (2019-04-15) 73℃

网站数据统计分析之一：日志收集原理及其实现

网站数据统计分析之一：日志收集原理及其实现 2016年06月01日 11:33:31 guohecang 阅读数：10042 链接 网站数据统计分析工具是网站站长和运营人员经常使用的一种工具，比较常用的有谷歌分析、百度统计 和 腾讯分析等等。所有这些统计分析工具的第一步都是网站访...

6年前 (2019-04-15) 28℃

ClickHouse Table Engines

ClickHouse Table Engines https://blog.csdn.net/Zonzereal/article/details/83750483 2018年11月05日 15:30:51 Zzreal 阅读数：1668 Table engines table e...

6年前 (2019-04-09) 25℃

ClickHouse 使用

ClickHouse 使用 https://blog.csdn.net/zdy0_2004/article/details/80220461 2018年05月07日 01:07:00 zdy0_2004 阅读数：5788 转自：https://www.zouyesheng.com...

6年前 (2019-04-09) 24℃

centos7搭建EFK日志分析系统

centos7搭建EFK日志分析系统 96 Raye 0.2 2018.09.17 09:35 字数 1901 阅读 3658评论 0喜欢 15 前言 EFK可能都不熟悉，实际上EFK是大名鼎鼎的日志系统ELK的一个变种 在没有分布式日志的时候，每次出问题了需要查询日志的时候...

6年前 (2019-04-03) 25℃

大数据实战之Logstash采集->Kafka->ElasticSearch检索

大数据实战之Logstash采集->Kafka->ElasticSearch检索 2018年06月22日 22:44:49 Supernova-X 阅读数：1584 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/xin93/a...

6年前 (2019-03-28) 31℃

sphinx应用项目实践踩坑记

sphinx应用项目实践踩坑记 2018年09月15日 13:08:51 Winner-雪花飘 阅读数：126 版权声明： https://blog.csdn.net/weixin_42233723/article/details/82713060 之前写的关于sphinx环...

6年前 (2019-03-27) 20℃

sphinx容器使用小记

sphinx容器使用小记 2018年06月24日 15:30:40 Winner-雪花飘 阅读数：184 版权声明： https://blog.csdn.net/weixin_42233723/article/details/80791613 镜像拉取 docker pull...

6年前 (2019-03-27) 28℃

在Docker中运行Sphinx基础

在Docker中运行Sphinx基础 2014年08月15日 19:38:48 zhuhuiblog 阅读数：1315 该文原文为Sphinx in Docker. The basics.，发表于http://sphinxsearch.com。 留心一下互联网，你会发现一些关...

6年前 (2019-03-27) 29℃

零门槛！使用Docker快速部署ES集群

零门槛！使用Docker快速部署ES集群 张戈 原文链接 发表于张戈的专栏订阅 2K 在这篇文章中： 一、整体架构 本文涉及的 IP 的角色属性清单： 二、Docker 资源 1、Docker 私有仓库搭建（针对内网环境） 2、所有服务器节点都安装要 docker，并开启私有仓库...

6年前 (2019-03-27) 25℃

kafka常用运维命令

kafka常用运维命令 2015年11月03日 16:06:54 huanggang028 阅读数：14119更多 个人分类： kafka 列出所有topic： bin/kafka-topics.sh –zookeeper localhost:2181 ̵...

6年前 (2019-03-26) 29℃

kafka一些基本操作

kafka一些基本操作 2016年05月31日 15:27:57 yilan1993 阅读数：1967 查看某个topic各个分区的位置： bin/kafka-topics.sh --topic test1349 --describe --zookeeper ip:2181 ...

6年前 (2019-03-26) 21℃

java写kafka的生产者与消费者代码

java写kafka的生产者与消费者代码 2017年08月15日 18:37:22 nannan1232 阅读数：2360 1、环境说明： OS:redhat6.5 ,cloudera-mamager5.7 ，zookeeper-3.4.5 ,kafka-0.9.0 2、kaf...

6年前 (2019-03-26) 25℃