登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

最新发布 第23页

SuperIT专业IT技术社区之后端大数据与Devops

Flume

flume 启动，停止，重启脚本

flume 启动，停止，重启脚本   #!/bin/bash #echo "begin start flume..." #flume的安装根目录（根据自己情况，修改为自己的安装目录） path=/sysware/apache-flume-1.8.0-bin ...

6年前 (2019-04-30) 21℃

hadoop

HDFS基本文件常用命令

为了每次执行Hadoop的时候，不必须要前者加上hadoop的安装的绝对路径，要做的事情就是将其安装路径加入到PATH中，这样就可以直接执行hadoop命令。 如下： vim /etc/profile中加入一句 export HADOOP_INSTALL=/usr/local/h...

6年前 (2019-04-30) 21℃

Flume

Flume + kafka + HDFS构建日志采集系统

Flume + kafka + HDFS构建日志采集系统 2016年11月25日 22:13:56 iteye_19607 阅读数：741更多 个人分类： 架构 https://blog.csdn.net/iteye_19607/article/details/82...

6年前 (2019-04-30) 23℃

Flume

Flume采集到HDFS

Flume采集到HDFS 原创 Hadoop 作者：13545163656 时间：2018-08-09 22:30:02  544  0 一、需求： 采集指定文件的内容到HDFS 技术选型：exec – memory – hdfs 1 2 ...

6年前 (2019-04-29) 23℃

kafka

Kafka学习笔记（二）：Partition分发策略

Kafka学习笔记（二）：Partition分发策略 kafka版本0.8.2.1 Java客户端版本0.9.0.0   为了更好的实现负载均衡和消息的顺序性，Kafka Producer可以通过分发策略发送给指定的Partition。Kafka保证在partit...

6年前 (2019-04-28) 38℃

kafka

Kafka学习笔记（一）：概念介绍

Kafka学习笔记（一）：概念介绍 Kafka是一个开源的，分布式的，高吞吐量的消息系统。随着Kafka的版本迭代，日趋成熟。大家对它的使用也逐步从日志系统衍生到其他关键业务领域。特别是其超高吞吐量的特性，在互联网领域，使用越来越广泛，生态系统也越来的完善。同时，其设计思路...

6年前 (2019-04-28) 27℃

未分类

Java多线程18：线程池

使用线程池与不使用线程池的差别 先来看一下使用线程池与不使用线程池的差别，第一段代码是使用线程池的： public static void main(String[] args) { long startTime = System.currentTimeMill...

6年前 (2019-04-28) 31℃

kafka

kafka在zookeeper上的节点信息和查看方式

kafka在zookeeper上的节点信息和查看方式 2018年06月03日 00:37:31 MakeGreatEffort 阅读数：4042 kafka在Zookeeper上的节点如下图： 该图片盗自大牛的博客http://blog.csdn.net...

6年前 (2019-04-28) 22℃

shell

java守护进程启动和关闭脚本

java守护进程启动和关闭脚本 2017年12月14日 19:08:48 褚金辉 阅读数：2355 # 程序名称 PROJECT_NAME=route #程序路径 APP_HOME=$(dirname $(pwd))/$PROJECT_NAME ...

6年前 (2019-04-28) 25℃

linux

chattr +i锁定不能删除、添加 chattr –i解锁

chattr +i锁定不能删除、添加 chattr –i解锁 参数 A：即Atime，告诉系统不要修改对这个文件的最后访问时间。 S：即Sync，一旦应用程序对这个文件执行了写操作，使系统立刻把修改的结果写到磁盘。 a：即Append Only，系统只允许在这个文件之后追加数据...

6年前 (2019-04-28) 24℃

linux

对文件锁定、解锁及查看文件锁定状态

对文件锁定、解锁及查看文件锁定状态 2018年03月13日 17:57:49 天涯孤狼x 阅读数：602  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/The_lone_wolfs/article/det...

6年前 (2019-04-28) 25℃

linux

文件锁(lockf)

文件锁(lockf) 2012年07月20日 09:36:05 tonyxf121 阅读数：6902 应用场景 设置了一个每隔一小时执行的cron任务，但发现脚本执行时间大于1小时，所以在下一小时内会有两个该脚本在执行，为了避免这种情况，需要设置文件锁lo...

6年前 (2019-04-28) 25℃

zookeeper

zookeeper递归输出所有节点

zookeeper递归输出所有节点 2018年08月18日 09:55:11 ZJ18712852367 阅读数：730 标签： zookeeper递归 在zk根目录下有a，zookeeper两个节点，在a下有孩子a1. [zk: s201:...

6年前 (2019-04-28) 26℃

zookeeper

Zookeeper命令行操作(常用命令；客户端连接；查看znode路径；创建节点；获取znode数据，查看节点内容，设置节点内容，删除节点；监听znode事件；telnet连接zookeeper)

Zookeeper命令行操作(常用命令；客户端连接；查看znode路径；创建节点；获取znode数据，查看节点内容，设置节点内容，删除节点；监听znode事件；telnet连接zookeeper) 2017年01月05日 01:24:48 toto1297488504 ...

6年前 (2019-04-28) 54℃

docker

给运行中的docker容器添加新的端口

给运行中的docker容器添加新的端口 2018年09月05日 12:39:05 SoLucky2017 阅读数：2754更多 个人分类： linux shel https://blog.csdn.net/zuoshenglo/article/detai...

6年前 (2019-04-28) 28℃

kafka

kafka manager使用教程

kafka manager使用教程 2017年05月04日 10:39:39 LzwGlory 阅读数：23475 1. 前言 市面上主流的kafka监控工具有： Kafka Web Conslole Kafka Manager KafkaOffsetM...

6年前 (2019-04-27) 30℃

架构

java架构

看左侧菜单栏: https://www.cnblogs.com/qdhxhz/p/9521065.html 转载请注明：SuperIT » java架构...

6年前 (2019-04-27) 22℃

hadoop

Hadoop zookeeper高可用HA配置

Hadoop zookeeper高可用HA配置 2018年08月28日 13:21:30 iaMay_____ 阅读数：219 https://blog.csdn.net/iaMay_____/article/details/82145850 ** HDFS...

6年前 (2019-04-27) 31℃

架构

GRPC

gRPC 2018年08月24日 17:44:34 工程师WWW 阅读数：17403 概述 gRPC 一开始由 google 开发，是一款语言中立、平台中立、开源的远程过程调用(RPC)系统。 在 gRPC 里客户端应用可以像调用本地对象一样直接调用另一台...

6年前 (2019-04-27) 26℃

架构

开源巨献：Google最热门60款开源项目

开源巨献：Google最热门60款开源项目 文章整理于互联网。 本文收集了 60款 Google 开源的项目，排名顺序按照 Github ★Star 数量排列。 0、机器学习系统 TensorFlow  ★Star 62533     Tenso...

6年前 (2019-04-26) 22℃

zookeeper

Zookeeper入门看这篇就够了

Zookeeper入门看这篇就够了 2018年07月12日 14:48:06 java_66666 阅读数：15310 Zookeeper是什么 官方文档上这么解释zookeeper，它是一个分布式服务框架，是Apache Hadoop 的一个子项目，它主要...

6年前 (2019-04-26) 30℃

hadoop

hadoop+Zookeeper集群安装配置高可用-HadoopHA

hadoop+Zookeeper集群安装配置高可用-HadoopHA
hadoop+Zookeeper集群安装配置高可用-HadoopHA 2019年01月05日 00:28:30 sxjlinux 阅读数：39  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/sunx...

6年前 (2019-04-26) 40℃

clickhouse

clickhouse安装使用文档

clickhouse安装使用文档 Clickhouse简介 Clickhouse是什么 1. 开源的列存储数据库管理系统 2. 支持线性扩展 3. 简单方便 4. 高可靠性 5. 容错（支持多主机异步复制，可以跨多个数据中心部署。 单个节点或整个数据中心的停机时间不会影响系统的...

6年前 (2019-04-26) 38℃

hadoop

将数据通过shell脚本从hdfs导入到hive中

将数据通过shell脚本从hdfs导入到hive中 漏船载酒 2017-12-01 22:18:18 浏览1422 评论0 编程语言 PostgreSQL hdfs 模块 数据库 shell 脚本 string Hive sqoop 摘要： 在创建项目的时候 需要将数据导...

6年前 (2019-04-26) 39℃