登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

最新发布 第23页

SuperIT专业IT技术社区之后端大数据与Devops

hadoop

Hadoop zookeeper高可用HA配置

Hadoop zookeeper高可用HA配置 2018年08月28日 13:21:30 iaMay_____ 阅读数：219 https://blog.csdn.net/iaMay_____/article/details/82145850 ** HDFS...

6年前 (2019-04-27) 31℃

架构

GRPC

gRPC 2018年08月24日 17:44:34 工程师WWW 阅读数：17403 概述 gRPC 一开始由 google 开发，是一款语言中立、平台中立、开源的远程过程调用(RPC)系统。 在 gRPC 里客户端应用可以像调用本地对象一样直接调用另一台...

6年前 (2019-04-27) 26℃

架构

开源巨献：Google最热门60款开源项目

开源巨献：Google最热门60款开源项目 文章整理于互联网。 本文收集了 60款 Google 开源的项目，排名顺序按照 Github ★Star 数量排列。 0、机器学习系统 TensorFlow  ★Star 62533     Tenso...

6年前 (2019-04-26) 22℃

zookeeper

Zookeeper入门看这篇就够了

Zookeeper入门看这篇就够了 2018年07月12日 14:48:06 java_66666 阅读数：15310 Zookeeper是什么 官方文档上这么解释zookeeper，它是一个分布式服务框架，是Apache Hadoop 的一个子项目，它主要...

6年前 (2019-04-26) 30℃

hadoop

hadoop+Zookeeper集群安装配置高可用-HadoopHA

hadoop+Zookeeper集群安装配置高可用-HadoopHA
hadoop+Zookeeper集群安装配置高可用-HadoopHA 2019年01月05日 00:28:30 sxjlinux 阅读数：39  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/sunx...

6年前 (2019-04-26) 40℃

clickhouse

clickhouse安装使用文档

clickhouse安装使用文档 Clickhouse简介 Clickhouse是什么 1. 开源的列存储数据库管理系统 2. 支持线性扩展 3. 简单方便 4. 高可靠性 5. 容错（支持多主机异步复制，可以跨多个数据中心部署。 单个节点或整个数据中心的停机时间不会影响系统的...

6年前 (2019-04-26) 38℃

hadoop

将数据通过shell脚本从hdfs导入到hive中

将数据通过shell脚本从hdfs导入到hive中 漏船载酒 2017-12-01 22:18:18 浏览1422 评论0 编程语言 PostgreSQL hdfs 模块 数据库 shell 脚本 string Hive sqoop 摘要： 在创建项目的时候 需要将数据导...

6年前 (2019-04-26) 39℃

docker

群晖 docker 配置文件

而且下面也给出了具体的操作方法。 通过上一步我们看到群晖下的 Docker 版本是大于 1.10.0 的，按照文档我们可以通过修改daemon配置文件 /etc/docker/daemon.json 来使用加速器。 但是，这里一定要说但是，文档中的方法是对应于在 Ubuntu 等...

6年前 (2019-04-26) 55℃

spark

使用Flume+Kafka+SparkStreaming进行实时日志分析

使用Flume+Kafka+SparkStreaming进行实时日志分析 置顶 2017年05月24日 15:33:29 Trigl 阅读数：41543更多 所属专栏： 从零学习数据挖掘  版权声明：本文为博主原创文章，未经博主允许不得转载。 https:...

6年前 (2019-04-26) 21℃

kafka

zookeeper集群和kafka集群及nginx-kafka整合搭建

zookeeper集群和kafka集群及nginx-kafka整合搭建 2018年09月01日 11:20:57 suveng 阅读数：5708更多 所属专栏： linux之路  版权声明：转载请附带本文链接;个人站点:https://suveng.gi...

6年前 (2019-04-25) 26℃

Logstash

Kafka、Logstash、Nginx日志收集入门

Kafka、Logstash、Nginx日志收集入门 作者：Zephery 个人网址：http://www.wenzhihuai.com 本文为作者原创，转载请注明出处：https://www.cnblogs.com/w1570631036/p/8283440.html ...

6年前 (2019-04-25) 26℃

hive

导入数据到hive表中的6种方式

数据导入六种方式 1、加载本地文件到hive表 语法 2、加载hdfs文件到hive中 3、加载数据覆盖表中已有的数据 4、创建表时通过select加载 create table if not exists default.dept_cats as select * ...

6年前 (2019-04-23) 30℃

php

PHP高效导出Excel(CSV)

CSV，是Comma Separated Value（逗号分隔值）的英文缩写，通常都是纯文本文件。 如果你导出的Excel没有什么高级用法的话，只是做导出数据用那么建议使用本方法,要比PHPexcel要高效的多。 二十万数据导出大概需要2到3秒   /** * 导出...

6年前 (2019-04-23) 32℃

未分类

VIM中如何进行查找和替换

VIM中如何进行查找和替换 2017年06月15日 15:43:00 rickzzz16 阅读数：29191 一、 字符串的查找 1. vim 中用 / 和 ? 来查找字符串，两者的区别是： /string 会高亮显示光标后匹配的第一个字符串，回车后光标移...

6年前 (2019-04-23) 28℃

java

Java在PDF中添加水印（文本/图片水印）

Java在PDF中添加水印（文本/图片水印） 2019.03.26 16:52 204浏览 水印是一种十分常用的防伪手段，常用于各种文档、资料等。常见的水印，包括文字类型的水印、图片或logo类型的水印。以下Java示例，将分别使用insertTextWate...

6年前 (2019-04-22) 28℃

java

Java实现pdf文件添加水印，铺满全页。

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/duan1309/article/details/81232300 因项目需要将word文件（.doc,.docx,.rtf）转换成pdf文件并添加水印，铺满全页。 现就将为pdf文...

6年前 (2019-04-22) 32℃

php

PHP利用多进程处理任务

PHP利用多进程处理任务   PHP多进程一般应用在PHP_CLI命令行中执行php脚本，不要在web访问时使用。  　　多进程处理分解任务一般要比单进程更快。 php查看是否安装多进程模块： php -m | grep pcntl （pcntl是pr...

6年前 (2019-04-22) 25℃

未分类

hdfs shell的基本操作以及hdfsWeb查看文件

https://www.cnblogs.com/gulang-jx/p/8568439.html 在安装好hadoop集群并成功的启动了hdfs之后，我们就可以利用hdfs对文件进行操作了，一下是对文件的一些基本操作 hdfs基本操作 1、查询命令 hadoop dfs -ls ...

6年前 (2019-04-21) 27℃

hadoop

hadoop3.0伪分布式集群搭建

hadoop3.0伪分布式集群搭建  大数据  2018-08-21  203 搭建环境：CentOS7+hadoop3.0.3+jdk8 前提准备 安装配置jdk 配置静态ip地址 修改主机名 配置主机名和ip地址映射 关闭防火墙，设置开机不自启动 注：以上操作...

6年前 (2019-04-21) 24℃

hadoop

hadoop3.0全分布式集群搭建

hadoop3.0全分布式集群搭建  大数据  2018-08-21  676 hadoop3.0的全分布式搭建折腾了好久，因为网上基本上都是2.x的搭建教程，期间有好几个坑比较难弄，不过最后还是都解决了，下面简要记录笔者的搭建过程，以及遇到的坑。 搭建环境：Cen...

6年前 (2019-04-21) 23℃

docker

用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker

用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker
用Docker在一台笔记本电脑上搭建一个具有10个节点7种角色的Hadoop集群（上）-快速上手Docker 如果想在一台电脑上搭建一个多节点的Hadoop集群，传统的方式是使用多个虚拟机。但这种方式占用的资源比较多，一台笔记本能同时运行的虚拟机的数量是很有限的。这个时候我...

6年前 (2019-04-20) 29℃

docker

Docker镜像的导入导出

Docker镜像的导入导出 本文介绍Docker镜像的导入导出，用于迁移、备份、升级等场景，准备环境如下： CentOS 7.0 Docker 1.18 导入导出命令介绍 涉及的命令有export、import、save、load save 命令 docker save [opt...

6年前 (2019-04-19) 25℃

未分类

docker升级

docker cp 1.8+才能用,直接下载1.9.1版本的docker替换。 wget https://get.docker.com/builds/Linux/x86_64/docker-1.9.1 chmod +x docker-1.9.1 sudo mv docker-1...

6年前 (2019-04-19) 23℃

大数据

用Ambari一键部署大数据平台

安装前准备 先明确几个概念： 1. Ambari只能安装Hortonworks Data Platform，即Hortonworks的开源Hadoop，不支持Apach的Hadoop平台； 2. 对于已经安装了Apach Hadoop或者其他Hadoop平台的，不能使用Ambar...

6年前 (2019-04-15) 22℃