`
sunbin
  • 浏览: 341635 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论
文章列表
1、复制jar包到flume/lib下   commons-configuration-1.6.jar commons-io-2.4.jar hadoop-annotations-2.7.6.jar hadoop-auth-2.7.6.jar hadoop-common-2.7.6.jar hadoop-hdfs-2.7.6.jar htrace-core-3.1.0-incubation.jar  2、创建flume-hdfs.conf文件     vim    flume-hdfs.conf #name the components on thi ...
1、搭建kafka,参考 Kafka集群部署 2、flume版本apache-flume-1.6.0-bin.tar.gz 3、Flume安装流程:      首先解压apache-flume-1.6.0-bin.tar.gz       修改配置文件        cp conf/flume-env.sh.template flume-env.sh vi flume-env.sh 修改配置项目 export JAVA_HOME=/usr/java/jdk1.7.0_67  3、连接kafka,新建配置文件xxx.conf  (文件名随便,但启动时需要)     a1 ...

Kafka集群部署

  集群规划:   Zookeeper集群共三台服务器,分别为:sto1、sto2、sto3。   Kafka集群共三台服务器,分别为:sto1、sto2、sto3。   1、Zookeeper集群准备   kafka是一个分布式消息队列,需要依赖ZooKeeper,请先安装好zk集群。   Zookeeper集群安装步骤略。    2、安装Kafka   下载压缩包(官网地址:http://kafka.apache.org/downloads.html)  解压:   tar zxvf kafka_2.10-0.9.0.1.tgz -C /opt/sgb ...
drpc是storm的远程函数接口,实现方式有两种 此处代码仅适用集群运行,本地调试请自行修改local启动方式 1、服务器端代码,服务器代码打jar包后在服务器端运行,请注意“统一写法” 方法1 package bhz.drcp; import backtype.storm.Config; import backtype.storm.StormSubmitter; import backtype.storm.drpc.DRPCSpout; import backtype.storm.drpc.ReturnResults; import backtype.storm.top ...

storm集群安装

  环境要求 centos 6.8/JDK 1.6+/java -version/Python 2.6.6+/python -V/ZooKeeper3.4.5+/apache-storm-0.9.4 环境变量   export STORM_HOME=/opt/sgb/apache-storm-0.9.4 export ZOOKEEPER_HOME=/opt/sgb/zookeeper-3.4.6 export JAVA_HOME=/usr/java/jdk1.7.0_67 export PATH=$PATH:$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin ...

hbase安装

hbase运行在hadoop基础上。 我的环境变量   export JAVA_HOME=/usr/local/runtime/jdk export HADOOP_PREFIX=/usr/local/runtime/hadoop export HIVE_HOME=/usr/local/runtime/hive export HBASE_HOME=/usr/local/runtime/hbase export ZOOKEEPER_HOME=/usr/local/runtime/zookeeper export JRE_HOME=/usr/local/runtime/jdk/jre ...

hive环境搭建

export JAVA_HOME=/usr/local/runtime/jdk export HADOOP_PREFIX=/usr/local/runtime/hadoop export HIVE_HOME=/usr/local/runtime/hive export HBASE_HOME=/usr/local/runtime/hbase export ZOOKEEPER_HOME=/usr/local/runtime/zookeeper export JRE_HOME=/usr/local/runtime/jdk/jre export CLASSPATH=$CLASSPATH: ...
一、服务器访问环境 hadoop服务器4台主机,均使用ubuntu18-live-server版本, 本地localhost免密登录 ssh localhost步骤 1、ssh-keygen -t rsa 免密码登录 使用下面的命令即可免密码登录localhost   2、ssh-copy-id localhost 但是到了这里执行ssh localhost的时候依然提示我输入密码。我仔细分析了原因,一般来讲失败的原因有两个。   服务器之间免密登录 1、根据路径复制公钥到免密登录的主机   scp id_rsa.pub 账号@hostip:/rootpath/.s ...
这几天在学习K8S的安装和使用,在此记录一下 此文参考了视频教程: 两小时Kubernetes(K8S)从懵圈到熟练——大型分布式集群环境捷径部署搭建_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili镜像+讲义+安装包,链接:https://pan.baidu.com/s/1qO697oBuR7TwQ2J8boI3EA 提取码:4mvs 1 天入门 Kubernetes/K8S_哔哩哔哩 (゜-゜)つロ 干杯~-bilibilidocker+k8s+jenkins 视频与课件 https://pan.baidu.com/s/1ZUpqnkwp4B4fDExcVLADrg 报 ...
1. 安装 Node.js BrowserSync是基于Node.js的, 是一个Node模块, 如果您想要快速使用它,也许您需要先安装一下Node.js 安装适用于Mac OS,Windows和Linux。 2. 安装 BrowserSync 您可以选择从Node.js的包管理(NPM)库中 安装BrowserSync。打开一个终端窗口,运行以下命令: npm install -g browser-sync 您告诉包管理器下载BrowserSync文件,并在全局下安装它们,您可以在所有项目(任何目录)中使用。 当然您也可以结合gulpjs或gruntjs构建工具来使用 ...
  1、pom.xml <!-- https://mvnrepository.com/artifact/com.github.binarywang/weixin-java-pay --> <dependency> <groupId>com.github.binarywang</groupId> <artifactId>weixin-java-pay</artifactId> <version>3.3.0</version> </depe ...
     本文选择的是在ubuntu 与nginx 允许php 的例子。系统配置为: Ubuntu 16.04 PHP7.2 PHP7.2-fpm nginx    1. 为了快速部署,使用了最快捷的方法安装nginx和php: apt-get $ sudo apt-get install nginx $ sudo apt-get install mysql $ sudo apt-get install php7.2 php7.2-fpm php7.2-mysql     2. 安装完毕后,需要对Nginx的配置文件进行修改:
  1、下载 https://dev.mysql.com/downloads/mysql/ 2、解压到固定位置,如D:\MySQL\mysql-5.7.24 3、添加my.ini文件 跟bin同级 [mysql] # 设置mysql客户端默认字符集 default-character-set=utf8 [mysqld] #设置3306端口
1、拉取 Solr 镜像; docker pull solr:7.4.0     2、启动 Solr 容器,即可访问 http://ip:8983/ ; docker run --name taotao-solr -d -p 8983:8983 -t solr:7.4.0    3、新建 SolrCore,名称为 collection1; docker exec -it --user=solr taotao-solr bin/solr create_core -c collection1    4、为了方便后续修改配置,将容器 solr 文件拷贝本地 /usr/local/ ...
 https://blog.csdn.net/bskfnvjtlyzmv867/article/details/81623416 此链接较本文更简单 一:在docker 中安装Solr       docker下载solr镜像   docker pull solr         2.启动solr镜像   docker run --name mysolr -d -p 18983:8983 -t solr          1. run 运行容器      2. -d 代表后台运行      3. -p 容器端口和宿机端口映射      4. --name 容 ...
Global site tag (gtag.js) - Google Analytics