没有合适的资源?快使用搜索试试~ 我知道了~
首页MySql准实时同步数据到HDFS(单机版).docx
MySql准实时同步数据到HDFS(单机版).docx
需积分: 21 423 浏览量
更新于2023-05-26
评论
收藏 1.97MB DOCX 举报
MySql准实时同步数据到HDFS(单机版),为了更好的存储表里的大量数据,研究的单机版MySql准实时同步数据到HDFS
资源详情
资源评论
资源推荐

MySql 准实时同步数据到 HDFS(单机版)
一、方案
按照这个顺序新搭建一套环境。
主要参考地址(感谢):
https://blog.csdn.net/hyb1234hi/article/details/80424971
二、环境
:
下载地址: !""# # !"$"%&&'! !$()(*
各个版本的 + 镜像文件说明:
$()(*,-&$"! ...............标准安装版(推荐)
$()(*/01-&$"! ........完整版,集成所有软件(以用来补充系统的软件或
者填充本地镜像)
$()(*023/-&$"! .........23/ 桌面版
$()(*0/-&$"! .........../ 桌面版
$()(*-&$"! ...........精简版,自带的软件最少
$()(*3+!-&$"! ........网络安装版(从网络安装或者救援系统)
456:756$-$-(*""18
96:#8 6'":":;""18
下载地址(包含 5<! 所用到的所有组件,根据需要下载):
链接:!";5"# !-=>52$6?@+067;A
提取码:8%7
!::"("%((为了跟我这边生产一致)
下载地址:!5 5!"!"# #0!#

:-"%"&
下载地址:
源码地址:!1"# !"1
B# 官网(下面三个都是在官网找的下载地址):!"#" 1
:%"-'%":"&
下载地址:! ";"5"##6%":"&6)%"-'%":"&"18
:-"C"&:
下载地址:
! ";"5"##D-"C"&#D-"C"&;""18
5 :'"'"&
下载地址:
! ";"5"##5 # 5 '"'"&5 '"'"&""18
三、各组件安装
安装之前先配个映射关系吧:
不建议用默认的 # !,可能会与本机 5 ! 的 # ! 冲突,
,..# !!
添加映射关系:
上面两个是自带的,下面这个是新加的,.对应 名称 ,这个名称自己随便起个就行。然

后在修改本机 5 ! 的 !! 文件,也配置个同样名称和 的映射关系:
路径:EF5 !E!'%E50!E#E !!
新加一行:
-&"'C"%:-"-%' 就是我安装 5 服务器的 ,这样后面直接访问 !;-%' 就行了。
1、jdk 安装
a)、上传
由于安装 和 需要 756,所以首先给 756 安装上:
在! #! G756 目录下上传 756$ 的包(路径根据自己喜好设置;如果跟本文一致,对
应的路径没有则创建)
使用 8 命令,弹窗.选择
756$-$-(*""18
b)、解压
使用解压命令:
.80<.756$-$-(*""18
c)、配置
解压完成配置环境变量:
0.# H
添加下面几行:
.4B,B)/I! #! G756756-"$"&)-$-

.4J/)/IK4B,B)/7
.BLB?IK4B,B)/;K4J/)/;KBLB?
.LB?IK4B,B)/;4J/)/;KLB?
使配置文件生效:
! #.# H
d)、验证
验证安装是否成功:
70.0!
2、zookeeper 安装
由于 6 需要用到 8 6,所以先把 8 6 安装上。
a)、上传
在! #! G8 6 目录下上传 #8 6'":":;""18 的包(路径根据自
己喜好设置;如果跟本文一致,对应的路径没有则创建)
使用 8 命令,弹窗.选择
#8 6'":":;""18
b)、解压
使用解压命令:
.80<.#8 6'":":;""18
c)、配置
解压完成配置环境变量:
#5.到 # < 目录,然后使用 # 命令 # 一份配置文件,86 默认加载 8 "#<1 名称的配置文件:

修改下配置文件里的这个路径:
d)、启动
"860"!.!.""# <8 "#<1
使用 86"! 登录:
创建一个 6 目录,给下面 6 连接时使用:
使用 ! 命令查看是否创建成功:
小技巧:所有不清楚命令的,各种输入 来看看命令帮助:
剩余31页未读,继续阅读

















安全验证
文档复制为VIP权益,开通VIP直接复制

评论0