先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7
深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年最新大数据全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!
由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新
如果你需要这些资料,可以添加V获取:vip204888 (备注大数据)
正文
https://github.com/alibaba/canal/releases/
环境部署
安装canal-admin
安装 java
yum -y install java
安装canal
将下载好的安装包 解压到/usr/local/下
mkdir /usr/local/canal-admin/
mkdir /usr/local/canal/
tar -xf canal.deployer-1.1.6-SNAPSHOT.tar.gz -C /usr/local/canal/
tar -xf canal.admin-1.1.6-SNAPSHOT.tar.gz -C /usr/local/canal-admin/
配置环境:
cd /usr/local/canal-admin/
vim conf/application.yml
server:
port: 8089 #网页访问端口
spring:
jackson:
date-format: yyyy-MM-dd HH:mm:ss
time-zone: GMT+8
spring.datasource:
address: 127.0.0.1:3306 # 数据库端口
database: canal_manager # canal的数据库
username: root #数据库账号,这个账号必须有增删改查的权限,因为要往里面写数据。
password: 123456 # 数据库密码
driver-class-name: com.mysql.jdbc.Driver
url: jdbc:mysql://${spring.datasource.address}/${spring.datasource.database}?useUnicode=true&characterEncoding=UTF-8&useSSL=false&allowPublicKeyRetrieval=true
hikari:
maximum-pool-size: 30
minimum-idle: 1
# canal 这个类似于 api接口使用的 需要和 canal中的conf/canal.properties 对应上
# canal.properties 中是密文
canal:
adminUser: admin
adminPasswd: admin
:wq (保存退出)
# 将canal\_manager库导入到mysql表中
mysql -uroot -p123456
source /usr/local/canal-admin/conf/canal_manager.sql
导入完成,退出mysql
启动 canal-admin
./bin/startup.sh
tail -f logs/admin.log
访问:http://IP:8089
账号:admin
密码:123456 默认
安装canal
修改配置一:
cd /usr/local/canal
vim conf/canal.properties
#################################################
######### common argument #############
#################################################
# tcp bind ip
canal.ip =
# register ip to zo