kafka常用命令
以下是kafka常用命令行总结:
1 | 1、kafka服务启动 |
kafka常用命令
以下是kafka常用命令行总结:
1 | 1、kafka服务启动 |
1 | [hadoop@hadoop01 bin]$ kafka-topics.sh --create --zookeeper hadoop01,hadoop02,hadoop03 --replication-factor 1 --partitions 3 --topic hadoop01 |
要注意source的使用;
在root下使用之后有时需要在hadoop用户下再source一次才可以;
在windows下使用IDEA远程连接linux集群进行mapreduce调试
改用户名,administrator改为hadoop,即改为linux集群的用户名,我的为hadoop
将hadoop.tar.gz解压至windows下,添加系统变量跟环境变量 HADOOP_HOME,添加PATH追加上HADOOP_HOME\bin;HADOOP_HOME\sbin;
ETL工具~Kettle调研 2017.2
Kettle
kettle是其中Pentaho默认的ETL工具,下图为Pentaho的使用情况
厦门大学数据库实验室教程
有几个坑
SparkSQL context 在执行sql语句时,现在使用spark.sql()替换sqlContext.sal()
开源ETL工具(Kettle) V5.1.0 免费Spoon版
http://www.cr173.com/soft/30051.html
ETL工具大全,你了解多少
http://bbs.csdn.net/topics/390349305
Kettle_抽取数据举例
http://blog.csdn.net/huangyanlong/article/details/42264543