摘要：
mysql> SELECT a.user, @i:=@i+1 as id FROM user a,(SELECT @i:=0) b; + + +| user | id |+ + +| hive | 1 || root | 2 || mysql.infoschema | 3 || mysql.sess 阅读全文
posted @ 2021-07-06 14:22 打杂滴 阅读(612) 评论(0) 推荐(0) 编辑
2021年7月6日
2021年7月1日
摘要：
import org.apache.spark.graphx._import org.apache.spark.rdd.RDDval vertexArray = Array( (1L, ("Alice", 28)), (2L, ("Bob", 27)), (3L, ("Charlie", 65)), 阅读全文
posted @ 2021-07-01 15:13 打杂滴 阅读(164) 评论(0) 推荐(0) 编辑
2021年5月24日
摘要：
1.新建Maven工程 2.输入groupid,artfactid 3. Maven里面已经配置了java文件夹与test文件夹 4.在main文件夹下创建scala文件夹， 并将scala文件夹标记为sources root 5.file==>project structure==>librari 阅读全文
posted @ 2021-05-24 11:18 打杂滴 阅读(615) 评论(0) 推荐(0) 编辑
2021年4月29日
摘要：
下载 wget https://artifacts.elastic.co/downloads/kibana/kibana-7.12.1-linux-x86_64.tar.gz 解压 tar -zxvf kibana-7.12.1-linux-x86_64.tar.gz -C /opt/module/ 阅读全文
posted @ 2021-04-29 18:02 打杂滴 阅读(60) 评论(0) 推荐(0) 编辑
2021年4月27日
摘要：
下载 wget https://mirrors.bfsu.edu.cn/apache/spark/spark-3.1.1/spark-3.1.1-bin-hadoop2.7.tgz 解压 tar -vxf spark-3.1.1-bin-hadoop2.7.tgz -C /opt/module/ 配 阅读全文
posted @ 2021-04-27 14:44 打杂滴 阅读(1569) 评论(0) 推荐(0) 编辑
2021年4月26日
摘要：
备份数据库 [datalink@slave4 mysqlbak]$ mysqldump -uhive -ppassword testdb>/home/datalink/mysqlbak/testdb.sqlmysqldump: [Warning] Using a password on the co 阅读全文
posted @ 2021-04-26 15:49 打杂滴 阅读(51) 评论(0) 推荐(0) 编辑
2021年4月21日
摘要：
1.将hive目录下面的jdbc的jar包 复制这个jar文件到Kettle的lib目录下E:\kettle7.0\data-integration\lib [datalink@slave3 jdbc]$ sz hive-jdbc-3.1.2-standalone.jar rz zmodem trl 阅读全文
posted @ 2021-04-21 17:08 打杂滴 阅读(2141) 评论(0) 推荐(0) 编辑
2021年4月19日
摘要：
Error: Java heap space 解决 set io.sort.mb=10; 默认值是100，问题轻松解决 阅读全文
posted @ 2021-04-19 13:54 打杂滴 阅读(64) 评论(0) 推荐(0) 编辑
2021年3月17日
摘要：
4台虚拟机 192.168.130.62 192.168.130.63 192.168.130.64 192.168.130.65 1.和hbase公用服务器， jdk,zookeeper已配置好，不需要重新配置 [datalink@slave1 kafka_2.11-0.9.0.0]$ java 阅读全文
posted @ 2021-03-17 17:44 打杂滴 阅读(434) 评论(0) 推荐(0) 编辑
2021年3月16日
摘要：
Superset是由Python语言编写的Web应用，要求Python3.6的环境 conda是一个开源的包、环境管理器，可以用于在同一个机器上安装不同Python版本的软件包及其依赖，并能够在不同的Python环境之间切换，Anaconda包括Conda、Python以及一大堆安装好的工具包，比如 阅读全文
posted @ 2021-03-16 15:19 打杂滴 阅读(760) 评论(0) 推荐(0) 编辑