今天在做一个小项目，引入 PageHelper 时踩了一个坑，记录一下。 解决方案参考：SpringBoot+MyBatis使用pagehelper分页插件及其注意事项（含解决分页不生效问题） 环境： SpringBoot 3.2.0 JDK 17 Postgresql 15 PageHelper Read More
乌烟瘴气的垃圾csdn赚得盆满钵满， 干净整洁的博客园却在苦苦硬撑， 令人感叹。 之前曾听到一个词叫“审丑”， 物欲横流的世界， 比的就是谁更丑，更会炒作，更没有下限。 Read More
在 VMware Fusion 中安装了 Debian12，设置静态 IP 后 ping 不通外部网络： /etc/network/interfaces 配置 ``` # This file describes the network interfaces available on your sys Read More
## 现象 今天提交 Spark 任务到 Yarn 集群，但是任务状态一直是 Accepted: ``` 23/08/25 14:59:55 INFO Client: Application report for application_1692971614101_0018 (state: ACCE Read More
正在学习《Spark快速大数据分析》第七章-在集群上运行Spark，写了一个单词数量统计的Spark程序提及到Yarn，但是状态一直是Accepted，等待运行。 1、排查了Yarn资源调度器配置，配置的是公平配置，确认无问题 ```xml yarn.scheduler.fair.allocatio Read More
Maven打包Scala项目找不到主类，参考 [https://blog.csdn.net/weixin_41684423/article/details/115695713](https://blog.csdn.net/weixin_41684423/article/details/1156957 Read More
最近在学习spark，上周将spark集群搭建起来了，今天在idea中创建了一个测试程序读取hive库中的数据，程序很简单，但是踩到一些坑，卡了四五个小时，做个记录。 搭建Spark集群比较简单： 1、安装scala，scala版本要和spark使用的scala版本一致（因为这个问题卡了五六个小时） Read More
昨天晚上装了sqoop准备将数据从pg库导入Hive库备用，写了个sqoop脚本，运行脚本本后从yarn ui上看任务状态一直 Accepted，卡了三四个小时，最后发现是 yarn-site.xml 配置问题，给的资源太少，无法运行任务。 在 yarn-site.xml 中添加下面的内容： ``` Read More
这两天做了一个SpringCloud小demo学习大数据，第一次接触到RocketMQ，在腾讯云服务器哈上安装的时候遇到几个问题，卡了好久，分享一下。 问题1: sudo ./bin/mqnamesrv启动注册中心，报错找不到 JAVA_HOME，需要修改文件： bin/runserver.sh 和 Read More
最近因为学习消息队列和大数据的原因，搭建了一个很简单的springcloud测试项目。分了用户、商品、订单、库存等几个模块，整个项目只涉及到10张表左右，a56爆大奖在线娱乐模块中只有简单的几个增删改查，为了不在各个模块中重复写数据库相关以及实体类的代码，于是就想着将数据库操作以及实体类抽到一个独立公共模块中。想法 Read More