海豚调度 - 博客园_a56爆大奖在线娱乐

2022年6月

Apache Dolphinscheduler3.0.0-beta-1 版本发布，新增FlinkSQL、Zeppelin任务类型

摘要：导读：近日，Apache Dolphin Scheduler 迎来了 3.0.0-beta-1 版本的正式发布。新版本主要针对 3.0.0-alpha 进行了代码和文档的修复，并引入了部分的功能，如支持 FlinkSQL 任务类型，新增 Zeppelin 任务类型，新增 Kubernetes nam 阅读全文

posted @ 2022-06-15 15:54 海豚调度阅读(248) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler&TiDB联合Meetup | 聚焦开源生态发展下的应用开发能力

摘要：在软件开发领域有一个流行的原则：Don’t Repeat Yourself(DRY)，翻译过来就是：不要重复造轮子。而开源项目最基本的目的，其实就是为了不让大家重复造轮子。尤其是在大数据这样一个高速发展的领域，现在各类企业都有使用大量的开源软件，当发现开源项目不能满足场景业务需求的时候，越来越多的阅读全文

posted @ 2022-06-06 14:10 海豚调度阅读(104) 评论(0) 推荐(0) 编辑

2022年5月

达人专栏 | 还不会用 Apache Dolphinscheduler？大佬用时一个月写出的最全入门教程【三】

摘要：作者 | 欧阳涛招联金融大数据开发工程师 02 Master启动流程 2.10 WorkFlowExecutorThread 里执行 Submit StandByTask 方法 SubmitStandByTask干了5件事情：从ReadyToSubmitTaskQueue中取出TaskInsta 阅读全文

posted @ 2022-05-25 17:00 海豚调度阅读(402) 评论(0) 推荐(0) 编辑

海豚调度5月Meetup：6个月重构大数据平台，帮你避开调度升级改造/集群迁移踩过的坑

摘要：当今许多企业都有着技术架构的DataOps程度不够、二次开发成本高、迁移成本高、集群部署混乱等情况，团队在技术选型之后发现并不适合自己的需求，但是迁移成本和难度又比较大，甚至前团队还留下了不少坑，企业自有的开发能力又比较有限，导致后面的小伙伴上手难度高体验差。俗话说“工具选得好，下班回家早；调度用阅读全文

posted @ 2022-05-25 10:29 海豚调度阅读(161) 评论(0) 推荐(0) 编辑

【达人专栏】还不会用Apache Dolphinscheduler吗，大佬用时一个月写出的最全入门教学【二】

摘要： 02 Master启动流程 2.1 MasterServer的启动在正式开始前，笔者想先鼓励一下大家。a56爆大奖在线娱乐们知道启动Master其实就是启动MasterServer，本质上与其他SpringBoot项目相似，即启动里面的main函数。但想要开始实操前，肯定有不少的人，尤其是初学者会突然发现这里面有十阅读全文

posted @ 2022-05-19 17:34 海豚调度阅读(220) 评论(0) 推荐(0) 编辑

金融任务实例实时、离线跑批Apache DolphinScheduler在新网银行的三大场景与五大优化

摘要：在新网银行，每天都有大量的任务实例产生，其中实时任务占据多数。为了更好地处理任务实例，新网银行在综合考虑之后，选择使用 Apache DolphinScheduler 来完成这项挑战。如今，新网银行多个项目已经完成了实时与准实时的跑批，指标管理系统的离线跑批，应用于离线数据开发和任务调度、准实时数据阅读全文

posted @ 2022-05-17 14:18 海豚调度阅读(347) 评论(0) 推荐(0) 编辑

又是一年开源之夏，八大课题项目奖金等你来拿！

摘要：又是一年【开源之夏】季。今年，Apache DolphinScheduler 同样参与到了【开源之夏】活动中来，希望有更多学生群体关注到 Apache DolphinScheduler，并踊跃参与项目共建拿奖金！ No.1 活动介绍开源之夏是由“开源软件供应链点亮计划”发起并长期支持的一项暑期开源阅读全文

posted @ 2022-05-13 17:06 海豚调度阅读(143) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler 2.X保姆级源码解析，中国移动工程师揭秘服务调度启动全流程

摘要： 2022年1月，科学技术部高新技术司副司长梅建平在“第六届中国新金融高峰论坛”上a56爆大奖在线娱乐，当前数据量已经大大超过了处理能力的上限，若信息技术仍然是渐进式发展，则数据处理能力的提升将远远落后于指数级增长的数据量。因此，在一段时期内，数据处理能力与效率的提升仍将是大数据发展要面对的技术难点。随着5G、物联阅读全文

posted @ 2022-05-11 15:39 海豚调度阅读(393) 评论(0) 推荐(0) 编辑

中国联通改造 Apache DolphinScheduler 资源中心，实现计费环境跨集群调用与数据脚本一站式访问

摘要：截止2022年，中国联通用户规模达到4.6亿，占据了全中国人口的30%，随着5G的推广普及，运营商IT系统普遍面临着海量用户、海量话单、多样化业务、组网模式等一系列变革的冲击。当前，联通每天处理话单量超过400亿条。在这样的体量基础上，提高服务水平，为客户提供更有针对性的服务，也成为了联通品牌追求阅读全文

posted @ 2022-05-07 15:04 海豚调度阅读(430) 评论(0) 推荐(0) 编辑

2022年4月

倒计时0日！Apache DolphineScheduler4月 Meetup 大佬手把手教你大数据开发，离线调度

摘要：随着互联网技术和信息技术的发展，信息的数据化产生了许多无法用常规工具量化、处理和捕捉的数字信息。面对多元的数据类型，海量的信息价值，如何有效地对大数据进行挖掘分析，对大数据工作流进行调度，是保障企业大数据任务高效运行的基础。有了数据平台和数据仓库，选择什么系统来调度和管理数仓任务就显得尤为重要。A 阅读全文

posted @ 2022-04-30 08:03 海豚调度阅读(136) 评论(0) 推荐(0) 编辑

公告