Airflow On K8S
问题原先公司的Airflow是基于LocalExecutor的一个单机应用, 随着业务发展任务数不断增加, 导致单机性能不断进行升级. 但是数仓任务的特殊性(集中于凌晨开始运行), 白天机器有大量资源被浪费. 基于此将Airflow以容器化的方...
问题原先公司的Airflow是基于LocalExecutor的一个单机应用, 随着业务发展任务数不断增加, 导致单机性能不断进行升级. 但是数仓任务的特殊性(集中于凌晨开始运行), 白天机器有大量资源被浪费. 基于此将Airflow以容器化的方...
由于工作原因接触到了fluentd, 尝试写写分享, 锻炼一下文档能力. 计划写两篇分享: 第一篇介绍fluentd, 第二篇分析fluentd源码. 本文是第一篇: Hello FLuentd!简介fluentd 被设计为通过插件系统来连接...
2018.09.28 - 2018.10.05 新加坡自由行机缘巧合之下,几个游戏中的朋友一起决定去新加坡自由行.D1: 吃 & 睡乘坐的夜间飞机, 一大早就到了新加坡, 由于事先没有和房东房东沟通好, 只能去宾馆开了一个小...
Transform your plain text into static websites and blogs.WelcomeThis site aims to be a comprehensive guide to Jekyll. We’...