Spark踩坑vlog-推测执行spark.speculatio踩坑背景踩坑原因解决原因教训
……继续阅读 »
作者 | 小盖
7 月 21 日,字节跳动正式在 GitHub 开源了他们的 Flutter 应用内调试工具 UME。UME 工具的目的是在脱离 Flutter IDE 与 DevTools 的情况下,为开发者提供应用内的调试能力。
在字节跳动,UME 内部版已打磨了近一年时间,服务了近二十个 App,众多插件功能广受开发者好评。本次发布的开源版 UME……继续阅读 »
Kafka+Spark Streaming如何保证exactly once语义
……继续阅读 »
Pulsar 是云原生的分布式消息流平台,源于 Yahoo!,支持 Yahoo! 应用,服务 140 万个 topic,日处理超过 1000 亿条消息。2016 年 Yahoo! 开源 Pulsar 并将其捐赠给 Apache 软件基金会,2018 年 Pulsar 成为 Apache 软件基金会的顶级项目。
……继续阅读 »
【疯狂造轮子-iOS】JSON转Model系列之一
【疯狂造轮子-iOS】JSON转Model系列之一
桑果
2016-03-31
原文
【疯狂造轮子-iOS】JSON转Model系列之……继续阅读 »
【疯狂造轮子-iOS】JSON转Model系列之二
【疯狂造轮子-iOS】JSON转Model系列之二
桑果
2016-04-07
原文
【疯狂造轮子-iOS】JSON转Model系列之……继续阅读 »
iOS可视化动态绘制连通图
iOS可视化动态绘制连通图
青玉伏案
2016-12-29
原文
上篇博客《iOS可视化动态绘制八种排序过程》可视化了一下一些排序的过程,本篇博客就来聊聊图……继续阅读 »
数仓治理的老大难,通常是跟着业务需求快跑,要不是数据零散在各个团队,或者是大家的研发规范有不同,作为一项通过维度模型来约束规范的工种来讲,“模型”的治理难度,大于“架构”。
……继续阅读 »
Python中的多进程与多线程(一)
Python中的多进程与多线程(一)
Nisir
2017-01-07
原文
一、背景
最近在Azkaban的测试工作中,需要在测试环境下模拟线上的调度场景进行稳定性测试。故而重操python旧业,通过pyt……继续阅读 »
提效 7 倍, %%sitename%% %%title%% %%primary_category%% %%sep%% 在网易的深度实践及改进(转载)本文基于 Apahce Spark 3.1.1 版本,讲述 AQE 自适应查询优化的原理,以及网易数帆在 AQE 实践中遇到的痛点和做出的思考。
……继续阅读 »