Apache Flink 进阶（五）：数据类型和序列化--技术头条 -- 微博大V帮你宣传技术博文开发者头条码农头条

Apache Flink 进阶（五）：数据类型和序列化 (yq.aliyun.com)

【简介】

本文根据 Apache Flink 系列直播整理而成，由 Apache Flink Contributor、360 数据开发高级工程师马庆祥老师分享。文章主要从如何为Flink量身定制的序列化框架、Flink序列化的最佳实践、Flink通信层的序列化以及问答环节四部分分享。

点击查看原文 >>

由 @可耐芊小仙女 2019-11-01 15:58 / 0个评论

赞过的人： @IT技术博客大学习

分布式锁之 Apache Curator InterProcessReadWriteLock (www.diguage.com)

在上一篇文章分布式锁之 Apache Curator InterProcessMutex 中介绍了基于 ZooKeeper 实现的互斥锁。除此之外，还可以实现读写锁。这篇文章就来简要介绍一下 InterProcessReadWriteLock 的实现原理。

by @技术头条 2023-07-04 23:26 查看详情

分布式锁之 Apache Curator InterProcessMutex (www.diguage.com)

对分布式锁耳熟能详。不过，一直关注的是基于 Redis 实现的分布式锁。知道 ZooKeeper 也可以实现分布式锁。但是，原来的想法是把 Redis 那个思路切换到 ZooKeeper 上来实现就好。今天了解到 Apache Curator 内置了分布式锁的实现： InterProcessMutex。查看了一下源码实现，发现跟基于 Redis 实现的源码相比，在思路上还是有很大不同的。所以，特别作文记录一下。

by @技术头条 2023-07-04 23:25 查看详情

系统运维 | 如何在 RHEL 9/8 上设置高可用性 Apache（HTTP）集群 (linux.cn)

在本文中，我们将介绍如何在 RHEL 9/8 上使用 Pacemaker 设置两节点高可用性 Apache 集群。

Pacemaker 是适用于类 Linux 操作系统的高可用性集群软件。Pacemaker 被称为“集群资源管理器”，它通过在集群节点之间进行资源故障转移来提供集群资源的最大可用性。Pacemaker 使用 Corosync 进行集群组件之间的心跳和内部通信，Corosync 还负责集群中的投票选举（Quorum）。

by @技术头条 2023-06-24 23:31 查看详情

Apache Doris在美团外卖数仓中的应用实践 (tech.meituan.com)

美团外卖数据仓库技术团队负责支撑日常业务运营及分析师的日常分析，由于外卖业务特点带来的数据生产成本较高和查询效率偏低的问题，他们通过引入Apache Doris引擎优化生产方案，实现了低成本生产与高效查询的平衡。

by @技术头条 2022-12-10 22:32 查看详情

图解 Flink 滚动窗口、会话窗口和滑动窗口 (www.awaimai.com)

Flink 作业中的窗口是指一种对无限数据流设置有限数据集，从而实现了处理无线数据流的机制。

窗口本身只是个划分数据集的依据，它并不存储数据。

当我们需要在时间窗口维度上对数据进行聚合时，窗口是流处理应用中经常需要解决的问题。Flink的窗口算子为我们提供了方便易用的API，我们可以将数据流切分成一个个窗口，对窗口内的数据进行处理。

窗口主要有两种，一种基于时间的时间窗口（TimeWindow），一种基于数量的计数窗口（CountWindow），计数窗口与时间无关，本文主要讨论时间窗口。

by @技术头条 2022-08-19 00:16 查看详情

在 Apache Cassandra 中定义和优化数据分区 (linux.cn)

Apache Cassandra 是一个数据库，但又不是一个简单的数据库；它是一个复制数据库，专为可扩展性、高可用性、低延迟和良好性能而设计调整。Cassandra 可以帮你的数据在区域性中断、硬件故障时，以及很多管理员认为数据量过多的情况下幸免于难。

全面掌握数据分区知识，你就能让 Cassandra 集群实现良好的设计、极高的性能和可扩展性。在本文中，我将探究如何定义分区，Cassandra 如何使用这些分区，以及一些你应该了解的最佳实践方案和已知问题。

by @技术头条 2022-05-23 00:14 查看详情

Redis的8大数据类型，写得非常好！ (mp.weixin.qq.com)

NoSQL 开发中或多或少都会用到，也是面试必问知识点。
最近这几天的面试每一场都问到了，但是感觉回答的并不好，还有很多需要梳理的知识点，这里通过几篇 Redis 笔记整个梳理一遍。

by @code小生 2021-09-26 21:22 查看详情

Flink 在又拍云日志批处理中的实践 (zhuanlan.zhihu.com)

在选用 Flink 前，我们对日志批处理的整个业务需求分为三步：数据源采集、日志处理、结果的保存。我们的日志量在 100G/h，单机服务处理速度慢、扩容不方便，一些相似的需求都是以编码形式完成的。另外，数据处理流程复杂，需要在多个服务间流转，迫切需要一个方案来解决问题……

by @又拍云 2021-02-25 16:19 查看详情

Flink 双流 Join 的3种操作示例 (developer.aliyun.com)

在数据库中的静态表上做 OLAP 分析时，两表 join 是非常常见的操作。同理，在流式处理作业中，有时也需要在两条流上做 join 以获得更丰富的信息。

by @可耐芊小仙女 2020-11-24 15:55 查看详情

快手基于 Apache Flink 的优化实践 (developer.aliyun.com)

本次内容主要分为三部分，首先介绍流式计算的基本概念，然后介绍 Flink 的关键技术，最后讲讲 Flink 在快手生产实践中的一些应用，包括实时指标计算和快速 failover。

by @可耐芊小仙女 2020-11-24 13:31 查看详情