一文读懂hadoop、hbase、hive、spark分布式系统架构--技术头条 -- 微博大V帮你宣传技术博文开发者头条码农头条

一文读懂hadoop、hbase、hive、spark分布式系统架构 (www.shareditor.com)

由 @闯王来了要纳粮 2016-08-20 15:09 / 0个评论

KV 存储作为美团一项重要的在线存储服务，承载了在线服务每天万亿级的请求量，并且保持着 99.995% 的服务可用性。在 DataFunSummit 2023 数据基础架构峰会上，我们分享了《美团大规模 KV 存储挑战与架构实践》，本文为演讲内容的整理。文章主要分为四个部分：第一部分介绍了美团 KV 存储发展历程；第二部分分享了内存 KV Squirrel 挑战和架构实践；第三部分阐述了持久化 KV Cellar 挑战和架构实践；最后一部分介绍了未来的发展规划。希望这些内容对大家有所帮助或启发。

by @技术头条 2024-03-21 22:53 查看详情

Hadoop安全学习 (ixyzero.com)

Hadoop集群基本都放在内网，有一层网络隔离做保护，懂这个且想利用和能利用这个做坏事的人比较少，一般不容易出问题；对于没放在内网或者没有做隔离的那些公司或团队，安全意识和能力肯定是有较大欠缺，数据泄露的渠道和方式很多，不缺这一个，都不需要用这种方式来搞数据；使用第三方云服务的公司或团队一般不需要操心底层服务的安全问题，只需要关注上层应用的账号安全和使用安全等问题就行。

by @技术头条 2023-10-30 23:38 查看详情

Hive SQL中的like和rlike (ixyzero.com)

以前知道SQL中的 like 和 rlike 是有区别的，差别主要在于前者只支持百分号(%)——匹配任意数量的任意字符，和下划线(_)——匹配一个任意字符作为特殊字符，后者支持正则匹配——功能更强大，但速度一般也较慢。所以我一般是简单的、希望速度快些的情况下用like做模糊匹配，其它场景用rlike实现。但是近期在分析日志的时候发现Hive SQL中的 like 和 rlike 除了在功能上有区别之外，过滤生成的结果也有差异，比较奇怪，在此记录一下，方便后面参考。

by @技术头条 2023-10-24 23:50 查看详情

架构设计 the Easy Way (blog.alswl.com)

前几日，我在团队内部举行了一场技术分享，我介绍了关于架构设计的最佳实践。将这些实践凝练成了 20 字口诀：架构看问题、需求看用例、设计看模型、细节看时序。

我将顺口溜转到了 Twitter，不少朋友对这些顺口溜产生了浓厚兴趣，希望深入了解。因此，我将我分享中的观点扩展成了这篇文章。

by @技术头条 2023-07-30 17:40 查看详情

什么是多运行时架构？ (insights.thoughtworks.cn)

随着微服务架构在大规模组织中成熟落地，服务化体系规模的不断扩张也带来了一些典型问题：服务如何有效治理和接入？团队如何高效协作？本文介绍了多运行时架构解决上述问题的思路，并通过几种开源方案探讨了在实现中遇到的挑战，最后提出了对演进的设想及展望。本文介绍了多运行时架构的概念以及一些实现方案，并讨论了目前的实现中存在的限制与挑战，最后设想了一种未来可能的架构形态。

by @Thoughtworks 2023-07-27 12:17 查看详情

云服务架构完全指南 (linux.cn)

经过大约 16 年的演变，云计算已经成为一种几乎所有网民都在使用的技术。它可以作为一种服务，用于满足各类企业和消费者的需求。因此，在云计算中正在使用多种服务架构，旨在根据最新的需求来定制所需技术。本文就如今使用的所有服务架构，提供一份完全指南。

by @技术头条 2023-07-23 12:20 查看详情

美团视觉GPU推理服务部署架构优化实践 (tech.meituan.com)

面对在线推理服务使用的GPU资源不断增加、GPU利用率普遍较低的挑战，美团视觉研发团队决定通过模型结构拆分和微服务化进行优化，他们提出一种通用高效的部署架构，来解决这种常见的性能瓶颈问题。以“图像检测+分类”服务为例，优化后的服务压测性能指标GPU利用率由40%提升至100%，QPS也提升超过3倍。本文将会重点介绍推理服务部署架构优化的工程实践，希望对大家能有所帮助或启发。

by @技术头条 2023-02-12 14:37 查看详情

单体优先的微服务架构 (insights.thoughtworks.cn)

你不应该在新项目之初就采用微服务架构，即使你坚信该应用未来会因业务演进而变得巨大无比。

by @Thoughtworks 2022-12-21 09:56 查看详情

专访企业架构学者Svyatoslav Kotusev (insights.thoughtworks.cn)

在企业架构领域，Svyatoslav Kotusev是一位很特别的国际学者，他多年从事企业架构的研究，不趋同，有着非常鲜明而独到的见解。让我们看看他是如何阐述为什么学、怎么学、如何应用企业架构的，应该会对您有所帮助（或许会改变您的认知）。

by @Thoughtworks 2022-11-29 10:39 查看详情

重新思考 React 项目架构 (teobler.com)

这篇文章想聊聊这四年我对前端架构的认识及思考，这是一个慢慢演进和一步步推翻自己的过程。

by @Teobler 2022-10-17 13:52 查看详情