相关分享
1
喜欢
te
tech.meituan.com
/
2024-03-21 22:53
美团大规模KV存储挑战与架构实践
KV 存储作为美团一项重要的在线存储服务，承载了在线服务每天万亿级的请求量，并且保持着 99.995% 的服务可用性。在 DataFunSummit 2023 数据基础架构峰会上，我们分享了《美团大规模 KV 存储挑战与架构实践》，本文为演讲内容的整理。文章主要分为四个部分：第一部分介绍了美团 KV 存储发展历程；第二部分分享了内存 KV Squirrel 挑战和架构实践；第三部分阐述了持久化 KV Cellar 挑战和架构实践；最后一部分介绍了未来的发展规划。希望这些内容对大家有所帮助或启发。
无图
1
喜欢
co
colobu.com
/
2024-03-12 22:46
十亿行的挑战
国外的程序员休完他们的假期之后在玩什么？他们在玩十亿行的代码挑战。
工程师贡纳尔·莫林在元旦发起一个挑战(1BRC),挑战从 1 月 1 日持续到 1 月 31 日。
如果你决定接受它，你的任务看似简单： 编写一个 Java 程序，用于从文本文件中检索温度测量值并计算每个气象站的最小、平均值和最高温度。只有一点需要注意：文件有 1,000,000,000 行！（1 billion， 10亿行)。
无图
1
喜欢
ix
ixyzero.com
/
2023-10-30 23:38
Hadoop安全学习
Hadoop集群基本都放在内网，有一层网络隔离做保护，懂这个且想利用和能利用这个做坏事的人比较少，一般不容易出问题；对于没放在内网或者没有做隔离的那些公司或团队，安全意识和能力肯定是有较大欠缺，数据泄露的渠道和方式很多，不缺这一个，都不需要用这种方式来搞数据；使用第三方云服务的公司或团队一般不需要操心底层服务的安全问题，只需要关注上层应用的账号安全和使用安全等问题就行。
无图
1
喜欢
te
tech.meituan.com
/
2022-09-03 23:25
Replication（上）：常见复制模型&分布式系统挑战
分布式系统设计是一项十分复杂且具有挑战性的事情。其中，数据复制与一致性更是其中十分重要的一环。数据复制领域概念庞杂、理论性强，如果对应的算法没有理论验证大概率会出错。如果在设计过程中，不了解对应理论所解决的问题以及不同理论之间的联系，势必无法设计出一个合理的分布式系统。
无图
1
喜欢
in
insights.thoughtworks.cn
/
2022-08-30 16:45
如何面对数据项目开发和管理中的挑战
近几年，随着数据和人工智能越来越受关注，数据与人工智能项目（统称数据项目）也遍地开花，和传统应用类项目相比，数据项目有其自身的特点和挑战，本文就来盘一下这些挑战。
无图
1
喜欢
in
insights.thoughtworks.cn
/
2021-10-20 16:03
MPP架构与Hadoop架构是一回事吗？
现在当人们说到MPP架构时，它们实际上指代的是“分布式数据库”，而Hadoop架构指的则是以Hadoop项目为基础的一系列分布式计算和存储框架。不过由于MPP的字面意思，现实中还是经常有人纠结两者到底有什么联系和区别，两者到底是不是同一个层面的概念。
无图
1
喜欢
te
tech.meituan.com
/
2021-05-27 07:56
美团命名服务的挑战与演进
命名服务主要解决微服务拆分后带来的服务发现、路由隔离等需求，是服务治理的基石。
美团命名服务（以下简称MNS）作为服务治理体系OCTO的核心模块，目前承载美团上万项服务，日均调用达到万亿级别。为了更好地支撑美团各项飞速发展的业务，MNS开始从1.0向2.0演进。
本文将围绕本次演进的初衷、实现方案以及落地的效果等方面进行展开，同时本文还介绍了命名服务作为一个技术中台组件，对业务的重要价值以及推动业务升级的一些成果。希望本文对大家能够有所启发。
无图
1
喜欢
mp
mp.weixin.qq.com
/
2021-03-06 18:08
华为提出十大数学挑战！解出一个就是年薪百万！
后香农时代的通信技术会如何发展？又有哪些值得业界关注的数学问题呢？上月底，华为董事、战略研究院院长徐文伟抛出了后香农时代信息产业发展面临的了十大挑战数学问题。
无图
1
喜欢
in
insights.thoughtworks.cn
/
2020-12-07 11:02
机器学习平台带给QA的挑战
机器学习平台是一款集数据集、特征工程、模型训练、评估、预测、发布于一体的全流程开发和部署的工作平台。其数据量大、数据多样性、支持算法种类多，加上算法模型结果不确定、集成复杂等等特点；这会给QA的工作带来怎样挑战、以及如何克服，本文一一揭晓。
无图
0
喜欢
yq
yqh.aliyun.com
/
2020-12-04 16:28
在云之上的猿辅导，撑住500万中小学生的挑战
阿里云的解决方案既保证了猿辅导互动直播课的实时直播和交互互动的网络稳定和计算需求，又借助其全域覆盖、多层渗透的特点，支持猿辅导在全国各线城市的课程服务。不仅如此，阿里云提供的云基础设施和服务所提供的网络质量、硬件质量、服务质量非常优质，通过阿里巴巴最佳实践的加持，最大限度保证了在线课堂连续的沉浸式体验。
无图