数据仓库项目中的数据建模和ETL日志体系 (insights.thoughtworks.cn)

【简介】

数据仓库项目跨功能需求开发不够完善,导致的各种问题,就我个人经验来说,主要体现在数据建模不够标准和ETL日志体系不够完善两个方面,本文会详细介绍一下,如何从跨功能需求的角度,构建标准的数据建模和完善的ETL日志体系。

点击查看全文 >>

@Thoughtworks 2021-01-08 10:35分享 / 0个评论
赞过的人: IT技术博客大学习
要不要再学学下面的文章?
类型流建模和软件开发标准化 (insights.thoughtworks.cn)
类型流是针对大团队、细分工组织设计的方法论。 高级程序员团队画类型流图建模,利用工具生成代码骨架,初级程序员填空。高级程序员团队仍然是一个敏捷团队,而初级程序员只有基本的编程要求。甚至单元测试能力也不要求。
by @Thoughtworks 2021-11-26 15:48 分享 查看详情
ARouter 在多 module 项目中实战 (mp.weixin.qq.com)
本文仅作案例演示,方便学习和掌握基础知识,不进行源码级别的探究。下面先明确一下能实现的功能和用到的技术点以及环境。
by @code小生 2021-10-31 12:36 分享 查看详情
Flutter 创建项目初体验 (mp.weixin.qq.com)
检查 flutter 环境是 flutter doctor, 如下图, VS Code 不没有装或者不用的, 可以不需要管
by @code小生 2021-10-31 12:36 分享 查看详情
性能优化:如何更快地接收数据 (zhuanlan.zhihu.com)
从网卡到应用程序,数据包会经过一系列组件,其中驱动做了什么?内核做了什么?为了优化,我们又能做些什么?整个过程中涉及到诸多细微可调的软硬件参数,并且相互影响,不存在一劳永逸的“银弹”。本文中又拍云系统开发高级工程师杨鹏将结合自己的的实践经验,介绍在深入理解底层机制的基础上如何做出“场景化”的最优配置。
by @又拍云 2021-10-28 11:22 分享 查看详情
分享一个超牛逼的Java文件在线预览项目 (mp.weixin.qq.com)
基于 OpenOffice 服务将文件 (.doc、.docx、.xls、.ppt) 转化为pdf、html格式,然后直接在浏览器渲染输出。
by @code小生 2021-10-24 13:55 分享 查看详情
CTO写低级Bug,致公司70GB数据泄露! (mp.weixin.qq.com)
据悉,一位未透露姓名的黑客利用 SQL 注入漏洞入侵 Gab 后台,并从数据库中窃取了约 70 GB 数据提供给了爆料组织 Distributed Denial of Secrets(简称 DDOSecrets)。这些数据包括了 7 万多条信息、4000 多万条帖子,以及哈希密码、明文密码、用户个人资料等。
by @code小生 2021-10-24 13:55 分享 查看详情
程序员必备的10大GitHub仓库 (mp.weixin.qq.com)
GitHub 不仅是维护代码的好工具,而且是学习和成长的好工具。身为一个软件开发者,我一直在寻找有用的 GitHub 仓库,从中学习和发现灵感。以下是我最喜欢的 10 个仓库。
by @code小生 2021-10-07 13:35 分享 查看详情
浅谈数据流水线 (insights.thoughtworks.cn)
数据流水线通常指从若干数据源中迁移数据,将迁移的数据进行复杂的数据处理之后,并加载到目标数据系统中的一系列流程,且数据的价值正是在每一步的流转中逐步产生的。数据流水线通常也是实现机器学习模型、数据分析、业务报表等技术的基础。
by @Thoughtworks 2021-09-22 11:54 分享 查看详情
Java实现pdf和Excel的生成及数据动态插入、导出 (mp.weixin.qq.com)
Excel、PDF的导出、导入是我们工作中经常遇到的一个问题,刚好今天公司业务遇到了这个问题,顺便记个笔记以防下次遇到相同的问题而束手无策。
by @code小生 2021-09-05 13:27 分享 查看详情
数据智能架构的度量标准 (insights.thoughtworks.cn)
数据智能是一个领域,技术架构是实施方案,我们很难从好或者不好的维度去衡量一个架构,更多会从当下是否具有合理性,以及在可见的未来是否具有合理性的视角,来看待当前架构是不是一个最佳的选择。因此没有坏的架构,只有是否是当前上下文中最合理的架构。
by @Thoughtworks 2021-08-04 15:04 分享 查看详情