MaxCompute读取分析OSS非结构化数据的实践经验总结 (yq.aliyun.com)

【简介】

很多行业的信息系统中,例如金融行业的信息系统,相当多的数据交互工作是通过传统的文本文件进行交互的。此外,很多系统的业务日志和系统日志由于各种原因并没有进入ELK之类的日志分析系统,也是以文本文件的形式存在的。

点击查看全文 >>

@幸运的猫耳 2018-06-20 15:03分享 / 0个评论
赞过的人: 技术头条
要不要再学学下面的文章?
基于 RocketMQ 的同城双活架构在美菜网的挑战与实践 (yq.aliyun.com)
本文整理自李样兵在北京站 RocketMQ meetup分享美菜网使用 RocketMQ 过程中的一些心得和经验,偏重于实践。嘉宾李样兵,现就职于美菜网基础服务平台组,负责 MQ ,配置中心和任务调度等基础组件开发工作。
by @可耐芊小仙女 2019-09-16 16:21 分享 查看详情
阿里巴巴飞天大数据架构体系与Hadoop生态系统 (yq.aliyun.com)
Hadoop是一个开源、高可靠、可扩展的分布式大数据计算框架系统,主要用来解决海量数据的存储、分析、分布式资源调度等。Hadoop最大的优点就是能够提供并行计算,充分利用集群的威力进行高速运算和存储。Hadoop的核心有两大板块:HDFS和MapReduce。
by @可耐芊小仙女 2019-09-12 17:56 分享 查看详情
阿里云MaxCompute 2019-8月刊 (yq.aliyun.com)
MaxCompute存储计费于9月1日进行降价,原5个阶梯价调整为3个阶梯价,同时阶梯单价向下调整。计量计费方式不变,以项目为单位出账,小时级别采集每个项目空间下当前的存储使用情况,计算当天的存储平均值再乘以阶梯单价得出单项目账单。新的阶梯价,依然是存储量越高单价越低。当数据存放集中且数据量也较大的情况下,新价格统计的费用较之原价可下降达30%。
by @可耐芊小仙女 2019-09-12 17:55 分享 查看详情
MaxCompute问答整理之8月 (yq.aliyun.com)
本文是基于对MaxCompute产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文。希望对大家有所帮助。问题一、通过数据源数据增量同步后,如何查看某一条数据具体被同步到MaxCompute中的时间?不支持,查看不了,可以看表元数据的LastModifiedTime时间,但具体某个记录看不到时间。
by @可耐芊小仙女 2019-09-06 16:11 分享 查看详情
Flink 1.9 实战:使用 SQL 读取 Kafka 并写入 MySQL (yq.aliyun.com)
上周六在深圳分享了《Flink SQL 1.9.0 技术内幕和最佳实践》,会后许多小伙伴对最后演示环节的 Demo 代码非常感兴趣,迫不及待地想尝试下,所以写了这篇文章分享下这份代码。希望对于 Flink SQL 的初学者能有所帮助。
by @可耐芊小仙女 2019-09-06 16:07 分享 查看详情
美团张志桐:美团 HTTP 服务治理实践 (zhuanlan.zhihu.com)
美团是 Nginx 的老用户,从创业初期就使用 Nginx,直到 2013 年迁到了阿里的 Tengine,再到今年三四月份,全站服务迁到了 OpenResty 上。
by @又拍云 2019-09-05 14:21 分享 查看详情
基于宜搭的《T恤尺码收集》应用搭建最佳实践 (developer.aliyun.com)
宜搭平台的命名取适宜搭建、容易搭建之意。平台集合了页面设计、业务规则定义、数据收集与分析三大核心能力,用户通过简单的拖拽、配置,即可完成业务应用的搭建。同时,平台还具备一次搭建双端适配、权限独立设置、定制消息提醒推送及海量信息存储等特性。旨在为广大中小企业提供一套低成本的企业应用搭建解决方案。宜搭平台可支持信息发布、知识管理、Portal整合、数据管理、流程审批、移动办公等各种办公应用场景。具体业务场景如:报名登记、调查问卷、财务管理、人力资源管理、行政管理、资产管理、客户管理、工作流转、任务审批等等。
by @可耐芊小仙女 2019-09-03 16:17 分享 查看详情
数据库顶会VLDB论文解读:阿里巴巴数据库智能参数优化的创新与实践 (yq.aliyun.com)
一年一度的数据库领域顶级会议VLDB 2019于美国当地时间8月26日-8月30日在洛杉矶召开。在本届大会上,阿里云数据库产品团队多篇论文入选Research Track和Industrial Track。本文将对入围Research Track的论文《iBTune: Individualized Buffer Tuning for Largescale Cloud Databases》进行详细解读,以飨读者。
by @可耐芊小仙女 2019-09-02 16:44 分享 查看详情
从入门到实践:创作一个自己的 Helm Chart (yq.aliyun.com)
我们平时在日常生活中会经常在不同的平台上与各种各样的应用打交道,比如从苹果的 App Store 里下载的淘宝、高德、支付宝等应用,或者是在 PC 端安装的 Word、Photoshop、Steam。这些各类平台上的应用程序,对用户而言,大多只需要点击安装就可使用。
by @可耐芊小仙女 2019-09-02 16:41 分享 查看详情
Knative Serving 进阶: Knative Serving SDK 开发实践 (yq.aliyun.com)
通过前面的一系列文章你已经知道如何基于 kubectl 来操作 Knative 的各种资源。但是如果想要在项目中集成 Knative 仅仅使用 kubectl 这种命令的方式是不够的,还需要在代码中基于 Knative Serving SDK 进行集成开发。本篇文章中,阿里云智能事业群技术专家冬岛将从 Knative Serving SDK 入手,介绍如何基于 Knative SDK 进行 serverless 开发。
by @可耐芊小仙女 2019-09-02 16:36 分享 查看详情