虎牙直播张波:掘金Nginx日志 (zhuanlan.zhihu.com)

【简介】

今天主要分享的是“ Nginx 日志”,因为这在虎牙产生过巨大的价值,简单来说,我们最终做到的效果就是每年节省数百上千万的成本。

Nginx 是现在最流行的负载均衡和反向代理服务器之一,仅 Nginx 每天就会产生上百 M 甚至数十 G 的日志文件。但又有多少人关注过它背后的价值呢?

点击查看全文 >>

@又拍云 2019-01-25 11:37分享 / 0个评论
赞过的人: 技术头条 又拍云
要不要再学学下面的文章?
SLS机器学习最佳实战:日志聚类+异常告警 (yq.aliyun.com)
围绕日志,挖掘其中更大价值,一直是我们团队所关注。在原有日志实时查询基础上,今年SLS在DevOps领域完善了如下功能: - 上下文查询 - 实时Tail和智能聚类,以提高问题调查效率 - 提供多种时序数据的异常检测和预测函数,来做更智能的检查和预测 - 数据分析的结果可视化 - 强大的告...
by @可耐芊小仙女 13小时前 分享 查看详情
阿里云 PB 级 Kubernetes 日志平台建设实践 (yq.aliyun.com)
阿里云日志服务是阿里集团针对日志分析、处理的自研产品。Kubernetes 近两年来发展十分迅速,已经成为容器编排领域的事实标准,但是 Kubernetes 中日志采集相对困难,阿里云日志服务技术专家元乙即将在 QCon 北京 2019 分享Kubernetes 日志平台建设最佳实践,借此机会我们采访了元乙老师阿里云 Kubernetes 日志平台是如何建设的。
by @可耐芊小仙女 2019-05-06 15:44 分享 查看详情
阿里云 PB 级 Kubernetes 日志平台建设实践 (yq.aliyun.com)
阿里云日志服务是阿里集团针对日志分析、处理的自研产品。Kubernetes 近两年来发展十分迅速,已经成为容器编排领域的事实标准,但是 Kubernetes 中日志采集相对困难,阿里云日志服务技术专家元乙即将在 QCon 北京 2019 分享Kubernetes 日志平台建设最佳实践,借此机会我们采访了元乙老师阿里云 Kubernetes 日志平台是如何建设的。
by @可耐芊小仙女 2019-05-06 15:43 分享 查看详情
我眼中的 Nginx(六):深入 Nginx/Openresty 服务里的 DNS 解析 (zhuanlan.zhihu.com)
DNS 解析在 Nginx/OpenResty 的服务里是不可分割的一个功能,本文主要来介绍下 Nginx 和 OpenResty 服务里的一些不同的 DNS 解析方式以及它们之间的优缺点。
by @又拍云 2019-04-29 11:32 分享 查看详情
京东云罗玉杰:OpenResty 在直播场景中的应用 (mp.weixin.qq.com)
罗玉杰,京东云技术专家,10 余年 CDN、流媒体行业从业经验,热衷于开源软件的开发与研究,对 OpenResty、Nginx 模块开发有较深入的研究,熟悉 CDN 架构和主流流媒体协议。
by @又拍云 2019-04-19 13:47 分享 查看详情
Nginx 外的另一选择,轻量级开源 Web 服务器 Tengine 发布新版本 (yq.aliyun.com)
ngx_http_proxy_connect_module [1] ,该模块让 Tengine 可以用于正向代理场景,支持对 CONNECT 方法请求的处理;
HTTP2 Server粒度控制[2] 新增 HTTP2指令,可针对 listen 相同端口的 server 进行个性化开启与关闭 HTTP2;
by @可耐芊小仙女 2019-04-11 13:31 分享 查看详情
通过DataWorks数据集成归档日志服务数据至MaxCompute进行离线分析 (yq.aliyun.com)
消费点位也可以按照自定义设置5分钟调度一次,从00:00到23:59,startTime=系统前分钟到[yyyymmddhh24miss-5/24/60]系统前5分钟时间(注意与上图消费数据定位不同),那么应该配置为ds=[yyyymmdd-5/24/60],hr=[hh24-5/24/60],min=[mi-5/24/60]。
by @可耐芊小仙女 2019-04-09 15:57 分享 查看详情
Kubernetes Ingress 日志分析与监控的最佳实践 (yq.aliyun.com)
Ingress 主要提供 HTTP 层(7 层)路由功能,是目前 K8s 中 HTTP/HTTPS 服务的主流暴露方式。为简化广大用户对于 Ingress 日志分析与监控的门槛,阿里云容器服务和日志服务将 Ingress 日志打通,只需要应用一个 yaml 资源即可完成日志采集、分析、可视化等一整套 Ingress 日志方案的部署。
by @可耐芊小仙女 2019-04-01 15:08 分享 查看详情
我眼中的 Nginx(五):Nginx — 子请求设计之道 (zhuanlan.zhihu.com)
使用子请求机制的意义在于,它能够分散原本集中在单个请求里的处理逻辑,简化任务,大大降低请求的复杂度。在笔者看来,子请求机制是 Nginx 里最为巧妙的设计之一。
by @又拍云 2019-03-27 14:15 分享 查看详情
Kubernetes Ingress 日志分析与监控的最佳实践 (yq.aliyun.com)
目前Kubernetes(K8s)已经真正地占领了容器编排市场,是默认的云无关计算抽象,越来越多的企业开始将服务构建在K8s集群上。在K8s中,组件通过Service对外暴露服务,常见的包括NodePort、LoadBalancer、Ingress等。其中Ingress主要提供HTTP层(7层)路由功能,相比TCP(4层)的负载均衡具备非常多的优势(路由规则更加灵活、支持金丝雀、蓝绿、A/B Test发布模式、SSL支持、日志、监控、支持自定义扩展等),是目前K8s中HTTP/HTTPS服务的主流暴露方式。
by @可耐芊小仙女 2019-03-25 15:54 分享 查看详情