课程介绍:
本课程是大数据项目实战系列课程,项目基于某条亿级流量背景,实现了一站式的数据采集与监控。包含了行为数据、产品数据、业务数据的高效采集,定义并监控数据采集流程中各个指标,当数据采集链路发生故障时能够及时收到报警,同时当遇到性能问题时,通过监控系统我们能更有针对性的优化采集流程。项目设计基于场景而非基于行业,选择以技术驱动,重在各技术组件的组合,目的是解决特定场景的问题。课程从零环境基础出发,逐步搭建完成,能够帮助你快速搭建亿级流量场景下的数据采集平台。
课程目录:
代码 |
代码\code.zip |
视频 |
视频\01 某头条采集与监控实战-项目背景.mp4 |
视频\02 某头条采集与监控实战-项目需求.mp4 |
视频\03 某头条采集与监控实战-监控项目架构.mp4 |
视频\04 某头条采集与监控实战-数据格式解析.mp4 |
视频\05 某头条采集与监控实战-OpenResty安装.mp4 |
视频\06 某头条采集与监控实战-创建OpenResty应用.mp4 |
视频\07 某头条采集与监控实战- 编写应用主配置文件nginx.conf.mp4 |
视频\08 某头条采集与监控实战-编写应用子配置文件collect-app.conf.mp4 |
视频\09 某头条采集与监控实战- 测试并启动应用.mp4 |
视频\10 某头条采集与监控实战-配置接口到数据管理中心.mp4 |
视频\11 某头条采集与监控实战-日志切分.mp4 |
视频\12 某头条采集与监控实战-Hadoop安装.mp4 |
视频\13 某头条采集与监控实战-Flume安装.mp4 |
视频\14 某头条采集与监控实战-编写Flume配置文件.mp4 |
视频\15 某头条采集与监控实战-编写Flume拦截器.mp4 |
视频\16 某头条采集与监控实战-部署Flume拦截器.mp4 |
视频\17 某头条采集与监控实战-资讯数据采集Flume配置.mp4 |
视频\18 某头条采集与监控实战-资讯数据采集Flume Agent对接数据管理中心.mp4 |
视频\19 某头条采集与监控实战- 业务数据采集SQOOP脚本.mp4 |
视频\20 某头条采集与监控实战-Hive安装配置.mp4 |
视频\21 某头条采集与监控实战-Beeline加载JsonSerde.mp4 |
视频\22 某头条采集与监控实战-创建行为数据表.mp4 |
视频\23 某头条采集与监控实战-创建行为数据加速表.mp4 |
视频\24 某头条采集与监控实战-创建新闻资讯表.mp4 |
视频\25 某头条采集与监控实战-创建业务数据表.mp4 |
视频\26 某头条采集与监控实战-编译安装Azkaban Solo Server.mp4 |
视频\27 某头条采集与监控实战-Azkaban 作业流开发.mp4 |
视频\28 某头条采集与监控实战-Azkaban 作业流定时调度.mp4 |
视频\29 某头条采集与监控实战-DingTalk添加Webhook机器人.mp4 |
视频\30 某头条采集与监控实战-DingTalk SDK测试.mp4 |
视频\31 某头条采集与监控实战-Azkaban Alert接口开发.mp4 |
视频\32 某头条采集与监控实战-Azkaban Alert插件部署.mp4 |
视频\33 某头条采集与监控实战-Azkaban Alert插件运行测试.mp4 |
视频\34 某头条采集与监控实战-Prometheus安装.mp4 |
视频\35 某头条采集与监控实战-Prometheus数据模型介绍.mp4 |
视频\36 某头条采集与监控实战-架构简介.mp4 |
视频\37 某头条采集与监控实战-Supervisor与Prometheus集成.mp4 |
视频\38 某头条采集与监控实战-Supervisor与Grafana集成.mp4 |
视频\39 某头条采集与监控实战-Grafana集成Prometheus数据源.mp4 |
视频\40 某头条采集与监控实战-加载nginx-lua-prometheus扩展模块.mp4 |
视频\41 某头条采集与监控实战-nginx指标收集.mp4 |
视频\42 某头条采集与监控实战-nginx metric接口配置到prometheus.mp4 |
视频\43 某头条采集与监控实战-监控指标最终效果展示.mp4 |
视频\44 某头条采集与监控实战-Supervisor管理Flume Agent.mp4 |
视频\45 某头条采集与监控实战-flume-exporter接口配置到prometheus.mp4 |
视频\46 某头条采集与监控实战-在Grafana上配置flume metric 监控.mp4 |
本站所有资源均来自网络,版权归原作者所有,本站仅提供收集与推荐,若侵犯到您的权益,请【给我们反馈】,我们将在24小时内处理!
感谢分享
谢谢分享
好