点击刷新
配套教程 相关文章 课程评论
很抱歉，还没有和本课程相关的文章, 快来发布第一篇吧！
- 发布的内容要和课程内容匹配，建议原创。
- 转载的文章需经原作者同意，并标明出处。
- 编辑文章时要注意格式结构清晰。
- 创建和转载都可以获取学习猿地金猿宝。
综合评分：9.9 评分 请对课程进行点评，及学习过程中有困难疑惑可在学习区进行提问
您需要登录学习后才可以评价，
先学习后评论
课程讲师
长期致力于大数据技术的研究和培训工作。曾就职于思华科技，金风科技等知名企业，曾参与开发混合可再生能源预测、 智能学习行为分析系统等项目。对Hadoop、Hive、Flume、Kafka、HBase、Spark等主流大数据框架有深入研究。授课认真细致，对技术的讲解清晰易懂。
大数据 - 电商数仓项目
总课时：37小时21分06秒
大数据之实时数仓分层项目实战
总课时：34小时21分21秒
实时数据采集系统【大数据】
总课时：50小时36分07秒
学习记录
继续学习>
学
88%
40%
4%
练
50%
75%
80%
测
25%
50%
25%
评
75%
75%
25%
第1章 大数据技术之实时项目-课程概述及数据采集
1.1. 大数据_实时项目_需求介绍
1.2. 大数据_实时项目_模拟生成数据
1.3. 大数据_实时项目_springboot介绍
1.4. 大数据_实时项目_springboot程序创建
1.5. 大数据_实时项目_创建loggercontroller接收模拟器生成数据
1.6. 大数据_实时项目_利用logback将日志数据落盘
1.7. 大数据_实时项目_将日志发送到kafka对应的主题中
第2章 大数据技术之实时项目-ElasticSearch（1）
2.1. 大数据_实时项目_内容回顾
2.2. 大数据_实时项目_打包日志处理程序到单台linux上运行
2.3. 大数据_实时项目_负载均衡介绍
2.4. 大数据_实时项目_nginx安装和启动
2.5. 大数据_实时项目_nginx配置文件说明
2.6. 大数据_实时项目_nginx常用应用场景
2.7. 大数据_实时项目_整体流程测试
2.8. 大数据_实时项目_编写脚本启动nginx以及日志处理服务并测试
2.9. 大数据_实时项目_日活业务介绍
2.10. 大数据_实时项目_上午内容回顾
2.11. 大数据_实时项目_elasticsearch介绍
2.12. 大数据_实时项目_restful编程风格
2.13. 大数据_实时项目_特点
2.14. 大数据_实时项目_lucene、nutch、elasticsearch关系
2.15. 大数据_实时项目_elasticsearch安装以及单节点启动测试
2.16. 大数据_实时项目_kibana安装以及测试
第3章 大数据技术之实时项目-ElasticSearch（2）
3.1. 大数据_实时项目_内容回顾
3.2. 大数据_实时项目_相关概念介绍
3.3. 大数据_实时项目_对索引的操作
3.4. 大数据_实时项目_对文档的操作1
3.5. 大数据_实时项目_对文档的操作2
3.6. 大数据_实时项目_按分词查询
3.7. 大数据_实时项目_查询操作1
3.8. 大数据_实时项目_查询操作2
3.9. 大数据_实时项目_聚合操作
3.10. 大数据_实时项目_ik分词器
3.11. 大数据_实时项目_自定义词库(本地)
3.12. 大数据_实时项目_自定义词库（远程）
3.13. 大数据_实时项目_mapping
第4章 大数据技术之实时项目-需求1 日活（1）
4.1. 大数据_实时项目_内容回顾
4.2. 大数据_实时项目_别名
4.3. 大数据_实时项目_索引模板
4.4. 大数据_实时项目_jestfactory对象的创建
4.5. 大数据_实时项目_向es中插入单条数据方式1
4.6. 大数据_实时项目_向es中插入单条数据方式2
4.7. 大数据_实时项目_根据id查询索引中的单条文档
4.8. 大数据_实时项目_根据查询条件查询多条文档1
4.9. 大数据_实时项目_根据查询条件查询多条文档2
4.10. 大数据_实时项目_日活业务介绍
4.11. 大数据_实时项目_搭建日活开发环境
4.12. 大数据_实时项目_读取配置文件的工具类
4.13. 大数据_实时项目_读取kafka数据的工具类
4.14. 大数据_实时项目_获取redis客户端工具类
4.15. 大数据_实时项目_编写sparkstreaming程序消费kafka数据
第5章 大数据技术之实时项目-需求1 日活（2）
5.1. 大数据_实时项目_内容回顾
5.2. 大数据_实时项目_已经登录设备去重思路分析
5.3. 大数据_实时项目_通过redis对已经登录的数据进行去重方式1
5.4. 大数据_实时项目_通过redis对已经登录的数据进行去重方式2
5.5. 大数据_实时项目_将采集到的数据批量保存到es中业务实现
5.6. 大数据_实时项目_批量保存es代码的实现
5.7. 大数据_实时项目_去重和保存到es总结
5.8. 大数据_实时项目_kafka内容回顾1
5.9. 大数据_实时项目_kafka内容回顾2
5.10. 大数据_实时项目_kafka内容回顾3
5.11. 大数据_实时项目_kafka内容回顾4
5.12. 大数据_实时项目_精准一次性消费方案分析
5.13. 大数据_实时项目_手动提交偏移量+幂等性处理分析
5.14. 大数据_实时项目_从redis中获取偏移量
第6章 大数据技术之实时项目-需求1 日活（3）
6.1. 大数据_实时项目_内容回顾
6.2. 大数据_实时项目_从指定偏移量读取kafka数据并获取偏移量位置
6.3. 大数据_实时项目_保存偏移量到redis
6.4. 大数据_实时项目_关于去重
6.5. 大数据_实时项目_通过kibana进行可视化展示
6.6. 大数据_实时项目_发布查询接口架构介绍
6.7. 大数据_实时项目_搭建项目架构
6.8. 大数据_实时项目_获取当前日活数的service方法实现
6.9. 大数据_实时项目_获取日活controller处理
6.10. 大数据_实时项目_获取分时日活数service方法实现
6.11. 大数据_实时项目_获取分时日活数controller处理
6.12. 大数据_实时项目_前端访问数据接口测试
第7章 大数据技术之实时项目-需求2 首单分析(ods+dwd) （1）
7.1. 大数据_实时项目_内容回顾
7.2. 大数据_实时项目_首单业务分析
7.3. 大数据_实时项目_canal使用场景
7.4. 大数据_实时项目_canal工作原理
7.5. 大数据_实时项目_mysql前期准备工作
7.6. 大数据_实时项目_canal配置以及单机测试
7.7. 大数据_实时项目_canal高可用
7.8. 大数据_实时项目_补充：高可用切换发送重复数据
7.9. 大数据_实时项目_上午内容回顾
7.10. 大数据_实时项目_使用canal进行分流处理
7.11. 大数据_实时项目_封装向kafka发送数据工具类并对canal分流进行测试
7.12. 大数据_实时项目_maxwell的安装以及配置
7.13. 大数据_实时项目_编写basedbmaxwellapp对数据进行分流
7.14. 大数据_实时项目_总结
第8章 大数据技术之实时项目-需求2 首单分析(ods+dwd) （2）
8.1. 大数据_实时项目_内容回顾
8.2. 大数据_实时项目_hbase回顾1
8.3. 大数据_实时项目_hbase回顾2
8.4. 大数据_实时项目_phoenix客户端连接工具
8.5. 大数据_实时项目_封装phoenix查询工具类
8.6. 大数据_实时项目_客户端工具问题解决
8.7. 大数据_实时项目_从kafka订单主题中读取数据
8.8. 大数据_实时项目_判断是否首单方案1
8.9. 大数据_实时项目_判断是否首单方案2
8.10. 大数据_实时项目_更新phoenix中用户消费状态
8.11. 大数据_实时项目_phoenix客户端连接工具2
8.12. 大数据_实时项目_同批次状态修正
8.13. 大数据_实时项目_总结
第9章 大数据技术之实时项目-需求2 首单分析(ods+dwd) （3）
9.1. 大数据_实时项目_内容回顾
9.2. 大数据_实时项目_维度表关联分析
9.3. 大数据_实时项目_省份维度表的处理
9.4. 大数据_实时项目_用户维度表的处理
9.5. 大数据_实时项目_上午内容回顾
9.6. 大数据_实时项目_和省份维度关联思路
9.7. 大数据_实时项目_和省份维度关联方案1
9.8. 大数据_实时项目_和省份维度关联方案2
9.9. 大数据_实时项目_和用户维度关联
9.10. 大数据_实时项目_保存订单数据到es中
9.11. 大数据_实时项目_使用kibana进行可视化
9.12. 大数据_实时项目_总结
第10章 大数据技术之实时项目-需求3 订单明细实付金额分摊及交易额统计(dws)
10.1. 大数据_实时项目_内容回顾
10.2. 大数据_实时项目_实付分摊介绍
10.3. 大数据_实时项目_从kafka中读取订单明细数据
10.4. 大数据_实时项目_维度表的创建
10.5. 大数据_实时项目_维度数据处理代码实现
10.6. 大数据_实时项目_订单明细和商品维度关联
10.7. 大数据_实时项目_订单明细和维度关联测试
10.8. 大数据_实时项目_订单和订单明细数据写回kafka
10.9. 大数据_实时项目_orderwideapp接收双流数据测试
10.10. 大数据_实时项目_双流join问题解决方案
10.11. 大数据_实时项目_双流join代码实现
10.12. 大数据_实时项目_双流合并测试
10.13. 大数据_实时项目_实付分摊需求
10.14. 大数据_实时项目_实付分摊思路介绍
10.15. 大数据_实时项目_实付分摊代码实现
10.16. 大数据_实时项目_实付分摊测试
第11章 大数据技术之实时项目-ClickHouse
11.1. 大数据_实时项目_内容回顾
11.2. 大数据_实时项目_clickhouse介绍
11.3. 大数据_实时项目_安装前准备工作
11.4. 大数据_实时项目_单机安装
11.5. 大数据_实时项目_数据类型
11.6. 大数据_实时项目_三个属性讲解
11.7. 大数据_实时项目_二级索引
11.8. 大数据_实时项目_ttl设置
11.9. 大数据_实时项目_replacingmergetree
11.10. 大数据_实时项目_summingmergetree
11.11. 大数据_实时项目_sql操作
11.12. 大数据_实时项目_副本
11.13. 大数据_实时项目_分片的读取和写入流程
11.14. 大数据_实时项目_分片集群配置
第12章 大数据技术之实时项目-需求四ADS聚合及可视化(ads) （1）
12.1. 大数据_实时项目_保存双流join后的数据到clickhouse中
12.2. 大数据_实时项目_数据接口架构介绍
12.3. 大数据_实时项目_配置文件属性说明
12.4. 大数据_实时项目_mapper接口的创建
12.5. 大数据_实时项目_mapper配置文件说明1
12.6. 大数据_实时项目_没有得到分摊数据问题排查
12.7. 大数据_实时项目_mybatis映射文件配置
12.8. 大数据_实时项目_上午内容回顾
12.9. 大数据_实时项目_service层处理代码
12.10. 大数据_实时项目_controller层处理代码及测试
12.11. 大数据_实时项目_ads层聚合思路
12.12. 大数据_实时项目_数据库表创建以及查询mysql工具类封装
12.13. 大数据_实时项目_从mysql中获取偏移量的工具类封装
12.14. 大数据_实时项目_将数据写回到kafka
第13章 大数据技术之实时项目-需求四ADS聚合及可视化(ads) （2）
13.1. 大数据_实时项目_内容回顾
13.2. 大数据_实时项目_从kafka中读取dws层数据
13.3. 大数据_实时项目_scalikejdbc工具介绍
13.4. 大数据_实时项目_保存数据到mysql（精准一次性第二种实现）
13.5. 大数据_实时项目_发布数据接口程序介绍
13.6. 大数据_实时项目_抽取方法避免踩坑
13.7. 大数据_实时项目_发布数据查询接口
13.8. 大数据_实时项目_阶段总结
13.9. 大数据_实时项目_datav数据展示