大数据与流处理
大规模设计与运营实时数据管道
Key facts
- Level: Professional
- Field: Data Engineering & Analytics
- Certification price: $194 (one-time payment)
- Online course: 大数据与流处理 — 学习指南 — $195
- Course + exam bundle: $389
- Exam: 62 multiple-choice questions · 85 minutes · passing score 75% · up to 3 attempts
- Estimated study time: about 30 hours
- Validity: 24 months
- Certification language: English
About the 大数据与流处理 certification
大数据与流处理认证验证您能够设计、分析并运营实时和大规模数据系统。您将突破批处理思维，进入无界数据的世界——记录持续不断地到达，正确性取决于您何时处理它们，而不仅仅是处理什么。 考试涵盖大数据的5V特征、分布式存储（HDFS与对象存储）和分布式计算基础；深入讲解Apache Kafka — 主题、分区、偏移量、消费者组、副本机制、数据保留、日志压缩和恰好一次语义；使用Spark Structured Streaming和Apache Flink进行流处理；事件时间与处理时间、窗口计算（滚动窗口、滑动窗口、会话窗口）、水位线与延迟数据处理、有状态处理与检查点；投递保证（至多一次、至少一次、恰好一次）；Lambda架构与Kappa架构；变更数据捕获流处理、背压、消息队列与事件流的区别、流式数据湖仓（Delta/Iceberg）、实时OLAP存储（Druid/ClickHouse），以及流处理管道的可扩展性、容错性与监控。 本认证引擎无关：相关概念可迁移至Kafka、Flink、Spark、Pulsar以及各云厂商的托管等价服务。应试者应已持有数据工程专业认证，或具备同等水平的管道实践经验。
Course outline
The 大数据与流处理 — 学习指南 course covers:
- 大数据基础 — 5V特性、分布式存储（HDFS和对象存储）以及将计算移至数据的原则。 (3 lessons)
- Apache Kafka 深入解析 — 主题、分区、偏移量、消费者组、复制、保留策略和日志压缩。 (3 lessons)
- 流处理与时间 — Spark 与 Flink 对比、事件时间与处理时间、窗口机制以及针对延迟数据的水位线。 (3 lessons)
- 状态、保证与容错 — 有状态处理、检查点/恢复机制以及交付语义（至多一次/至少一次/恰好一次）。 (3 lessons)
- 架构、分析与运维 — Lambda 与 Kappa 架构、CDC、背压、流式湖仓、实时 OLAP 和监控。 (3 lessons)
Prerequisites
Frequently asked questions
- Is the 大数据与流处理 certificate verifiable?
- Yes. Every certificate issued by BC Skills Academy carries a unique credential ID that anyone can check on the public verification page.
- How is the 大数据与流处理 exam structured?
- It is a timed, randomized multiple-choice exam of 62 questions in 85 minutes, graded instantly; you need 75% to pass.
- Can I get a refund?
- Full refund within 7 days of purchase if you have not started the exam. Once the exam has been started or completed, the purchase is no longer refundable.