【Day 23】 AWS Kinesis - Data Streams vs Data Firehose 两者差异

前几天我们已经启用 VPC Flow Log、CloudFront Log，接下来我们就是要来实作 - 『如何启用 WAF 日志以及汇入 BI 进行分析』，Data Analytics Pipeline 如下图所示：

大家会发现蒐集 WAF Log 的 Pipeline 流程跟 VPC Flow Log、CloudFront Log 不太一样，若要蒐集 AWS WAF Log，我们需要透过 Kinesis 服务来蒐集串流资料并指定其存放的目的端(例如：Amazon S3、Amazon Redshift、Amazon Elasticsearch Service 和 Splunk )，接着建立 WAF Log 的 Data Catalog，让 Athena 可以查询以及 QuickSight 进行资料视觉化

那这个实作是透过 Kinesis 服务来蒐集 Log，那其实 AWS Kinesis 服务有分成几个类别，那到底我们应该使用哪个类别的 Kinesis 服务呢? 所以我们先来讨论这几个类别的差异
AWS Kinesis 是一个可轻松地收集、处理和分析即时串流资料，让您及时取得深入的见解并快速地对新资讯做出反应，而 AWS Kinesis 又可以区分成以下四种类别：

第一个 Kinesis Video Streams 跟第四个 Amazon Kinesis Data Analytics
我们可以从字面上去了解就是与影音/即时串流分析有相关，我们就不深入讨论

而第二个 Kinesis Data Streams 和 第三个 Amazon Kinesis Data Firehose 这两个到底差别在哪里? 看文件好像两个都是用来轻松地收集、处理即时串流资料说… 故针对不同的构面，整理了以下差异来了解这两者到底差在哪里~ [1]

所以在 AWS 中若要抓取 WAF Log 并储存到特定资料存放区，我们则会使用 AWS Kinesis 服务的 Data Firehose 来协助我们抓取串流资料并储存到 AWS S3 中~

今天就先这样，明天我们就会来实作『如何启用 WAF 日志』，明天见罗 : D ~

如果有任何指点与建议，也欢迎留言交流，一起漫步在 Data on AWS 中。

参考&相关来源：
[1] AWS Kinesis Data Streams vs Kinesis Data Firehose
https://jayendrapatil.com/aws-kinesis-data-streams-vs-kinesis-firehose/