Day 14- 大數據架構
目錄
大數據應用場景
自從物聯網問世後,智能車輛、智慧工廠、智慧醫療….等一系列的課題陸陸續續出現。
這類的資料都有一個共通話題─大數據。
大數據資料儲存,是在做 AI 分析前所需要的基礎設備。
簡單來說,沒有大數據做出來的 AI 分析結果,感覺就像是美食佳餚少了一味。
基本上一定會有以下流程:
大數據接收 → 大數據操作 → 大數據倉儲
如何快速的接收資料並暫存、從裡面提取大量資料做整理、存回專門存大數據的資料庫, AWS 都有各自的服務對應。
AWS 大數據架構
以下的 AWS 服務個別對應大數據架構的不同功能:
Kinesis 對應 大數據接收
SWF 對應 大數據接收
EMR 對應 大數據操作
Redshift 對應 大數據倉儲
Aurora 對應 大數據倉儲