亞馬遜雲科技推出Amazon Redshift流式注入功能
北京2022年6月20日 /美通社/ -- 近日,亞馬遜雲科技推出Amazon Redshift流式注入(Streaming Ingestion)功能預覽,讓客户能夠直接從Amazon Kinesis Data Streams(一項無服務器流式數據服務,可簡化任何規模的數據流捕獲、處理和存儲)向Amazon Redshift數據倉庫中注入即時數據並分析。Amazon Redshift流式注入功能可以讓客户無需在Amazon Simple Storage Service(Amazon S3)中暫存數據,直接將每秒數百兆的流數據接收到Amazon Redshift數據倉庫集羣並處理。Amazon Redshift流式注入(Streaming Ingestion)功能的推出,進一步提升了亞馬遜雲科技即時數據處理能力,為亞馬遜雲科技"雲、數、智三位一體"的大數據與機器學習融合服務組合的數據處理能力再添利器,將進一步推動機器學習由實驗轉向規模化落地。
在遊戲即時數據分析、在線廣告點擊流分析、零售POS機數據流分析、應用日誌和網絡日誌分析、物聯網設備數據分析等應用場景中,應用或者終端設備會在短時間內持續生成巨量數據流。這些數據流會被送到Amazon Kinesis Data Streams進行即時緩存並最終使用Amazon Redshift完成數據分析。以往,客户如果想從Amazon Kinesis Data Streams向Amazon Redshift注入即時數據,需要先在Amazon S3中暫存數據,然後使用Copy命令加載數據來構建數據管道,這一過程通常需要幾分鐘才能完成。但越來越多客户希望能夠分析即時數據流以儘早獲得數據洞察。

Amazon Redshift流式注入功能的推出,滿足了客户真實數據流對數據處理規模和即時性的要求。基於這一功能,客户可以同時連接來自多個Amazon Kinesis Data Streams的數據,將即時數據直接注入Amazon Redshift。客户使用現有工具和熟悉的SQL執行下游處理和轉換,無需額外的成本,在幾秒鐘內從數據中獲得洞察。Amazon Redshift流式注入大幅簡化流式數據管道構建,加速數據處理,支持以低延遲、高吞吐量訪問數據倉庫中的即時數據,幫助數據工程師、數據分析師和大數據開發者將數據分析從"批量"轉向"即時"。
目前,數以萬計的客户每天使用Amazon Redshift處理EB級的數據,為高性能商業智能(BI)報告、儀表板應用程序、數據探索和即時分析等分析工作負載提供支持。Amazon Redshift流式注入功能的推出將進一步豐富客户的使用場景。客户可將流式數據即時分析與數據倉庫中的其它數據源相結合,豐富和擴展即時分析應用場景。例如,遊戲運營人員可以分析來自遊戲玩家的即時數據,優化遊戲體驗,提高轉化和留存率;營銷部門可以分析在線廣告的點擊流數據,評估用户足跡和行為,及時向客户投放廣告;分析人員可以即時分析零售POS數據,實現零售交易的即時報告、分析和可視化;開發人員和工程師可以即時分析應用程序日誌和網絡日誌流數據,即時排除故障,採取預防措施,改善產品體驗。客户可以將Amazon Redshift流式注入功能與Amazon Kinesis服務一起使用,即時分析IoT數據,獲取設備狀態和屬性(位置和傳感器數據),監控應用程序,進行欺詐檢測,實現即時排行榜功能等等。
為了幫助企業推進大數據和機器學習的融合,將機器學習由實驗轉為規模化落地實踐,亞馬遜雲科技推出了"雲、數、智三位一體"的大數據與機器學習融合服務組合。Amazon Redshift流式注入功能的推出,進一步豐富了亞馬遜雲科技無服務器分析產品服務不同客户業務場景的能力,可以讓客户無需配置、擴展或管理底層基礎設施,即可輕鬆地處理即時動態的數據同步,為機器學習項目提供兼具性能和成本效益的即時特徵數據準備。
消息來源:亞馬遜雲科技