- Amazon Redshift、Amazon MSK 和 Amazon EMR 的無伺服器功能可幫助客戶大規模分析資料,而無需配置、擴展或管理底層基礎設施
- 羅氏藥廠(Roche)、銳玩遊戲(Riot Games)和 Intuit 等客戶均已使用新的無伺服器分析功能
AWS 在 2021 re:Invent 年度盛會上,宣佈為三項資料分析服務推出無伺服器功能,客戶無需配置、擴展或管理底層基礎設施,即可輕鬆地分析任何規模的資料。 Amazon Redshift Serverless 可在幾秒鐘內自動設定和擴展資源,讓客戶無需管理資料倉庫叢集,即可以 PB 級資料規模執行高效能分析工作負載。 Amazon Managed Streaming for Apache Kafka(Amazon MSK)Serverless 可快速擴展資源,極大簡化即時資料攝取和資料串流。 Amazon EMR Serverless 讓客戶無需部署、管理和擴展底層基礎設施,即可使用開源大數據框架(如 Apache Spark、Hive 和 Presto)執行分析型應用程式。
AWS 資料分析副總裁 Rahul Pathak 表示:「一些客戶希望細密地掌控其工作負載的各個方面,但同時也有客戶希望 AWS 能幫助他們將分析基礎設施管理工作中不確定的部分抽離出來,以便更快地行動,並在企業環境中擴大使用資料分析。今天,為降低客戶管理資料分析基礎設施的複雜性,我們為三種主流的分析服務增加無伺服器功能。客戶可以更輕鬆、經濟實惠地實現基礎設施現代化,並統一整合來自各種資料來源的大量資料。現在,客戶無需考慮管理基礎設施,即可執行任何規模的分析工作負載,並可為需要它的人員及應用程式快速提供洞察。」
AWS 提供廣泛且專門建構的資料分析服務幫助客戶制定資料驅動的決策,包括用於資料倉儲的 Amazon Redshift、用於處理即時資料串流的 Amazon MSK ,以及用於執行 Apache Spark、Hive、Presto 和其他開源大數據框架的 Amazon EMR 。儘管這些服務為各種應用場景提供強大的分析功能,但仍有客戶希望能更進一步地受惠於 AWS 資料分析服務,並降低花費在管理底層叢集或伺服器的時間。為了消除擴展和管理基礎設施的複雜性, AWS 於 2014 年在運算領域引入無伺服器、事件驅動的概念,大量的客戶已採用 AWS 無伺服器技術,無需配置、擴展或管理伺服器,或部署運算執行個體和儲存來滿足其應用程式的峰值容量。 AWS 進一步地將無伺服器能力拓展到分析引擎,實現自動添加或減少資源,提供恰到好處的容量,滿足客戶任何規模的資料分析需求,客戶無需調整叢集大小或為滿足峰值容量而過度設定,進而節省時間並優化成本。客戶現在可以快速、輕鬆地使用 AWS 資料分析服務,享受無伺服器的自動部署、隨需擴展和隨需付費,不僅降低成本,也可以為更多使用者拓展資料分析服務。
Amazon Redshift Serverless 實現無伺服器資料倉儲:如今,數以萬計的客戶每天都在使用 Amazon Redshift 處理超過 2EB 的資料。與其他企業雲資料倉儲相比, Amazon Redshift 提供高達 3 倍的性價比和高達 10 倍的查詢效能,以更低的成本為客戶提供更快的資料分析。 Amazon Redshift Serverless 讓客戶無需設定、管理或擴展叢集,即可更輕鬆地從資料中快速獲取洞察。當前自行管理 Amazon Redshift 叢集的客戶無需更改應用程式,就可以透過 Amazon Redshift 控制台或應用程式介面(API)輕鬆地將它們轉移到新的無伺服器叢集上。欲瞭解 Amazon Redshift Serverless ,請瀏覽:aws.amazon.com/redshift/redshift-serverless 。
Amazon MSK Serverless 實現無伺服器資料串流:越來越多企業正採用 Apache Kafka 捕獲和分析來自物聯網設備、網站點擊串流、資料庫日誌和許多其他持續生成動態資料的即時資料串流。透過 Amazon MSK Serverless ,客戶不必擔心容量規劃或不可預測的工作負載,即可自動建構、管理和擴展叢集。客戶要開始使用 Amazon MSK Serverless ,只需在 Amazon MSK 控制台中創建一個叢集,設定一個專用且安全的 Apache Kafka 端點,使用新的或已有的 Apache Kafka 客戶端來串流資料。欲瞭解 Amazon MSK Serverless ,請瀏覽:aws.amazon.com/msk/features/msk-serverless 。
Amazon EMR Serverless 實現無伺服器大數據分析:數以萬計的客戶正在使用 Amazon EMR 執行開源框架,如 Apache Spark、Hive 和 Presto ,用於大規模分散式資料處理作業、互動式 SQL 查詢和機器學習應用程式。客戶只需簡單地指定想要執行的框架, Amazon EMR Serverless 即可隨著工作負載需求的變化規劃部署、管理和擴展運算和記憶體資源。在客戶選擇一個開源框架並使用 Amazon EMR API、Amazon Command Line Interface(Amazon CLI)或 AWS Management Console 提交任務後,即可開始使用 Amazon EMR Serverless 。欲瞭解 Amazon EMR Serverless ,請瀏覽:aws.amazon.com/emr/serverless 。
羅氏藥廠(Roche)是全球最大的製藥公司之一,也是全球領先的癌症治療供應商。羅氏藥廠首席雲端平台暨機器學習工程師 Yannick Misteli 博士表示:「Amazon Redshift Serverless 讓我們無需管理叢集即可完成資料管理,並可透過部署適當的容量滿足需求及優化成本。 Amazon Redshift Serverless 可減輕營運負擔、降低成本,並幫助羅氏藥廠規模化實踐進入市場(Go-to-Market)策略。這種極簡的方式改變了遊戲規則,幫助我們快速上手並支援各種繁重的分析場景。」
銳玩遊戲(Riot Games),又稱拳頭遊戲,是一家影片遊戲開發商和發行商,以開發世界上最受歡迎的 PC 遊戲之一《英雄聯盟》而聞名。銳玩遊戲資深主任資料科學家 Wesley Kerr 表示:「我們每天在 AWS 平台上使用 Amazon MSK 攝取大約 20TB 的資料,減少資料生成後的查詢時間對我們至關重要。透過 Amazon MSK ,我們現在擁有一種將資料串流到自己生態系統的機制,同時消除自行執行 Apache Kafka 的繁重工作。 Amazon MSK Serverless 將進一步簡化我們的營運,它讓我們無需採取擴展措施即可根據需求的變化而改變資料串流的傳輸。為此,我們的開發人員不必擔心 Apache Kafka 的擴展問題,可專注於提供全球最佳的遊戲體驗。」
Intuit 是一個全球技術平台,幫助消費者和小型企業應對重要的財務挑戰,透過 TurboTax、QuickBooks、Mint、Credit Karma 和 Mailchimp 為全球超過 1 億的客戶提供服務。 Intuit 工程總監 Ritesh Bansal 表示:「在 Intuit ,我們使用 Apache Kafka 作為中央事件匯流排,貫穿於為我們產品提供支援的數千個解耦的微服務之間。我們近期將自建的 Apache Kafka 叢集遷移到 Amazon MSK ,因為我們可藉此將工程人才投入到導向終端客戶的創新上。我們為 Amazon MSK Serverless 的推出感到高興,它將讓我們更輕鬆地擴展規模和管理容量。」
The Orchard 是索尼音樂娛樂(Sony Music Entertainment)的子公司,負責蒐集、處理來自唱片公司和藝術家的音樂,並將其分發給 Spotify、Amazon Music 和其他串流媒體供應商和實體零售商。 The Orchard 工程經理 Farouk Umar 表示:「Amazon MSK 幫助我們加快推出為 The Orchard Suite 處理串流資料的應用程式。 Amazon MSK Serverless 讓不熟悉 Apache Kafka 擴展的團隊能夠從 Amazon MSK 中受益,在不必顧慮 Apache Kafka 的情況下提供更好的開發人員體驗。因此,我們能夠更快地擴展採用 Apache Kafka ,幫助我們加速採用事件驅動的策略。」
Classmethod 一個專精於大數據、行動及人工智慧的領先雲端整合供應商。 Classmethod 資料整合部解決方案架構師 Satoru Ishikawa 表示:「Customer Story Analytics(CSA)是我們的資料整合平台服務,它整合 Amazon Redshift、Amazon S3、Amazon Aurora 和其他服務,避免產生資料孤島並在資料服務之間提供強大、統一的治理能力。 Amazon Redshift Serverless 可自動調整運算和儲存的大小,並快速擴展,這種彈性的無伺服器體驗降低手動操作的成本、擴展部門之間的資料訪問、並加速資料分析和機器學習的自主性,讓我們以新方式擴展 CSA 業務。」
Sedric 是一個人工智慧風險與合規的先進平台,專為新一代金融科技設計而生。 Sedric 研發副總裁 Tomer Levi 表示:「簡單易用和自助式資料訪問是我們分析計畫的關鍵,而 Amazon Redshift Serverless 讓我們無需考慮資料倉儲的管理。我們從 Amazon S3 載入資料的速度比之前的方案快 7 倍,幫助我們從數百萬個客戶事件中獲得可行的洞見。我們對 Amazon Redshift Serverless 達到的效能改進和成本優化感到非常高興。」
ZS Associates 是一家全球專業服務公司,幫助企業為其客戶開發和交付產品。 ZS 雲端架構副總監 Anirudh Vohra 表示:「AWS 的服務在我們的資料分析策略中發揮著重要的作用,多年來我們取得了巨大的成功。 Amazon EMR 可靠地幫助我們的 SaaS 產品升級 Spark ,並消除無差別的繁重工作。但是,我們的一些工作負載不需要 Amazon EC2 上的 Amazon EMR 提供的高度客製化,我們只想在不必擔心管理和擴展伺服器或叢集下,執行某些 Apache Spark 應用程式。我們期待將具有臨時分析需求的工作負載遷移到 Amazon EMR Serverless 上。」
本文章內容由「Amazon Web Services (AWS)」提供。
暂无评论内容