“Your Data is Your differentiator(你的數(shù)據(jù)正是你的差異化競(jìng)爭(zhēng)力所在。)”當(dāng)亞馬遜云科技CEO Adam Selipsky在re:Invent大會(huì)上說出這個(gè)觀點(diǎn) ,引起全場(chǎng)參會(huì)者的共鳴。
的確,人們普遍認(rèn)為數(shù)據(jù)已是最重要的生產(chǎn)要素,所有身處數(shù)字化轉(zhuǎn)型之中的企業(yè)都在自問:我的數(shù)據(jù)有多少?質(zhì)量如何?是否能夠有效支撐業(yè)務(wù)應(yīng)用?
如今,云平臺(tái)已成為數(shù)據(jù)匯聚最重要的一個(gè)平臺(tái),尤其是隨著生成式AI、大語(yǔ)言模型的崛起,云平臺(tái)上的數(shù)據(jù)打通、流動(dòng)需求也隨之水漲船高,也讓Zero-ETL成為最為重要的技術(shù)趨勢(shì)。
在本次re:Invent大會(huì)上,亞馬遜云科技介紹了多項(xiàng)Zero-ETL集成特性,讓跨數(shù)據(jù)存儲(chǔ)的數(shù)據(jù)訪問與分析更快速、更便捷。正如亞馬遜云科技數(shù)據(jù)與人工智能副總裁Swami Sivasubramanian博士所言:“Zero-ETL能夠讓數(shù)據(jù)集成不再是繁瑣的手動(dòng)任務(wù),使客戶能夠輕松獲取他們所需的數(shù)據(jù)和發(fā)掘數(shù)據(jù)價(jià)值?!?/p>
Zero-ETL成為大勢(shì)所趨
數(shù)字經(jīng)濟(jì)時(shí)代,數(shù)據(jù)如水,滋潤(rùn)萬(wàn)物生長(zhǎng)。與水類似,數(shù)據(jù)只有流動(dòng)和使用起來(lái),方能釋放出巨大價(jià)值,否則就容易形成無(wú)數(shù)個(gè)數(shù)據(jù)沼澤,讓企業(yè)深陷其中。
Gartner調(diào)研數(shù)據(jù)顯示:分析師80%的時(shí)間用于發(fā)現(xiàn)和準(zhǔn)備數(shù)據(jù),知識(shí)型員工將50%的時(shí)間浪費(fèi)在尋找數(shù)據(jù)、發(fā)現(xiàn)和糾正錯(cuò)誤以及確認(rèn)不信任的數(shù)據(jù)來(lái)源上,數(shù)據(jù)科學(xué)家花60%的時(shí)間清理和組織數(shù)據(jù)。
顯然,數(shù)據(jù)相關(guān)技術(shù)發(fā)展到今天,已經(jīng)成為一個(gè)龐大的技術(shù)體系,數(shù)據(jù)要想真正高效發(fā)揮價(jià)值,數(shù)據(jù)技術(shù)體系必須有效解決數(shù)據(jù)流通等問題。尤其是隨著生成式AI浪潮的到來(lái),數(shù)據(jù)如何形成高質(zhì)量的數(shù)據(jù)資產(chǎn)就極為迫切,所有企業(yè)都渴望能夠加速數(shù)據(jù)資產(chǎn)的形成。
事實(shí)上,當(dāng)前大部分企業(yè)普遍擁有不同類型、不同來(lái)源、規(guī)模與產(chǎn)生速度各異的海量數(shù)據(jù),企業(yè)需要整體解決方案來(lái)處理各種變量,以及集成和合并分散在多個(gè)來(lái)源的數(shù)據(jù)。
在亞馬遜云科技看來(lái),數(shù)據(jù)要形成資產(chǎn),并且實(shí)現(xiàn)Data for AI,主要有三個(gè)方面:首先,需要一個(gè)強(qiáng)有力的數(shù)據(jù)平臺(tái)和各種數(shù)據(jù)工具,通過不斷增強(qiáng)的功能來(lái)提升數(shù)據(jù)平臺(tái)與數(shù)據(jù)工具的能力,從而加速數(shù)據(jù)創(chuàng)新的速度;其次,需要把所有數(shù)據(jù)工具之間整合打通,采用架構(gòu)的方式解決數(shù)據(jù)流動(dòng)的問題,比如利用Zero-ETL架構(gòu)來(lái)消除數(shù)據(jù)處理等繁重的工作;第三,除了數(shù)據(jù)治理、數(shù)據(jù)處理之外,數(shù)據(jù)管控和數(shù)據(jù)發(fā)現(xiàn)也非常重要。
“從這三個(gè)方面做好工作,就能為生成式AI提供一個(gè)很好的數(shù)據(jù)基礎(chǔ)?!眮嗰R遜云科技大中華區(qū)解決方案架構(gòu)部總經(jīng)理代聞如是說。
事實(shí)上,為了幫助企業(yè)用戶迅速而輕松地連接和分析數(shù)據(jù),而無(wú)需構(gòu)建和管理復(fù)雜的提取、轉(zhuǎn)換和加載(ETL)數(shù)據(jù)管道,亞馬遜云科技近年來(lái)在多款產(chǎn)品中集成Zero-ETL特性,讓數(shù)據(jù)流動(dòng)變得更加容易。在本次re:Invent大會(huì)上,Swami Sivasubramanian博士又宣布多項(xiàng)新服務(wù),為推動(dòng)Zero-ETL走出了重要一步。
亞馬遜云科技全力推動(dòng)Zero-ETL集成
眾所周知,ETL是將業(yè)務(wù)系統(tǒng)的數(shù)據(jù)經(jīng)過提?。‥xtract)、轉(zhuǎn)換清洗(Transform)和加載(Load)到數(shù)據(jù)倉(cāng)庫(kù)、大數(shù)據(jù)平臺(tái)的過程,將企業(yè)中的分散、零亂、標(biāo)準(zhǔn)不統(tǒng)一的數(shù)據(jù)整合到一起,為企業(yè)的決策提供分析依據(jù)。
過去,ETL的工作極為依賴ETL工程師,當(dāng)數(shù)據(jù)量一般的時(shí)候,ETL工程師尚可對(duì)付;但隨著大數(shù)據(jù)時(shí)代的到來(lái),面對(duì)海量數(shù)據(jù),ETL工程師需要耗費(fèi)大量時(shí)間、精力在ETL環(huán)境,不僅成本高昂、管理復(fù)雜且容易發(fā)生間歇性錯(cuò)誤,遠(yuǎn)遠(yuǎn)達(dá)不到業(yè)務(wù)的需求。
因此,亞馬遜云科技近年來(lái)推動(dòng)Zero-ETL意義重大,可以進(jìn)一步降低了數(shù)據(jù)融合的成本,實(shí)現(xiàn)數(shù)據(jù)價(jià)值的充分釋放。去年的re:Invent大會(huì)上,亞馬遜云科技已經(jīng)推出關(guān)于“Zero ETL”兩項(xiàng)全新的集成功能。在本次大會(huì)上,亞馬遜云科技又推出多項(xiàng)數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)的Zero-ETL集成特性,使得在Amazon Redshift中連接和分析多個(gè)關(guān)系型和非關(guān)系型數(shù)據(jù)庫(kù)的數(shù)據(jù)變得更加容易。
Swami Sivasubramanian博士認(rèn)為,除了合適的數(shù)據(jù)工具之外,還需要具備在企業(yè)范圍內(nèi)集成數(shù)據(jù)的能力,亞馬遜云科技推動(dòng)Zero-ETL目的就是讓數(shù)據(jù)集成不再是繁瑣的手動(dòng)任務(wù),客戶要能夠連接所有數(shù)據(jù),無(wú)論它們存儲(chǔ)在何處。
在本次大會(huì)上,亞馬遜云科技宣布針對(duì)Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon RDS for MySQL與Amazon Redshift的新Zero-ETL集成的預(yù)覽版正式可用。例如,這些集成有助于客戶快速、輕松地訪問Amazon Redshift中常用的關(guān)系型和非關(guān)系型數(shù)據(jù)庫(kù)的數(shù)據(jù),進(jìn)行全面的分析??蛻糁恍柙跀?shù)據(jù)庫(kù)中選擇包含所需數(shù)據(jù)的數(shù)據(jù)表,數(shù)據(jù)便會(huì)自動(dòng)復(fù)制到Amazon Redshift。
總體來(lái)看,生成式AI浪潮的到來(lái),數(shù)據(jù)的重要性與日俱增,是企業(yè)獨(dú)特競(jìng)爭(zhēng)力的關(guān)鍵所在。從今年re:Invent大會(huì)可以看出,亞馬遜云科技正在大力推動(dòng)Zero-ETL的集成發(fā)展,陸續(xù)在多款數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)中集成Zero-ETL特性,這無(wú)疑會(huì)為亞馬遜云科技上數(shù)百萬(wàn)企業(yè)的數(shù)據(jù)處理、數(shù)據(jù)價(jià)值釋放帶來(lái)極大幫助,真正幫助企業(yè)在AI時(shí)代中發(fā)揮自己的獨(dú)特競(jìng)爭(zhēng)優(yōu)勢(shì)。
免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評(píng)論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個(gè)人觀點(diǎn),與極客網(wǎng)無(wú)關(guān)。文章僅供讀者參考,并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。
- 卷又不動(dòng),躺又不平!網(wǎng)易困在舒適區(qū)!
- 時(shí)代紅利的十字路口?《激流2》記錄五大行業(yè)的商業(yè)博弈
- 網(wǎng)翎衛(wèi)星上網(wǎng)機(jī)馳援緬甸地震,8 場(chǎng)高清直播連線詮釋“中國(guó)溫度”
- AI重塑云基礎(chǔ)設(shè)施,亞馬遜云科技打造AI定制版IaaS“樣板房”
- 謠言也有“殺傷力”,農(nóng)夫山泉應(yīng)對(duì)輿情錯(cuò)在什么地方?
- 企業(yè)級(jí)AI“脫虛向?qū)崱?,落地還有幾道檻?
- 電商新趨勢(shì),從“真人一鍵克隆”數(shù)字人進(jìn)軍直播間開始
- 劉興亮 | 如何走出AI幻覺
- 在線教育退潮,硬件增長(zhǎng)啞火!網(wǎng)易有道押注AI!
- 上線月余日單百萬(wàn),和商家聊完,該重估京東外賣了
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。