如何利用生成式人工智能轉(zhuǎn)變數(shù)據(jù)工程

隨著企業(yè)尋求提高生產(chǎn)力和增強(qiáng)客戶體驗(yàn)的方法,生成式人工智能預(yù)計(jì)將在未來十年在每個(gè)行業(yè)留下印記。對(duì)于數(shù)據(jù)工程,已經(jīng)有相當(dāng)多的用例正在由領(lǐng)先的公司進(jìn)行測(cè)試,目的是減少工程師需要做的手工工作量并協(xié)助他們進(jìn)行代碼構(gòu)建。

以下是生成式人工智能可以幫助數(shù)據(jù)工程師的一些用例。

數(shù)據(jù)清理和準(zhǔn)備

數(shù)據(jù)有多種格式,成功的數(shù)據(jù)主導(dǎo)項(xiàng)目的關(guān)鍵因素之一是確保數(shù)據(jù)高質(zhì)量且可由終端平臺(tái)或算法讀取。對(duì)于數(shù)據(jù)工程師來說,有一些工具可用于重新格式化和清理數(shù)據(jù),但由于數(shù)據(jù)不完整或格式不受支持,這些工具可能會(huì)陷入處理階段。

借助生成式人工智能的自然語言處理功能,數(shù)據(jù)工程師將能夠要求對(duì)一批數(shù)據(jù)進(jìn)行特定的清理或準(zhǔn)備,避免一批數(shù)據(jù)因不兼容而被廢棄的問題。

代碼轉(zhuǎn)換

在遷移或現(xiàn)代化項(xiàng)目期間,編程語言或平臺(tái)的轉(zhuǎn)變可能需要完整的代碼轉(zhuǎn)換。這是一個(gè)非常耗時(shí)的過程,因?yàn)榫幋a語言之間的一對(duì)一更改并不總是可用,程序員需要能夠識(shí)別正確的替代品。

由于像ChatGPT這樣的生成式AI工具已經(jīng)接受過海量數(shù)據(jù)的訓(xùn)練,它被認(rèn)為是程序員的天然助手,因?yàn)樗軌騾⒖嘉臋n、經(jīng)過測(cè)試的代碼和論壇來找到多種編程語言之間的最佳轉(zhuǎn)換。

生成代碼

與代碼轉(zhuǎn)換類似,由于生成式人工智能工具已經(jīng)過現(xiàn)有代碼庫和最佳實(shí)踐的培訓(xùn),數(shù)據(jù)工程師可以使用它們來生成與已添加內(nèi)容一致的新代碼。這些工具還可以分析現(xiàn)有代碼并提供減少重復(fù)或樣板代碼數(shù)量的建議。

除此之外,數(shù)據(jù)工程師還可以使用這些系統(tǒng)來設(shè)計(jì)和實(shí)現(xiàn)數(shù)據(jù)管道,為工程師提供更多時(shí)間來分析數(shù)據(jù)質(zhì)量和應(yīng)用性能。

測(cè)試

生成式人工智能可以以各種形式部署來測(cè)試性能和安全性。它可以生成適合所交付的應(yīng)用程序或服務(wù)的配置文件的測(cè)試用例,包括數(shù)據(jù)工程團(tuán)隊(duì)可能沒有想到的邊緣用例。

創(chuàng)建可視化

已經(jīng)有一些程序可以獲取數(shù)據(jù)并將其可視化,但借助生成式人工智能,數(shù)據(jù)工程師可以要求進(jìn)行更多利基更改并測(cè)試數(shù)據(jù)在各種場(chǎng)景中的外觀。通過將雙手從方向盤上解放出來,數(shù)據(jù)工程師可以嘗試更多類型的可視化,以找到有效的可視化。

CIBIS峰會(huì)

由千家網(wǎng)主辦的2023年第24屆CIBIS建筑智能化峰會(huì)即將正式拉開帷幕,本屆峰會(huì)主題為“智慧連接,‘筑’就未來”, 將攜手全球知名智能化品牌及業(yè)內(nèi)專家,共同探討物聯(lián)網(wǎng)、AI、云計(jì)算、大數(shù)據(jù)、IoT、智慧建筑、智能家居、智慧安防等熱點(diǎn)話題與最新技術(shù)應(yīng)用,分享如何利用更知慧、更高效、更安全的智慧連接技術(shù),“筑”就未來美好智慧生活。歡迎建筑智能化行業(yè)同仁報(bào)名參會(huì),分享交流!

報(bào)名方式

成都站(10月24日):https://www.huodongxing.com/event/6715336669000

西安站(10月26日):https://www.huodongxing.com/event/3715335961700

長(zhǎng)沙站(11月09日):https://www.huodongxing.com/event/7715337579900

上海站(11月21日):https://www.huodongxing.com/event/9715337959000

北京站(11月23日):https://www.huodongxing.com/event/3715338464800

廣州站(12月07日):https://www.huodongxing.com/event/6715338767700

更多2023年CIBIS峰會(huì)信息,詳見峰會(huì)官網(wǎng):http://summit.qianjia.com/

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2023-10-08
如何利用生成式人工智能轉(zhuǎn)變數(shù)據(jù)工程
數(shù)據(jù)有多種格式,成功的數(shù)據(jù)主導(dǎo)項(xiàng)目的關(guān)鍵因素之一是確保數(shù)據(jù)高質(zhì)量且可由終端平臺(tái)或算法讀取。對(duì)于數(shù)據(jù)工程師來說,有一些工具可用于重新格式化和清理數(shù)據(jù),但由于數(shù)據(jù)不完整或格式不受支持,這些工具可能會(huì)陷入處理階段。

長(zhǎng)按掃碼 閱讀全文