程式碼托管服務(wù)GitLab釋出數(shù)據(jù)科學(xué)團(tuán)隊(duì)的解決方案Meltano，可用於處理數(shù)據(jù)的提取、載入和轉(zhuǎn)換等工作。Meltano并沒(méi)有與GitLab原本的服務(wù)綑綁在一起，而是成為一個(gè)單獨(dú)產(chǎn)品，目的在於填補(bǔ)通用數(shù)據(jù)應(yīng)用在不同部門(mén)間的鴻溝，讓企業(yè)達(dá)成客戶(hù)支援、產(chǎn)品團(tuán)隊(duì)、銷(xiāo)售與行銷(xiāo)等工作。
GitLab提到，他們遇到跟大多數(shù)企業(yè)一樣的問(wèn)題，在工程部門(mén)擁有大量的數(shù)據(jù)，但是要將這些數(shù)據(jù)應(yīng)用在實(shí)際解決業(yè)務(wù)問(wèn)題，仍有一大段距離。於是GitLab開(kāi)發(fā)了Meltano來(lái)克服這個(gè)難題，Meltano解決方案提供建模、提取、載入、轉(zhuǎn)換、分析、筆記本與協(xié)作等功能，也就是說(shuō)整個(gè)數(shù)據(jù)科學(xué)的生命周期，都是Meltano的支援范圍。
GitLab數(shù)據(jù)分析團(tuán)隊(duì)從外部資源取得了大量數(shù)據(jù)，并轉(zhuǎn)換成可用格式，提供給公司內(nèi)的其他業(yè)務(wù)部門(mén)使用者，并最終根據(jù)數(shù)據(jù)進(jìn)行結(jié)果預(yù)測(cè)。GitLab表示，與多數(shù)數(shù)據(jù)團(tuán)隊(duì)相同，他們目前還是透過(guò)一系列的步驟與各自獨(dú)立的工具來(lái)完成這個(gè)目標(biāo)，整個(gè)流程并不順暢也沒(méi)有達(dá)到足夠穩(wěn)定的水準(zhǔn)。
他們希望可以使用最佳實(shí)踐的方法，來(lái)進(jìn)行數(shù)據(jù)分析的工作，所有工作都使用開(kāi)源工具，并能夠進(jìn)行版本控制，還可以對(duì)數(shù)據(jù)到視覺(jué)化的分析工作管線(xiàn)進(jìn)行追蹤。GitLab提到，Meltano的最終目標(biāo)就是要讓企業(yè)內(nèi)每個(gè)人都可以輕易上手，并著手進(jìn)行數(shù)據(jù)分析，而不僅是數(shù)據(jù)科學(xué)家。
GitLab數(shù)據(jù)分析師Emilie Burke提到，許多中小型企業(yè)無(wú)法進(jìn)行數(shù)據(jù)分析的工作，是因?yàn)樗麄儓F(tuán)隊(duì)中缺乏工程師，只能透過(guò)現(xiàn)存的工具產(chǎn)生報(bào)告，但是在依賴(lài)這些孤立的數(shù)據(jù)時(shí)，也就代表無(wú)法進(jìn)行跨功能的分析。他舉例，像是店家進(jìn)行促銷(xiāo)活動(dòng)，接收到了許多帳號(hào)申請(qǐng)的郵件，但是卻無(wú)法與Shopify的數(shù)據(jù)交叉比對(duì)，知道那些申請(qǐng)者有在Shopify購(gòu)買(mǎi)商品，除非後端的數(shù)據(jù)能夠串接起來(lái)。
Meltano作為一個(gè)開(kāi)源工具，企業(yè)不需要投入太多的資源來(lái)建立數(shù)據(jù)分析團(tuán)隊(duì)。目前Meltano還只支援Postgres，而Snowflake正在開(kāi)發(fā)中，但是Meltano需要能夠支援更多數(shù)據(jù)庫(kù)類(lèi)型，因此GitLab團(tuán)隊(duì)邀請(qǐng)有意愿的貢獻(xiàn)者可以加入開(kāi)發(fā)Meltano的行列。
