Datameer最近宣布了SmartAI，該技術(shù)將大數(shù)據(jù)與機(jī)器學(xué)習(xí)模型集成在一起，以提供更好的數(shù)據(jù)見解。

SmartAI的目標(biāo)是能夠?qū)崿F(xiàn)大數(shù)據(jù)AI的運(yùn)行，即在大數(shù)據(jù)上 規(guī)模運(yùn)行AI算法，使業(yè)務(wù)分析師能夠?qū)I模型插入分析工作流中，并能夠以安全且合規(guī)的方式完成所有這些工作。

InfoQ采訪了Datameer市場策略和情報(bào)高級(jí)總監(jiān)Andrew Brust，談到了大數(shù)據(jù)在AI方面尤其是在SmartAI中的一般角色。

InfoQ：您如何看待大數(shù)據(jù)與人工智能之間的協(xié)同作用?SmartAI如何利用這一點(diǎn)?

Brust：大數(shù)據(jù)和AI之間可能會(huì)產(chǎn)生強(qiáng)大的協(xié)同作用，但行業(yè)在促進(jìn)這一方面的工作還很少。借助SmartAI，Datameer將這兩個(gè)世界融合在一起。根據(jù)機(jī)器學(xué)習(xí)模型對(duì)數(shù)據(jù)評(píng)分主要是一個(gè)臨時(shí)過程，大部分時(shí)間是在數(shù)據(jù)科學(xué)家的工作站上完成的。但是，應(yīng)在Hadoop集群中的所有節(jié)點(diǎn)上以大數(shù)據(jù)規(guī)模自動(dòng)進(jìn)行評(píng)分。那就是他們?cè)谀抢锏哪康摹?/span>

InfoQ：機(jī)器學(xué)習(xí)涉及大量的數(shù)據(jù)準(zhǔn)備和操作?？傮w而言，這是否會(huì)影響Hadoop的優(yōu)勢，尤其是對(duì)貴公司的優(yōu)勢?

Brust：是的，數(shù)據(jù)準(zhǔn)備是我們故事的重要組成部分，是Big Data故事的重要組成部分，也是AI故事的重要組成部分。如果要進(jìn)行AI，則要選擇一種算法并訓(xùn)練一個(gè)模型。用于訓(xùn)練模型的數(shù)據(jù)必須是干凈的，僅過濾到基本的基本輸入(功能)列，并在正確的級(jí)別進(jìn)行匯總。所有這些步驟都是數(shù)據(jù)準(zhǔn)備步驟。同樣，基于原始數(shù)據(jù)中存在的值的復(fù)雜計(jì)算也得出列。Datameer使用Hadoop完成了所有這些工作，并且做得很好。因此，在產(chǎn)品中添加AI功能是非常自然的擴(kuò)展。