java如何編寫接口 Spark中用Scala和java開(kāi)發(fā)有什么區(qū)別?
Spark中用Scala和java開(kāi)發(fā)有什么區(qū)別?Scala比Java有巨大的優(yōu)勢(shì)。當(dāng)我在熟悉Scala之后再看Java代碼時(shí),我想讀匯編如果你只是編寫spark應(yīng)用程序,你不必學(xué)習(xí)Scala。您可以
Spark中用Scala和java開(kāi)發(fā)有什么區(qū)別?
Scala比Java有巨大的優(yōu)勢(shì)。當(dāng)我在熟悉Scala之后再看Java代碼時(shí),我想讀匯編如果你只是編寫spark應(yīng)用程序,你不必學(xué)習(xí)Scala。您可以直接使用Spark的javaapi或pythonapi。但是由于語(yǔ)言的差異,用Java開(kāi)發(fā)spark應(yīng)用程序非常繁瑣。幸運(yùn)的是,帶有l(wèi)ambda的java8有了改進(jìn)。在spark的應(yīng)用開(kāi)發(fā)中,學(xué)習(xí)Scala主要有兩個(gè)優(yōu)點(diǎn):開(kāi)發(fā)效率高,代碼簡(jiǎn)單;如果在使用spark的過(guò)程中出現(xiàn)異常情況,熟悉spark源代碼,可以事半功倍
謝謝您的邀請(qǐng)
!關(guān)鍵是要深入了解Hadoop/spark的計(jì)算模型和實(shí)現(xiàn)原理,以及常用的數(shù)據(jù)分析方法和分布式算法。實(shí)際的分析工作甚至可以用任何語(yǔ)言編寫,并且有自己的流接口,而不需要使用Java。此外,與Hadoop不同,Spark的母語(yǔ)是Scala。
這取決于你對(duì)自己技能的掌握程度。