spark源码是什么语言（spark源码看什么书）

今天给各位分享spark源码是什么语言的知识，其中也会对spark源码看什么书进行解释，如果能碰巧解决你现在面临的问题，别忘了关注本站，现在开始吧！

本文目录一览：

• 1、Spark平台下，scala比java更有优势么
• 2、如何用scala语言编写 大型的spark 程序
• 3、看python的spark实现源码和scala原生源码有什么不同
• 4、问下大佬，大数据 Hadoop Spark Scala之间的关系？
• 5、Spark 中用 Scala 和 java 开发有什么区别
• 6、eclipse怎么打开spark-redis源码

Spark平台下，scala比java更有优势么

我觉得是的。

首先，Spark是用Scala写的，所以，用Scala开发Spark应用，当遇到问题需要查看源码的时候，Scala就非常有优势。

其次，Scala结合了面向对象和函数式二者的优点，如果用java开发，不用1.8新特性Lambda表达式的话，在写内联函数的时候就非常麻烦。

另外，分布式计算（比如MapReduce）灵感来源就是函数式编程语言，所以学一下Scala，了解一下函数式语言，也是有许多好处的。

如何用scala语言编写 大型的spark 程序

第一阶段：熟练掌握Scala语言1，spark框架是采用scala语言写的，精致优雅。想要成为spark高手，你就必须阅读spark源码，就必须掌握scala。

2，虽然现在的spark可以使用多种语言开发，java,python，

看python的spark实现源码和scala原生源码有什么不同

pyspark 其实底层就是 scala，只是写了一些接口封装一下，建议看一眼源码，

spark的核心代码都是scala写的，python的spark只是把核心代码进行了封装。

问下大佬，大数据 Hadoop Spark Scala之间的关系？

三者是相互独立的

Hadoop是集成了yark，hdfs、MapReduce三大组件的框架

Spark是一个优秀的基于内存的计算框架，可以独立使用，也可以和Hadoop集成使用，可以使用Hadoop的yarn进行资源管理、可以读写hdfs文件

Scala是一个基于jvm的编程语言，Spark里面有一部分源码是用Scala编写的

Spark 中用 Scala 和 java 开发有什么区别

1，构建系统的选择，sbt更合适用来构建Scala工程，maven更合适用来构建Java工程

2，对于spark中的API来说，Java和Scala有差别，但差别并不大

3，如果用Scala开发spark原型程序，可以用spark-shell“打草稿”，或者直接使用spark-shell做交互式实时查询

4，用Scala代码量将减少甚至一个数量级，不过Scala的使用门槛较高

建议：使用Scala构建spark作业，因为spark本身为sbt所构建，同时使用Scala开发spark作业将有助于理解spark的实现机制

eclipse怎么打开spark-redis源码

Spark源码是有Scala语言写成的，目前，IDEA对Scala的支持要比eclipse要好，大多数人会选在在IDEA上完成Spark平台应用的开发。因此，Spark源码阅读的IDE理所当然的选择了IDEA。

spark源码是什么语言的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于spark源码看什么书、spark源码是什么语言的信息别忘了在本站进行查找喔。