本课程的目标是引导想从事大数据处理的IT人员进行Spark入门学习，能够应用Scala进行Spark应用程序开发、掌握Spark的基本运行原理及编程模型，能够熟悉运用Spark SQL进行大数据仓库的开发，掌握Spark流式计算、Spark机器学习及图计......
admin
文章浏览阅读1.1w次，点赞4次，收藏15次。1、Windows中安装scala，配置开发环境；2、IDEA2017中搭建scala开发环境；3、开发scala项目，输出Hello world。_2017idea对应scaca...
admin
文章浏览阅读4.9k次。 搭建和使用最新版的Spark3.2.0，在版本上踩了很多坑，特此记录一下，避免后来者犯错。首先看下图，即官网下载Spark的版本选择上的红框介绍： 这里介绍了Spark3用的是Scala2.12，Spark3.2+用的是Scala2.......
admin
文章浏览阅读1.5k次。简介Scala(斯嘎啦)，Scalable Language（可伸缩编程语言），它是基于JVM的多范式编程语言，通俗的讲Scala是一种运行在JVM上 的函数式面向对象的编程语言。它集成了面向对象和面向函数式编程的各种特性，以及......
admin
文章浏览阅读6.8k次。List组成结构：数组由head tail两部分组成：head表示第一个元素，tail表示其它元素。:::操作符：list与list之间进行连接符:::List的foldLeft、foldRight、sort函数操作。ListBuffer、ArrayBuffer、Queue、Stack函数操作。_case head......
admin
好程序员大数据教程Scala系列之隐式转换和隐式参数5.1. 概念隐式转换和隐式参数是Scala中两个非常强大的功能，利用隐式转换和隐式参数，你可以提供优雅的类库，对类库的使用者隐匿掉那些枯燥乏味的细节。5.2. 作用隐式的对......
admin
本系列课程将基于RedHat Linux 7.4版本、Hadoop 2.7.3、Spark 2 版本全面介绍大数据的整体内容，让学员深入理解并掌握运行机制和原理，从而进一步掌握大数据的相关内容。...
admin
文章浏览阅读1.8w次，点赞4次，收藏52次。IDEA配置scala进入File——Settings——Plugins，然后在搜索框搜索scala，然后点击安装，等安装完毕，需要重启IDEA。接着，我们新建一个scala项目，File——New——Scala——IDEA，然后这里，如果......
admin
文章浏览阅读82次。1：Scala和Java的对比:1.1:Scala中的函数是Java中完全没有的概念。因为Java是完全面向对象的编程语言，没有任何面向过程编程语言的特性，因此Java中的一等公民是类和对象，而且只有方法的概念，即寄存和依赖......
admin
文章浏览阅读1k次，点赞2次，收藏6次。安装环境：Linux CentOS7https://blog.csdn.net/qq_43598179/article/details/106070236_spark-3.1.2-bin-without-hadoop.tgz...
admin
文章浏览阅读410次。Scala基础教程–09–包的理解与样例类的使用章节目标理解包的相关内容掌握样例类, 样例对象的使用掌握计算器案例1. 包实际开发中, 我们肯定会遇到同名的类, 例如: 两个Person类. 那在不改变类名的情况下, ......
admin
文章浏览阅读647次。Spark 运行模式Apache Spark 是用于大规模数据处理的统一分析引擎，它提供了 Java、Scala、Python 和 R 语言的高级 API，以及一个支持通用的执行图计算的优化引擎。Spark Core 是 Spark 的核心模块，负责任务调度、内......
admin
文章浏览阅读291次。目录Scala 安装及应用Scala简介Scala安装： 1.window安装： 2.Linux安装 3.启动：Scala基础应用 1.数据类型,变量,方法,函数 2.复杂函数 3.集合常用操作其他复杂操作：1.scala 单例对象Object2.scala 类,柱构造器,辅助构......
admin
友情链接申请要求： 不违法不降权 权重相当 请联系QQ：737597453
