用docker 配置scala spark环境
安装Docker: 在您的系统上安装Docker。您可以从Docker官方网站下载并安装适用于您操作系统的版本。 创建Dockerfile: 在您的项目目录中创建一个名为 Dockerfile 的文件，并添加以下内容： FROM openjdk:8# 设置Scala版本ENV SCALA...
无涯教程-Scala - 函数声明
函数是执行任务的一组语句，您可以将代码分成单独的函数，从逻辑上讲，划分通常是使每个函数执行特定任务。函数声明Scala函数声明具有以下形式-def functionName ([list of parameters]) : [return type]如果您不使用等号和方法主体，则方法被隐式声明为抽象...
Scala学习系列（二）——环境安装配置
Scala下载地址：https://www.scala-lang.org/download/一、安装JDK首先，因为Scala是运行在JVM平台上的，所以安装Sca...
大数据开发之Scala-第3章 运算符
Scala运算符的使用和Java运算符的使用基本相同，只有个别细节上不同。 3.1 算术运算符 1）基本语法 3.2 关系运算符（比较运算符） 1）基本语法 2）案例实操 （1）需求1 object Test01_Operation{ def main(args: Array[String]...
无涯教程-Scala - 数组(Arrays)
Scala提供了一种数据结构数组 ，它存储了相同类型元素的固定大小的顺序集合。声明数组要在程序中使用数组，必须声明一个变量以引用该数组，并且必须指定该变量可以引用的数组的类型。var z:Array[String]=new Array[String](3)orvar z=new Array[Stri...
Scala XML
XML直接在代码中使用 XML 字面量val doc: Elem = <html><head><title>Test&l...
Spark学习笔记3（IDEA编写scala代码并打包上传集群运行）
Spark学习笔记3（IDEA编写scala代码并打包上传集群运行）Spark学习笔记3IDEA编写scala代码并打包上传集群运行我们在IDEA上的maven项目已经搭建完成了，现在可以写一个简单的spark代码并且打成jar包上传至集群，来检验一下我们的spark搭建后是否真正可以使用了1.今天...
scala学习之第三天：数组的特性与使用技巧
1、数组Scala数组与Scala序列是兼容的 - 在需要Seq[T]的地方可由Array[T]代替。最后，Scala数组支持所有的序列操作。隐式转换方法1：通过scala.collection.mutable.WrappedArray将数组转换成序列/* ---示例代码----*/scala>...
深圳scala-meetup-20180902（3）- Using heterogeneous Monads in for-comprehension with Monad Transformer
scala中的Option类型是个很好用的数据结构，用None来替代java的null可以大大降低代码的复杂性，它还是一个更容易解释的状态表达形式，比如在读取数据时我们用Some(Row)来代表读取的数据行Row，用None来代表没有读到任何数据，免去了null判断。由此我们可以对数据库操作的结果有...
Scala-IDE构建Maven项目
本教程演示如何使用Scala-IDE构建一个Scala Maven项目。1. 下载Scala IDE通过以下链接下载Scala IDE： http://scala-ide.org/download/sdk.html根据自己的平台选择自己相应版本下载。下载完成之后解压，如下： 选择eclipse.ex...
Scala：没有continue，break怎么办？
scala自身是没有continue，break这两个语法关键词的。但是实际上我们还是很希望有这两个语法，那么我们是否可以自己实现呢？从官网上搜索，我们可以找到一下关于break的类相关资料：Breaks extends AnyRefA class that can be instantiated ...
scala编程第16章学习笔记（3）——List类的高阶方法
列表间映射：map、flatMap和foreach1.xs map f 操作返回把函数f应用在xs的每个列表元素之后由此组成的新列表。如：scala> List(1, 2, 3) map (_ + 1)res0: List[Int] = List(2, 3, 4)scala> val w...
scala编程第17章学习笔记（3）
可变（mutable）集合与不可变（immutable）集合为了更易于完成不可变集合到可变集合的转换，或者反向转换，Scala提供了一些语法糖。纵使不可变集和映射并不支持真正的+=方法，Scala还是为此提供了+=的语法解释。scala> val people = Set("Nancy", "...
scala编程第17章学习笔记（1）——集合类型
列表列表的初始化及对其首尾的访问：scala> val colors = List("red", "blue", "green")colors: List[String] = List(red, blue, green)scala> colors.headres15: String = ...
scala编程第16章学习笔记（2）
转换列表：toIterator, toArray,copyToArrayList类的toArray方法将递归存放的列表转换为连续存放的数组Array类的toList方法将连续存放的数组转换为递归存放的列表scala> val arr = abcde.toArrayarr: Array[Char...
scala编程第16章学习笔记（4）——List对象的方法
通过元素创建列表：List.applyList(1, 2, 3) 等价于List.apply(1, 2, 3):scala> List.apply(1, 2, 3)res0: List[Int] = List(1, 2, 3)创建数值范围：List.rangeList.range(from, ...
Scala隐式转换和隐式参数
隐式转换Scala提供的隐式转换和隐式参数功能，是非常有特色的功能。是Java等编程语言所没有的功能。它可以允许你手动指定，将某种类型的对象转换成其他类型的对象或者是给一个类增加方法。通过这些功能，可以实现非常强大、特殊的功能。Scala的隐式转换，其实最核心的就是定义隐式转换方法，即implici...
Scala元组
object TupleTest { def basic(firstName: String, lastName: String, age: Int): (String, String, Int) = (firstName, lastName, age) def main(args: Array
scala写算法-快排
快排算法很经典，今天用scala的函数式思维来整理一下并实现:def qsort(list: List[Int]):List[Int]=list match { case Nil=>Nil case ::(pivot,t)=>qsort(t.filter(_<=pivo...
Scala很难！
Scala很难！本文是从 Yes, Virginia, Scala is hard 这篇文章翻译而来。首先要说的是，我是一个Scala粉丝，我作为一个Scala语言的倡导者差不多有5年历史了。我写了不少Scala语言方面的书和文章。我曾在数十个公司里做过Scala和Lift框架项目的开发。我对很多的...