scala函数式编程

1.作为值的函数

在Scala中,函数和数字一样,可以在变量中存放函数。可以把函数赋值给一个变量,格式为:val foee=fun _(函数名+空格+_)形式

2.匿名函数

在scala中,不需要给每一个函数命名,而是将该匿名函数赋值给一个变量

例如:Array(3,4,5).map((x:Double)=>3*x)

//Array(9,12,15)

在这里,我们告诉map方法,将每个元素乘以3

匿名函数一般格式:(参数1,参数2,...)=>{函数体(代码块)}

3.带函数参数的函数

实现接受另一个函数作为参数的函数

例如:def value(f: (Double)=>Double)=f(0.25)//这里的参数是任何接受Double并返回Double的函数

然后调用:value(sqrt_)//0.5

spark源码中主要是对集合的处理。由于value是一个接受函数参数的函数,因此它被称为高阶函数。

高阶函数也可以产出另一个函数,例如:

def mulBy(factor: Double)=(x: Double)=>factor*x

val quintuple=mulBy(5)

quintple(20)//100

4.函数返回值也是函数

def func(s:String)=(m:String)=>println(s+":"+m)

func("spark")返回的是一个函数,在函数体中,对于输入参数,只使用一个,则输入参数名可以省略,用_(占位符)替代

例如:val array=Array(1,2,3,4)

array.map(2*_).foreach(println)//2,4,6,8

5.闭包,操作作用域,闭包由代码和代码用到的任何非局限变量定义构成

def mulBy(factor: Double)=(x: Double)=>factor* x

考虑如下调用:

val a=mulBy(3)

val b=mulBy(0.5)

println(a(14)+" "+b(14))//42 7

函数在执行完后,再次执行该函数,函数内部参数仍能被访问

6.柯里化:n个参数的函数,被转换成n个函数

例如:def sum(x:Int,y:Int)=x+y

def sum(x:Int)(y:Int)=x+y

7.SVM转换

在scala中,每当需要告诉另一个函数做某事时,就会传一个函数参数给它。Java并不支持函数,java程序员需要付出更多才能达到相同的效果。其通常做法是将动作放在一个实现某接口的类中,然后将该类的一个实例传递给另一个方法。

为了启用这个语法,需要提供隐式转换。

8.集合式函数编程

主要是对List,Set集合的函数操作

val list=List("Scala","Spark","Hadoop")

list.map(_)

list.map(println)

mutable(可变),immutable(不可变)

scala.collection.Map :不可变

scala.collection.mutable.Map:可变

实际的一个函数编程例子:

统计一个文件夹下面所有文件中所有单词出现的总次数。

以空格作为单词的分隔符,test文件夹下有两个文本文件1.txt,2.txt

import java.io.File

import scala.io.Source

object SecondJob {

def main(args: Array[String]): Unit = {

val dirfile=new File("G:/data/test")

val files=dirfile.listFiles

for(file <-files) println(file)

val listFiles=files.toList

val wordsMap=scala.collection.mutable.Map[String,Int]()

listFiles.foreach( file =>Source.fromFile(file).getLines().foreach(line=>line.split(" ").

foreach(

word=>{

if (wordsMap.contains(word)) {

wordsMap(word)+=1

}else {

wordsMap+=(word->1)

}

}

)

)

)

println(wordsMap)

for((key,value)<-wordsMap) println(key+": "+value)

}

}

时间: 2024-08-07 04:14:20

scala函数式编程的相关文章

第3课 Scala函数式编程彻底精通及Spark源码阅读笔记

本课内容: 1:scala中函数式编程彻底详解 2:Spark源码中的scala函数式编程 3:案例和作业 函数式编程开始: def fun1(name: String){ println(name) } //将函数名赋值给一个变量,那么这个变量就是一个函数了. val fun1_v = fun1_ 访问 fun1_v("Scala") 结果:Scala 匿名函数:参数名称用 => 指向函数体 val fun2=(content: String) => println(co

Scala函数式编程进阶

1 package com.dtspark.scala.basics 2 3 /** 4 * 函数式编程进阶: 5 * 1,函数和变量一样作为Scala语言的一等公民,函数可以直接赋值给变量: 6 * 2, 函数更长用的方式是匿名函数,定义的时候只需要说明输入参数的类型和函数体即可,不需要名称,但是如果你要使用的话,一般会把这个匿名函数赋值给一个变量(其实是val常量),Spark源码中大量存在这种语法,必须掌握: 7 * 3, 函数可以作为参数直接传递给函数,这极大的简化的编程的语法,为什么这

Scala函数式编程设计原理 第一课 编程范式(Programming Paradigms)

我使用Scala有一两年的时间了,这门语言仿佛有一种魔力,让人用过就不想放手.Scala给我的整个程序生涯带来了非常深刻的影响,让我学会了函数式编程,让我知道了世界上居然还有这么一种优雅.高效.强大的语言. Scala在国外已经非常流行,但是不知为何,在国内总是不温不火,在此,我特别想为Scala这门语言在国内的发展做一些事情.不才不敢谈Scala的编程经验,因为要成为Scala大神还有很长的路要走,只好翻译一份Scala视频教程以飨读者,大家发现有误的地方,请多多批评指教. 这个视频的作者是S

Scala函数式编程(四)函数式的数据结构 下

前情提要 Scala函数式编程指南(一) 函数式思想介绍 scala函数式编程(二) scala基础语法介绍 Scala函数式编程(三) scala集合和函数 Scala函数式编程(四)函数式的数据结构 上 1.List代码解析 今天介绍的内容,主要是对上一篇介绍的scala函数式数据结构补充,主要讲代码.可以先看看上一节,主要讲的是函数式的list,Scala函数式编程(四)函数式的数据结构 上.这些代码我都放在我的公众号里面,包括函数式的List以及一个函数式的二叉搜索树,关注公众号:哈尔的

Scala函数式编程(五) 函数式的错误处理

前情提要 Scala函数式编程指南(一) 函数式思想介绍 scala函数式编程(二) scala基础语法介绍 Scala函数式编程(三) scala集合和函数 Scala函数式编程(四)函数式的数据结构 上 Scala函数式编程(四)函数式的数据结构 下 1.面向对象的错误处理 在介绍scala的函数式的错误处理之前,我们要先来介绍一下其他情况下的错误处理方式. 以java为例,常见的错误处理方式不外乎两种,一种是及时捕捉到异常,然后当场进行处理. try{ ... }catch(Excepti

【Scala】Scala函数式编程初探

函数式编程 函数式编程是种编程典范,它将电脑运算视为函数的计算.函数编程语言最重要的基础是 λ 演算(lambda calculus).而且λ演算的函数可以接受函数当作输入(参数)和输出(返回值).和指令式编程相比,函数式编程强调函数的计算比指令的执行重要.和过程化编程相比,函数式编程里,函数的计算可随时调用. 命令式编程是面向计算机硬件的抽象,有变量(对应着存储单元),赋值语句(获取,存储指令),表达式(内存引用和算术运算)和控制语句(跳转指令),一句话,命令式程序就是一个冯诺依曼机的指令序列

Scala 函数式编程(一) 什么是函数式编程?

为什么我们需要学习函数式编程?或者说函数式编程有什么优势?这个系列中我会用 scala 给你讲述函数式编程中的优势,以及一些函数式的哲学.不懂 scala 也没关系,scala 和 java 是类似的,在每篇的开头我也会先说明这节中用到的 scala 语法. 为什么函数式编程这几年火起来 如 Python 一样,函数式编程(FP,即Functional Programming)也是近几年才逐渐为人们所知,但它并不是一个多么新的概念.它拥有和面向对象编程(OOP)几乎等长的历史.但纵观每件事的脉络

scala函数式编程(二) scala基础语法介绍

上次我们介绍了函数式编程的好处,并使用scala写了一个小小的例子帮助大家理解,从这里开始我将真正开始介绍scala编程的一些内容. 这里会先重点介绍scala的一些语法.当然,这里是假设你有一些java或者python的基础,毕竟大部分人不会将scala当作第一门学习编程的语言. 不过这些语法知识记不住也没关系,本身语法这种东西就应该在使用中被记住.这里写这篇的目的也只是梳理一遍,方便大家对语法有个初步的印象,后面可以随时查询. PS:所使用的版本是scala 2.11.8,那我们开始吧 一.

scala函数式编程(一)

scala函数编程特点: 1.Scala函数使用命名参数: 即函数参数传递的实参与函数名相对应,与函数位置不对应. object Test { def main(args: Array[String]) { printInt(b=5, a=7); } def printInt( a:Int, b:Int ) = { println("Value of a : " + a ); println("Value of b : " + b ); } } C:/>sca