scala的统计词频

package test23

import java.io.PrintWriter

import scala.io.Source

object test {

def main(args: Array[String]): Unit = {

//从文件1.txt中,读取内容

val content = Source.fromFile("1.txt").mkString

println(content)

//把字符串中的每个单词,拆出来

//正则表达式

//\\w+:大写字符表示:非字(不是一个字的字符。例如:空格,逗号,句号,换行。。。。)

// +:一个或者多个

val arr = content.split("\\w ")//得到一个字符串数组

arr.foreach(println)

//如果有一个字符串数组:

val arr1= Array("thank","you","much","thank","very")

val m1 = scala.collection.mutable.Map[String,Int]()

arr1.foreach(word =>{

//检查是否出现过

if(m1.contains(word)){

//把票数+1

m1(word)+=1

}else{

//票数为1

m1(word) = 1

}

})

//对于m1,他是一个Map(thank:10,is:5),现在需要对他进行排序,把出现次数最多的放在最前面,然后再输出

//(thank,10)

//只要排序之前结果的15个?在list中取出前15个

val sortedM1 = m1.toList.sortWith((a,b)=> a._2>b._2).filter(a=>a._1.length>2).slice(0,15)

//输出排序后的Map

// sortedM1.foreach { case (word, count) =>

// println(s"{word}:{count}")

//4.把结果保存到一个新文件中

//开始写入

val writer = new PrintWriter("3.txt")

//排序后输出Map

//把结果保存到一个新文件中

writer.println("统计结果是:")

sortedM1.foreach{case(word,cishu)=>println(s"{word}:{cishu}")}

writer.close()//结束写入

}

}

相关推荐
哈哈很哈哈25 分钟前
Spark 核心 RDD详解
大数据·分布式·spark·scala
想用offer打牌3 小时前
线程池踩坑之一:将其放在类的成员变量
后端·面试·代码规范
DTS小夏11 小时前
Linux 系统 + IDEA+Scala 插件:新手进阶开发指南
linux·scala·intellij-idea
渣渣盟2 天前
Spark核心:单跳转换率计算全解析
大数据·spark·scala·apache
bikong72 天前
命令模式,餐厅订单管理系统C++
命令模式
闯闯桑3 天前
Spark 中spark.implicits._ 中的 toDF和DataFrame 类本身的 toDF 方法
大数据·ajax·spark·scala
幻灵尔依4 天前
前端编码统一规范
javascript·vue.js·代码规范
薛定谔的猫24 天前
前端工程化系列(一):编码规范相关
前端·代码规范·前端工程化
围巾哥萧尘4 天前
Batchify - AI 产品镜头生成器的产品经验🧣
代码规范
Hilaku4 天前
深入URL和URLSearchParams:别再用正则表达式去折磨URL了
前端·javascript·代码规范