Scala读取单词的次数

复制代码
import scala.io.Source


//知识点:
//1.字符串.split("分隔符"):把字符串用指定的分隔符,拆分成多个部分,保存在数组中。

object Tset {
  def main(args: Array[String]): Unit = {
    //从文件1.txt读取内容
    val content = Source.fromFile("1.txt").mkString
    //println(content)

    //把字符串中的每个单词,折出来
    //正则表达式
    // \\w+:大写字符w表示:丰字(不是一个字的字符。例如:空格,逗号,句号,换行...)
    // +:一个或者多个
    val arr = content.split("\\w+")//得到是一个字符串数组

    //统计词频
    val m1 = scala.collection.mutable.Map[String,Int]()
    arr.foreach(word =>{
      //检查是否出现过
       if(m1.contains(word)){
         //出现票数+1
         m1(word) +=1
       }else{
         //没有出现票数不变
         m1(word)=1
       }
    })
    //对于m1,它是是一个Map(thank:10,is:5),现在需要对它进行排序,把出现次数最多的放在在前面,然后再输出
    //(think,10)
    //只需要排序之前的结果的前15个?在List中取出前15个?
    val sortedM1 = m1.toList.sortWith((a,b)=>a._2 > b._2).filter(a=>a._1.length>2).slice(0,15)

    //开始写入
    val writer = new java.io.PrintWriter("3.txt")
    //输出排序后的Map
    //把结果保持到一个新的文件中去
    writer.println("统计的结果是:")
    sortedM1.foreach{case (word,cishu) => writer.println(s"${word}:${cishu}")}
    writer.close() //结束写入
  }
}
相关推荐
Bin Watson6 天前
解决 Builroot 系统编译 perl 编译报错问题
开发语言·scala·perl
什么芮.9 天前
大数据应用开发和项目实战(2)
大数据·pytorch·sql·spark·scala
不要天天开心10 天前
Spark-Streaming核心编程:有状态转化操作与DStream输出
scala
欧先生^_^11 天前
Scala语法基础
开发语言·后端·scala
不要天天开心13 天前
大数据利器:Kafka与Spark的深度探索
spark·scala
不要天天开心13 天前
Kafka与Spark-Streaming:大数据处理的黄金搭档
kafka·scala
什么芮.14 天前
spark-streaming
pytorch·sql·spark·kafka·scala
爱编程的王小美18 天前
Scala 入门指南
开发语言·后端·scala
旋风小飞棍19 天前
spark和hadoop的区别与联系
大数据·开发语言·scala
搞程序的心海23 天前
Flink 编程基础:Scala 版 DataStream API 入门
大数据·flink·scala