Scala读取单词的次数

复制代码
import scala.io.Source


//知识点:
//1.字符串.split("分隔符"):把字符串用指定的分隔符,拆分成多个部分,保存在数组中。

object Tset {
  def main(args: Array[String]): Unit = {
    //从文件1.txt读取内容
    val content = Source.fromFile("1.txt").mkString
    //println(content)

    //把字符串中的每个单词,折出来
    //正则表达式
    // \\w+:大写字符w表示:丰字(不是一个字的字符。例如:空格,逗号,句号,换行...)
    // +:一个或者多个
    val arr = content.split("\\w+")//得到是一个字符串数组

    //统计词频
    val m1 = scala.collection.mutable.Map[String,Int]()
    arr.foreach(word =>{
      //检查是否出现过
       if(m1.contains(word)){
         //出现票数+1
         m1(word) +=1
       }else{
         //没有出现票数不变
         m1(word)=1
       }
    })
    //对于m1,它是是一个Map(thank:10,is:5),现在需要对它进行排序,把出现次数最多的放在在前面,然后再输出
    //(think,10)
    //只需要排序之前的结果的前15个?在List中取出前15个?
    val sortedM1 = m1.toList.sortWith((a,b)=>a._2 > b._2).filter(a=>a._1.length>2).slice(0,15)

    //开始写入
    val writer = new java.io.PrintWriter("3.txt")
    //输出排序后的Map
    //把结果保持到一个新的文件中去
    writer.println("统计的结果是:")
    sortedM1.foreach{case (word,cishu) => writer.println(s"${word}:${cishu}")}
    writer.close() //结束写入
  }
}
相关推荐
小伍_Five1 天前
Spark实战能力测评模拟题精析【模拟考】
java·大数据·spark·scala·intellij-idea
黄雪超2 天前
DataStreamAPI实践原理——快速上手(实操详细版)
大数据·flink·scala
白总Server3 天前
C++语法架构解说
java·网络·c++·网络协议·架构·golang·scala
vortex54 天前
Perl One-liner 数据处理——基础语法篇【匠心】
开发语言·scala·perl
老兵发新帖6 天前
Coursier:安装sbt
scala
请你喝好果汁6419 天前
indel_snp_ssr_primer
大数据·开发语言·scala
MZWeiei12 天前
Spark 中,map和foreach的区别
大数据·分布式·spark·scala
MZWeiei13 天前
区分:union(),coalesce () 和 repartition ()
大数据·分布式·spark·scala
北漂老男孩13 天前
Scala与Spark:原理、实践与技术全景详解
大数据·开发语言·spark·scala·学习方法
MZWeiei13 天前
Spark 中,创建 DataFrame 的方式(Scala语言)
大数据·分布式·spark·scala