192. 统计词频

作者: 莫小鹏 | 来源:发表于2018-09-27 23:39 被阅读0次

题目描述

写一个 bash 脚本以统计一个文本文件 words.txt 中每个单词出现的频率。

为了简单起见,你可以假设:

words.txt只包括小写字母和 ' ' 。
每个单词只由小写字母组成。
单词间由一个或多个空格字符分隔。
示例:

假设 words.txt 内容如下:

the day is sunny the the
the sunny is is

你的脚本应当输出(以词频降序排列):

the 4
is 3
sunny 2
day 1

说明:

不要担心词频相同的单词的排序问题,每个单词出现的频率都是唯一的。
你可以使用一行 Unix pipes 实现吗?

分析

使用awk命令做统计
awk命令说明:
awk程序的结构:
每个awk程序都是一个或多个模式-动作语句的序列:
pattern { action }
pattern { action }
...

模式匹配,则执行动作
常见模式有:
BEGIN, END,/正则表达式/,表达式

统计的action, 模式省略:

{for(i=1;i <= $NF; i++){++m[$i]}}

说明:
NF是分隔的字段数目
0是整行1-$NF表示分隔的第一个到最后一个字符串
m是hash表
输出结果的模式-动作:

END {for(k in m){print k, m[k]}}

END是读取到结束的模式
for(k in m)
k是数组的key

最后需要对结果进行排序,使用

|sort -nrk 2

-n表示按数值排序
-r表示逆序
-k 2表示按第二个字段排序

代码

# Read from the file words.txt and output the word frequency list to stdout.
awk '{for(i=1;i<= NF;i++) {++m[$i]}} END{for(k in m){ print k,m[k]}}' words.txt | sort -rnk 2

题目链接

https://leetcode-cn.com/problems/word-frequency/description/

相关文章

  • 192. 统计词频

    题目描述 写一个 bash 脚本以统计一个文本文件 words.txt 中每个单词出现的频率。 为了简单起见,你可...

  • 192. 统计词频

  • bash统计词频

    leetcode题目192.统计词频写一个 bash 脚本以统计一个文本文件 words.txt 中每个单词出现的...

  • 用Py做文本分析3:制作词云图

    1.词频统计 在词频统计之前,需要先完成分词工作。因为词频统计是基于分词后所构建的list进行的。 1.1使用Pa...

  • 词频统计

    通过Linux命令实现词频统计 现在有一遍英语文档The_Man_of_Property.txt通过Linux命令...

  • 词频统计

    词频统计 请设计一个高效的方法,找出任意指定单词在一篇文章中的出现频数。 给定一个string数组article和...

  • 辽经干python 元组和字典(2)

    字典 词频统计 词云

  • 统计词频并按词频排序

    一、背景描述 源文件格式需要处理的源文件格式如下:ont:aasd:asdfd:cc 处理任务我们需要统计冒号之后...

  • 开启自学人生

    day6 姓名:邓超 学号:1901010076 学习:封装统计英文词频的函数+封装统计中文词频的函数。 总结:1...

  • python统计词频

    一、最终目的 统计四六级真题中四六级词汇出现的频率,并提取对应的例句,最终保存到SQL数据库中。 二、处理过程 1...

网友评论

    本文标题:192. 统计词频

    本文链接:https://www.haomeiwen.com/subject/sjtuoftx.html