怎么用VIM清除重复的一行(单词)

Vim、Emacs配置和使用
回复
jsjcjsjc
帖子: 152
注册时间: 2007-03-03 13:36

怎么用VIM清除重复的一行(单词)

#1

帖子 jsjcjsjc » 2010-01-18 2:36

怎么用VIM清除重复的一行(单词)
最近在用PDA学英语,觉得那些4 6级单词很多用不到,就自己在网上找了3份按照英语中词频分类的最常用单词2000,貌似一个是口语,一个是书写的
想把2个文本整合一下,去处重复的保留不一样的,应该怎么办啊
例如文本1:

代码: 全选

a
s
d
f
g
h
j
文本2

代码: 全选

a
s
d
v
f
b
n
j
m
应该整合成

代码: 全选

a
s
d
f
g
h
j
v
n
m
不知道其他有有需要不,我把文本传上来了
附件
en.zip
(21.28 KiB) 已下载 28 次
jsjcjsjc
帖子: 152
注册时间: 2007-03-03 13:36

Re: 怎么用VIM清除重复的一行(单词)

#2

帖子 jsjcjsjc » 2010-01-18 2:38

偶也整理的很累啊 都凌晨2点半了 都是VIM学的不扎实~~
头像
yingfei
帖子: 273
注册时间: 2007-09-03 18:34
来自: 羊城通

Re: 怎么用VIM清除重复的一行(单词)

#3

帖子 yingfei » 2010-01-18 7:52

这个不是用vim来做的事。
man uniq
  • Ubuntu 10.10 ~
onelynx
帖子: 817
注册时间: 2008-11-13 16:03

Re: 怎么用VIM清除重复的一行(单词)

#4

帖子 onelynx » 2010-01-18 10:34

yingfei 写了:这个不是用vim来做的事。
man uniq
可以试试这个
:%s/^\(.*\)\n\1$/\1/
jsjcjsjc
帖子: 152
注册时间: 2007-03-03 13:36

Re: 怎么用VIM清除重复的一行(单词)

#5

帖子 jsjcjsjc » 2010-01-18 13:35

yingfei 写了:这个不是用vim来做的事。
man uniq
我觉得可以的,比如把3个文本复制在一个文本内,按照单词长度从小到大排列,这样一样的单词会在一起,
然后应该有办法把上下一样的单词(行)去掉的吧
头像
yingfei
帖子: 273
注册时间: 2007-09-03 18:34
来自: 羊城通

Re: 怎么用VIM清除重复的一行(单词)

#6

帖子 yingfei » 2010-01-18 17:06

代码: 全选

cat file_a  file_b file_c | uniq   > file_ok
这样应该就差不多了。 不用那么麻烦。
  • Ubuntu 10.10 ~
jsjcjsjc
帖子: 152
注册时间: 2007-03-03 13:36

Re: 怎么用VIM清除重复的一行(单词)

#7

帖子 jsjcjsjc » 2010-01-18 18:15

Emeditor 貌似就可以
头像
openware
帖子: 173
注册时间: 2009-02-22 14:15
联系:

Re: 怎么用VIM清除重复的一行(单词)

#8

帖子 openware » 2010-01-18 18:22

六楼正解,什么工具干什么事。。
Desire Freedom, Love Beauty, Keep Hacking。
头像
cnchyan
帖子: 106
注册时间: 2005-06-19 23:33

Re: 怎么用VIM清除重复的一行(单词)

#9

帖子 cnchyan » 2010-01-18 22:10

要先排序才行吧!
Ubuntu Karmic
acer 5595 : core2 duo T7200;2*1024M DDR2-667 ;intel 965pm;ati mobility readon X1600

贫贱不能移,富贵不能淫,威武不能屈
头像
anticlockwise
帖子: 2394
注册时间: 2007-03-01 20:46
来自: 湖南长沙

Re: 怎么用VIM清除重复的一行(单词)

#10

帖子 anticlockwise » 2010-01-22 0:40

yingfei 写了:

代码: 全选

cat file_a  file_b file_c | uniq   > file_ok
这样应该就差不多了。 不用那么麻烦。
排序!!

代码: 全选

 cat file_a file_b file_c | sort | uniq > file_ok
头像
huabinwu
帖子: 68
注册时间: 2008-08-15 14:38

Re: 怎么用VIM清除重复的一行(单词)

#11

帖子 huabinwu » 2010-02-06 7:04

Vim 是神器。 :em03

代码: 全选

:sort u
头像
HuaChong
帖子: 493
注册时间: 2006-09-12 17:10

Re: 怎么用VIM清除重复的一行(单词)

#12

帖子 HuaChong » 2010-02-19 21:54

怎么感觉sort|uniq就可以解决?
头像
jioyo源
帖子: 3476
注册时间: 2008-10-08 13:48

Re: 怎么用VIM清除重复的一行(单词)

#13

帖子 jioyo源 » 2010-02-25 23:30

很简单的东西搞这么复杂干嘛……
--------------------------------------
论坛精华贴全集:http://forum.ubuntu.org.cn/viewtopic.php?f=48&t=199845
book:http://forum.ubuntu.org.cn/viewtopic.php?f=21&t=198286
回复