美文网首页
python爬取关键字所在行并输出到txt

python爬取关键字所在行并输出到txt

作者: syxvip | 来源:发表于2018-04-14 21:59 被阅读0次

因为手中有几千条关键信息需要整理,所有的信息都规整的用txt保存,但是我只需要其中有关键字后面的value值,怎么搞呢?几千条信息手动肯定是不可能的,然后刚刚学习python,很神奇的语言,哈哈。试着写一下把。

未整理的txt文件

本来的意愿是爬取关键字后面的内容,即爬取name后的value值(即双引号内的内容),想到了正则表达式,但是也没有写出来,技术欠缺,所以干脆就把关键字所在的行进行提取了。

code:

f = open("1.txt",'r',encoding='gbk',errors='ignore')  #打开要处理的文件
lines = f.readlines()   
for lines in lines:      #对TXT 进行逐行读取
   if 'user_name' in lines:      #如果关键字在行中,则输出这行内容
        print(lines)
爬取后的

然而他输出的是一整行的内容,还不是我要的精确内容,索性找了个懒办法,然后利用txt的关键字替换功能把多余的字符去掉了。(还好我省写的内容比较正整齐划一,要不然无法替换。)

搞完了后 因为由于name后面的value值有空值,所以生成过了很多空行,再来解决下空白行问题。

code:

    def clear():
    file1 = open('5000.txt', 'r', encoding='utf-8') 
    file2 = open('text2.txt', 'w', encoding='utf-8') 
    try:
        for line in file1.readlines():
            if line == '\n':
                line = line.strip("\n")
            file2.write(line)
    finally:
        file1.close()
        file2.close()
if __name__ == '__main__':
    clear()

有大牛看到的话,有方法的话,希望可以教下我这个小白,万分感谢!!

相关文章

网友评论

      本文标题:python爬取关键字所在行并输出到txt

      本文链接:https://www.haomeiwen.com/subject/dwrrkftx.html