首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >将单词合并成一行

问将单词合并成一行
EN

Stack Overflow用户
提问于 2012-12-21 16:21:34
回答 2查看 1.3K关注 0票数 2

我目前正在使用Pythonv2.6,并试图将单词合并成一行。我的代码应该从文本文件中读取数据,其中有两行数据,这两行数据都是字符串。然后,每次接受第二行数据,即句子中的单词,这些数据由分隔符字符串分隔,这样:

在.txt内部:

代码语言:javascript
复制
"delimiter_string"
"row_1_data" "row_2_data"  
"row_1_data" "row_2_data"  
"row_1_data" "row_2_data"  
"row_1_data" "row_2_data"  
"row_1_data" "row_2_data"  
"delimiter_string" 
"row_1_data" "row_2_data"  
"row_1_data" "row_2_data"  
...

这些"row_2_data“将在后面加进一个句子。抱歉,介绍时间太长了。

这是我的代码:

代码语言:javascript
复制
import sys
import re

newLine = ''

for line in sys.stdin:

    word = line.split(' ')[1]

    if word == '<S>+BSTag': 
        continue

    elif word == '</S>+ESTag':
        print newLine
        newLine = ''
        continue

    else:
        w = re.sub('\[.*?]', '', word)

        if newLine == '':
            newLine += w
        else:
            newLine += ' ' + w

"BSTag“是”句子开始“的标记,"ESTag”是“句子结束”的标记:所谓的“分隔符”。"re.sub“用于特殊用途,据我所知,它起作用。

问题是,当我使用下面的命令从linux中的命令行执行这个python脚本时:$ cat,file.txt,script.py,script.py,less,我看不到任何输出,只看到一个空白文件。

对于那些不熟悉linux的人,我想这个问题与终端执行无关,因此您可以忽略这个部分。简单地说,代码没有按预期工作,我也找不到一个错误。

如有任何帮助,将不胜感激,并感谢您阅读这篇长篇文章:)

好的,问题解决了,这实际上是一个语料库错误,而不是编码错误。在文本文件中检测到一个非常奇怪的条目,这导致了问题。移除它解决了它。如果您想要进行类似的文本处理,可以使用这两种方法:我的和由“s脑”表示的方法。

干杯。

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2012-12-21 16:36:35

代码语言:javascript
复制
def foo(lines):
    output = []
    for line in lines:
        words = line.split()
        if len(words) < 2:
            word = words[0]
        else:
            word = words[1]
        if word == '</S>+ESTag':
            yield ' '.join(output)
            output = []
        elif word != '<S>+BSTag':
            output.append(words[1])

for sentence in foo(sys.stdin):
    print sentence

你的霸王龙有点古怪。据我所知,它将[和]之间的任何东西替换为'',因此它最终会打印空字符串。

票数 1
EN

Stack Overflow用户

发布于 2012-12-21 16:35:03

我认为问题在于脚本没有被执行(除非您只是在发布的代码中排除了谢邦 )

尝尝这个

代码语言:javascript
复制
cat file.txt | python script.py | less
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/13993617

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档