2016-02-17 78 views
2

我正在阅读一系列句子,并使用NLTK的斯坦福POS机标签标记每个单词。我得到像这样的输出:Python:将NLTK Stanford POS标签映射到WordNet POS标签

wordnet_sense = [] 

for o in output: 
    a = st.tag(o) 
    wordnet_sense.append(a) 

输出:[[(u'feel', u'VB'), (u'great', u'JJ')], [(u'good', u'JJ')]]

我想这些话与他们的POS映射,使它们在WordNet的认可。

我已经尝试这样的:

sense = [] 

for i in wordnet_sense: 
    tmp = [] 

    for tok, pos in i: 
     lower_pos = pos[0].lower() 

     if lower_pos in ['a', 'n', 'v', 'r', 's']: 
      res = wn.synsets(tok, lower_pos) 
      if len(res) > 0: 
       a = res[0] 
     else: 
      a = "[{0}, {1}]".format(tok, pos) 

     tmp.append(a) 

    sense.append(tmp) 

print sense 

输出:[Synset('feel.v.01'), '[great, JJ]'], ['[good, JJ]']]

所以feel是公认的动词,但是greatgood不会被识别为形容词。我还检查了greatgood是否属于Wordnet,因为我认为如果他们不在那里,他们没有被映射,但他们是。谁能帮忙?

回答

2

这里是一个可爱的功能从pywsd

from nltk.corpus import wordnet as wn 

def penn2morphy(penntag, returnNone=False): 
    morphy_tag = {'NN':wn.NOUN, 'JJ':wn.ADJ, 
        'VB':wn.VERB, 'RB':wn.ADV} 
    try: 
     return morphy_tag[penntag[:2]] 
    except: 
     return None if returnNone else '' 
+0

另请参阅:https://www.ling.upenn.edu/courses/Fall_2003/ling001/penn_treebank_pos.html – alvas

1
def wordnet_pos_code(tag): 
    if tag.startswith('NN'): 
     return wn.NOUN 
    elif tag.startswith('VB'): 
     return wn.VERB 
    elif tag.startswith('JJ'): 
     return wn.ADJ 
    elif tag.startswith('RB'): 
     return wn.ADV 
    else: 
     return '' 



print wordnet_pos_code('NN')` 

以及所提供的答案,我发现这一点,也适用。