elasticsearch facet limit

Question

我在EC2实例上使用elasticsearch 0.20.2（16GB RAM，未启用交换）。我有很多索引文件，当我尝试做方面的结果时，我得到了堆空间错误，然后elasticsearch服务器无法使用。我正在增加java的堆内存，但没有任何帮助。所以我的问题是我能限制哪些方面将被应用的文件数量。

这里是我的设置和映射：

my_settings = { 
    'settings': { 
     'analysis': { 
      'analyzer': { 
       'text_analyzer': { 
        'tokenizer': 'standard', 
        'filter': ['standard', 'lowercase'] 
       }, 
       'suggestions_analyzer': { 
        'tokenizer': 'standard', 
        'filter': ['suggestions_shingle'] 
       } 
      }, 
      'filter': { 
       'suggestions_shingle': { 
        'type': 'shingle', 
        'min_shingle_size': 2, 
        'max_shingle_size': 5 
       } 
      } 
     } 
    } 
} 

my_mapping = { 
    'test-type':{ 
     'properties':{ 
      'publish_datetime': {'type': 'date'}, 
      'text': { 
       'type': 'multi_field', 
       'fields': { 
        'text': {'type': 'string', 'analyzer': 'text_analyzer', 'include_in_all': True}, 
        'suggestions': {'type': 'string', 'analyzer': 'suggestions_analyzer', 'include_in_all': False} 
       } 
      } 
     } 
    } 
} 

，我的搜索查询是：

query = { 
    'filtered': { 
     'filter' : { 
      'limit' : {'value' : 10} 
     }, 
     'query':{ 
      'prefix':{ 
        'text.suggestions': 'wha' 
      } 
     }, 
    }, 
    'facets':{ 
     'text_suggestions':{ 
      'terms':{ 
       'field':'text.suggestions', 
       'regex':'^%s.*' % 'wha', 
       'size': 5 
      } 
     } 
    }, 
    'size': 0 
} 

是有人成功限制文件号码将被小让与我们分享。

Answer 1

不，不可能人为地限制运行聚合的文档数 - 聚合显然是不正确的。这些方面受到您发出的查询（以及您使用的任何facet_filters）的限制。

因此，几种方法来记住：

• 一般来说，面将被限制在query您发送到Elasticsearch
• 值，你刻面的字段将被加载到内存中
• 有一些技术来防止内存不足的错误为特设刻面，但他们不是普通用户暴露搜索/刻面有用

请参阅邮件列表上的Estimating field cache size for facets in advance讨论。

根据您发布的查询，您不清楚您在text.suggestions字段中面对什么？