6

考虑以下 Elasticsearch (v5.4) 对象(“奖励”文档类型):

{
  "name": "Gold 1000",
  "date": "2017-06-01T16:43:00.000+00:00",
  "recipient": {
    "name": "James Conroy",
    "date_of_birth": "1991-05-30"
  }
}

award.date两者的映射类型award.recipient.date_of_birth都是“日期”。

我想执行范围聚合以获取该奖项获得者的年龄范围列表(“18 岁以下”、“18-24 岁”、“24-30 岁”、“30 岁以上”),在他们的时间奖。我尝试了以下聚合查询:

{
  "size": 0,
  "query": {"match_all": {}},
  "aggs": {
    "recipients": {
      "nested": {
        "path": "recipient"
      },
      "aggs": {
        "age_ranges": {
          "range": {
            "script": {
              "inline": "doc['date'].date - doc['recipient.date_of_birth'].date"
            },
            "keyed": true,
            "ranges": [{
              "key": "Under 18",
              "from": 0,
              "to": 18
            }, {
              "key": "18-24",
              "from": 18,
              "to": 24
            }, {
              "key": "24-30",
              "from": 24,
              "to": 30
            }, {
              "key": "30+",
              "from": 30,
              "to": 100
            }]
          }
        }
      }
    }
  }
}

问题 1

但是由于script部分中的日期比较,我收到以下错误:

Cannot apply [-] operation to types [org.joda.time.DateTime] and [org.joda.time.MutableDateTime].

DateTime对象即award.date场,对象MutableDateTimeaward.recipient.date_of_birth场。我试过做类似的事情(尽管 Joda 文档声称这个方法是从父类继承的,doc['recipient.date_of_birth'].date.toDateTime()但它不起作用)。MutableDateTime我也尝试过进一步做这样的事情:

"script": "ChronoUnit.YEARS.between(doc['date'].date, doc['recipient.date_of_birth'].date)"

可悲的是,这也行不通:(

问题 2

我注意到如果我这样做:

"aggs": {
  "recipients": {
    "nested": {
      "path": "recipient"
    },
    "aggs": {
      "award_years": {
        "terms": {
          "script": {
            "inline": "doc['date'].date.year"
          }
        }
      }
    }
  }
}

我得到1970doc_count结果恰好等于 ES 中的文档总数。这使我相信访问嵌套对象之外的属性根本不起作用,并给了我一些默认值,例如纪元日期时间。如果我做相反的事情(聚合出生日期而不嵌套),我会得到所有出生日期完全相同的东西(1970,纪元日期时间)。那么如何比较这两个日期呢?

我在这里绞尽脑汁,我觉得有一些聪明的解决方案超出了我目前在 Elasticsearch 方面的专业知识。帮助!

如果你想为此建立一个快速的环境来帮助我,这里有一些 curl 的好处:

curl -XDELETE http://localhost:9200/joelinux
curl -XPUT http://localhost:9200/joelinux -d "{\"mappings\": {\"award\": {\"properties\": {\"name\": {\"type\": \"string\"}, \"date\": {\"type\": \"date\", \"format\": \"yyyy-MM-dd'T'HH:mm:ss.SSSSSSZ\"}, \"recipient\": {\"type\": \"nested\", \"properties\": {\"name\": {\"type\": \"string\"}, \"date_of_birth\": {\"type\": \"date\", \"format\": \"yyyy-MM-dd\"}}}}}}}"
curl -XPUT http://localhost:9200/joelinux/award/1 -d '{"name": "Gold 1000", "date": "2016-06-01T16:43:00.000000+00:00", "recipient": {"name": "James Conroy", "date_of_birth": "1991-05-30"}}'
curl -XPUT http://localhost:9200/joelinux/award/2 -d '{"name": "Gold 1000", "date": "2017-02-28T13:36:00.000000+00:00", "recipient": {"name": "Martin McNealy", "date_of_birth": "1983-01-20"}}'

这应该会给你一个“joelinux”索引,其中包含两个“获奖”文档来测试这一点(“James Conroy”和“Martin McNealy”)。提前致谢!

4

1 回答 1

3

不幸的是,您无法在同一上下文中访问嵌套和非嵌套字段。作为一种解决方法,您可以使用以下选项更改映射以自动将日期从嵌套文档复制到根上下文copy_to

{
    "mappings": {
        "award": {
            "properties": {
                "name": {
                    "fields": {
                        "keyword": {
                            "ignore_above": 256,
                            "type": "keyword"
                        }
                    },
                    "type": "text"
                },
                "date": {
                    "type": "date"
                },
                "date_of_birth": {
                    "type": "date" // will be automatically filled when indexing documents
                },
                "recipient": {
                    "properties": {
                        "name": {
                            "fields": {
                                "keyword": {
                                    "ignore_above": 256,
                                    "type": "keyword"
                                }
                            },
                            "type": "text"
                        },
                        "date_of_birth": {
                            "type": "date",
                            "copy_to": "date_of_birth" // copy value to root document
                        }
                    },
                    "type": "nested"
                }
            }
        }
    }
}

之后,您可以使用 path 访问出生日期date,尽管计算日期之间的年数有点棘手:

Period.between(LocalDate.ofEpochDay(doc['date_of_birth'].date.getMillis() / 86400000L), LocalDate.ofEpochDay(doc['date'].date.getMillis() / 86400000L)).getYears()

在这里,我将原始JodaTime日期对象转换为system.time.LocalDate对象:

  1. 从 1970-01-01 获取毫秒数
  2. 通过将其除以 86400000L(一天中的毫秒数)转换为从 1970-01-01 开始的天数
  3. 转换为LocalDate对象
  4. Period从两个日期创建基于日期的对象
  5. 获取两个日期之间的年数。

因此,最终的聚合查询如下所示:

{
    "size": 0,
    "query": {
        "match_all": {}
    },
    "aggs": {
        "age_ranges": {
            "range": {
                "script": {
                    "inline": "Period.between(LocalDate.ofEpochDay(doc['date_of_birth'].date.getMillis() / 86400000L), LocalDate.ofEpochDay(doc['date'].date.getMillis() / 86400000L)).getYears()"
                },
                "keyed": true,
                "ranges": [
                    {
                        "key": "Under 18",
                        "from": 0,
                        "to": 18
                    },
                    {
                        "key": "18-24",
                        "from": 18,
                        "to": 24
                    },
                    {
                        "key": "24-30",
                        "from": 24,
                        "to": 30
                    },
                    {
                        "key": "30+",
                        "from": 30,
                        "to": 100
                    }
                ]
            }
        }
    }
}
于 2017-06-25T18:57:35.203 回答