Django стог сена LocationField создан как строка вместо geo_point в asticsearch
Я использую django 1.8.9, django-rest-framework, django-haystack вместе с Elasticsearch и пытаюсь заставить работать LocationField, индекс создается, однако тип всегда string
вместо geo_point
так что, очевидно, никакой гео поиск не работает.
settings.py:
INSTALLED_APPS = (
'django.contrib.auth',
'django.contrib.contenttypes',
'django.contrib.gis',
'django.contrib.sessions',
'django.contrib.sites',
'django.contrib.messages',
'django.contrib.staticfiles',
'django.contrib.admin',
'django_extensions',
'elasticsearch',
'rest_framework',
'haystack',
)
requirements.txt:
Django==1.8.9
django-appconf==1.0.1
django-compressor==1.6
django-extensions==1.6.1
django-filter==0.11.0
django-haystack==2.4.1
djangorestframework==3.3.1
djangorestframework-jwt==1.7.2
ecdsa==0.13
elasticsearch==2.2.0
Fabric==1.10.2
future==0.15.2
geopy==1.11.0
gunicorn==19.4.1
Markdown==2.6.5
paramiko==1.16.0
psycopg2==2.6.1
pycrypto==2.6.1
PyJWT==1.4.0
python-dateutil==2.4.2
python-memcached==1.57
setproctitle==1.1.9
six==1.10.0
urllib3==1.14
search_indexes.py:
from haystack import indexes
from blah.api.models import MyModel
class MyIndex(indexes.SearchIndex, indexes.Indexable):
text = indexes.CharField(document=True, use_template=True)
description = indexes.CharField(model_attr='description')
location = indexes.LocationField(model_attr='get_location')
created = indexes.DateTimeField(model_attr='created')
def get_model(self):
return MyModel
свойство get_location в MyModel:
from haystack.utils.geo import Point
def get_location(self):
return Point(self.lng, self.lat)
индекс elasticsearch создал (извините о форматировании!):
{
"myindex":{
"mappings":{
"modelresult":{
"properties":{
"created":{
"type":"date",
"format":"strict_date_optional_time||epoch_millis"
},
"description":{
"type":"string"
},
"django_ct":{
"type":"string"
},
"django_id":{
"type":"string"
},
"id":{
"type":"string"
},
"location":{
"type":"string"
},
"text":{
"type":"string"
}
}
}
}
}
}
У кого-нибудь есть какие-либо идеи? Такое ощущение, что это комбинация версий между django, django-haystack и asticsearch, играющих не очень хорошо, но я не могу заставить работать какую-либо комбинацию.
2 ответа
Хорошо, я выяснил, в чем проблема: в Elasticsearch 2.0 есть изменения метаданных, одно из которых boost
это было удалено: https://www.elastic.co/guide/en/elasticsearch/reference/current/breaking_20_mapping_changes.html
Прослеживая elasticsearch/transport.py
запрос PUT на http://127.0.0.1:9200/myindex/_mapping/modelresult включает в себя "_boost": {"name": "boost", "null_value": 1.0}.
Итак, отслеживание звонков и повторное отображение их как CURL:
СОЗДАТЬ ИНДЕКС
curl -X PUT -d '{"settings": {"analysis": {"filter": {"haystack_edgengram": {"max_gram": 15, "type": "edgeNGram", "min_gram": 2}, "haystack_ngram": {"max_gram": 15, "type": "nGram", "min_gram": 3}}, "tokenizer": {"haystack_ngram_tokenizer": {"max_gram": 15, "type": "nGram", "min_gram": 3}, "haystack_edgengram_tokenizer": {"max_gram": 15, "type": "edgeNGram", "side": "front", "min_gram": 2}}, "analyzer": {"edgengram_analyzer": {"filter": ["haystack_edgengram", "lowercase"], "type": "custom", "tokenizer": "standard"}, "ngram_analyzer": {"filter": ["haystack_ngram", "lowercase"], "type": "custom", "tokenizer": "standard"}}}}}' http://127.0.0.1:9200/myindex
НЕПРАВИЛЬНОЕ ЗАПРОС
curl -X PUT -d '{"modelresult": {"_boost": {"name": "boost", "null_value": 1.0}, "properties": {"django_id": {"include_in_all": false, "index": "not_analyzed", "type": "string"}, "description": {"type": "string", "analyzer": "snowball"}, "created": {"type": "date"}, "text": {"type": "string", "analyzer": "snowball"}, "django_ct": {"include_in_all": false, "index": "not_analyzed", "type": "string"}, "location": {"type": "geo_point"}}}}' http://127.0.0.1:9200/myindex/_mapping/modelresult
Переход на это работает
curl -X PUT -d '{"modelresult": {"properties": {"django_id": {"include_in_all": false, "index": "not_analyzed", "type": "string"}, "description": {"type": "string", "analyzer": "snowball"}, "created": {"type": "date"}, "text": {"type": "string", "analyzer": "snowball"}, "django_ct": {"include_in_all": false, "index": "not_analyzed", "type": "string"}, "location": {"type": "geo_point"}}}}' http://127.0.0.1:9200/myindex/_mapping/modelresult
Итак, исправление python В haystack/backends/asticsearch_backend.py закомментируйте раздел надстройки из current_mapping в строке 137-140
Может быть, это не работает, потому что get_location
это не поле на MyModel
, Может быть, вы можете избежать создания местоположения в виде поля, добавив @property
декоратор, вот так:
from haystack.utils.geo import Point
@property
def get_location(self):
return Point(self.lng, self.lat)
РЕДАКТИРОВАТЬ: Это не похоже, что это решит проблему. У вас это так же, как в документации.