Я использую библиотеку gremlin_python для выполнения запроса к базе данных AWS Neptune, и у меня возникают таймауты, несмотря на установку определенного порога таймаута с помощью параметра AssessmentTimeout. Вот конкретный запрос и сообщение об ошибке, которое я получил:
count_companies_with_representatives = (
self.reader_g.V()
.with_("evaluationTimeout", MAX_QUERY_TIMEOUT)
.hasLabel("company")
.where(__.bothE("director").count().is_(P.gt(0)))
.count()
.next()
)
Сообщение об ошибке:
{"detailedMessage":"A timeout occurred within the script [RequestMessage{, requestId=xxxxx, op='bytecode', processor='traversal', args = {gremlin=[[], [V(), with(evaluationTimeout, 1000000), hasLabel(company), where([[], [bothE(director), count(), is(gt(0))]]), count()]], aliases = {g=g}}}]","code":"TimeLimitExceededException","requestId":"xxxxx","message":"A timeout occurred within the script [RequestMessage{, requestId=xxxxx, op='bytecode', processor='traversal', args = {gremlin=[[], [V(), with(evaluationTimeout, 1000000), hasLabel(company), where([[], [bothE(director), count(), is(gt(0))]]), count()]], aliases = {g=g}}}]"}
Несмотря на то, что для параметра AssessmentTimeout установлено значение MAX_QUERY_TIMEOUT (в данном случае 1000000 мс), время запроса истекает преждевременно. Мне нужно убедиться, что каждый запрос соблюдает этот установленный тайм-аут, чтобы эффективно управлять производительностью и избежать преждевременного завершения.
Я попытался установить тайм-аут непосредственно в запросе, используя параметр AssessmentTimeout, ожидая, что это позволит запросу выполняться до MAX_QUERY_TIMEOUT миллисекунд до истечения времени ожидания. Однако ошибка указывает на то, что тайм-аут наступает задолго до достижения этого предела. Я ожидал, что настройка тайм-аута предотвратит досрочное завершение запроса и предоставит ему достаточно времени для завершения в нормальных рабочих условиях. Мне нужен совет о том, как правильно применять тайм-ауты к отдельным запросам в этой среде, или чтобы понять, существует ли лучший подход к управлению временем выполнения запросов в Neptune.
На самом деле в кластере Amazon Neptune есть три места, где можно установить таймауты запросов: для всего кластера, на уровне экземпляра и для каждого запроса. Первые два имеют прецедент, поскольку администратор базы данных хотел бы иметь полный контроль над временем выполнения любого запроса. По умолчанию время ожидания на уровне кластера или экземпляра составляет 2 минуты. Это значение не может быть превышено с помощью значения evaluationTimeout
в запросе. Тайм-аут на уровне запроса может быть установлен только меньшим, чем общий тайм-аут на уровне кластера или экземпляра.
Вам нужно будет настроить параметр уровня кластера или экземпляра neptune_query_timeout
, чтобы разрешить запросам превышать установленное по умолчанию 2-минутное время ожидания: https://docs.aws.amazon.com/neptune/latest/userguide/parameters.html#parameters -db-cluster-parameters-neptune_query_timeout
Установка этого параметра потребует перезагрузки. Если установлено на уровне кластера, все экземпляры в кластере необходимо будет перезапустить. Если установлено на уровне экземпляра, этот экземпляр необходимо будет перезапустить.
Пользовательский параметр тайм-аута на уровне кластера переопределяет тайм-аут по умолчанию для любых экземпляров внутри кластера.
Пользовательская настройка времени ожидания экземпляра переопределяет как настройки по умолчанию, так и пользовательские настройки, заданные на уровне кластера.