Блог

У меня есть сомнения. Например, я создал индекс в таблице DynamoDB и вставил три элемента. И теперь мой индекс выглядит так:

Теперь с помощью трех элементов в таблице я создаю новый индекс в DynamoDB, который выглядит следующим образом:

И я вижу следующую проблему (моя теория):

Размер первого индекса содержит три элемента, но во втором индексе нет трех элементов. Я провел этот тест, потому что у меня есть таблица с 15 миллионами элементов, и мне нужно воссоздать или добавить новый индекс. Проблема в том, что если в индексе нет элементов таблицы, которые уже существовали, это означает, что если мое приложение использует новый индекс, то новые вставки могут быть найдены только после создания индекса.

Вопрос в том:

• Моя теория верна?
• Есть ли способ заполнить новый индекс уже существующими данными?

Я думаю, что ваша теория неверна:

Backfilling: For each item in the table, DynamoDB determines which set of attributes to write to the index based on its projection (KEYS_ONLY, INCLUDE, or ALL). It then writes these attributes to the index. From:https://docs.aws.amazon.com/amazondynamodb/latest/developerguide/GSI.OnlineOps.html#GSI.OnlineOps.Creating

Создание глобального индекса после создания вашей таблицы не приводит к потере данных. Однако причиной этого может быть разреженный индекс. Давайте приведем пример:

Допустим, у вас есть таблица с первичным ключом = email, и вы создаете глобальный индекс с первичным ключом в качестве региона (даже после вставки некоторых данных).

Item_1: { email: test@test.com, region: USA} будет вставлен как в вашу таблицу, так и в GSI

Item_2: { email: test@test.com, age: 21} будет вставлен только в вашу таблицу

На самом деле это очень полезная функция, вы можете узнать больше здесь https://docs.aws.amazon.com/amazondynamodb/latest/developerguide/bp-indexes-general-sparse-indexes.html