Обновление потока данных никогда не прекращается

#powerbi

Вопрос:

У нас есть поток данных в нашем сервисе PBI премиум-класса. Целевым источником данных является таблица снежинок с примерно 90 миллионами строк. Проблема в том, что обновление никогда не заканчивается. Это может продолжаться несколько дней. Мы можем успешно отменить его, но на самом деле он никогда не завершается или не кажется завершенным. Кто-нибудь сталкивался с этим?

Комментарии:

1. Исходя из моего опыта работы с большими таблицами TSQL, я столкнулся с множеством проблем, когда ввел всю таблицу фактов (в настоящее время более 60 млн). Я думаю, что поток данных ожидает выполнения результирующего запроса источника данных и возврата результирующей таблицы в течение 10 минут, иначе истечет время ожидания.

2. Поэтому вместо того, чтобы приводить всю таблицу фактов, я использовал обширную фильтрацию для ввода необходимых мне данных, а также агрегировал их везде, где это возможно, чтобы я мог ввести небольшую таблицу для выполнения DF в рамках ограничений.

3. В таблицах TSQL вы можете легко писать SQL-запросы и вводить только то, что вам нужно. Я думаю, вам, вероятно, нужно сделать то же самое с таблицами Snowflake, если у Snowflake есть возможность писать запросы на стороне сервера. У меня нет опыта работы со снежинками.

4. Я немного сбит с толку. Согласно Microsoft ( здесь ), On Premium, the maximum refresh duration is 5 hours. Но вы говорите, что это работает в течение нескольких дней, прежде чем вы остановите это?