API запроса мощности

#sql #excel #api #powerbi #powerquery

Вопрос:

У меня есть внутренний набор данных, содержащий около 4000 почтовых индексов. У меня также есть доступ к API для правительственной базы данных, которая возвращает энергетические рейтинги всех объектов недвижимости в Англии и Уэльсе, inc. информация об отеле и почтовый индекс.

API предназначен для обеспечения определенных функций поиска, но ограничивает «все» до 5000 строк. Он также не допускает » или » в качестве опции в поиске. Существует полный загружаемый набор данных, доступный в формате csv, однако он составляет 4 гигабайта и содержит более 20 миллионов строк.

Я хочу иметь возможность использовать поиск по API и вводить почтовые индексы из моей существующей базы данных, чтобы возвращать соответствующие записи из правительственной базы данных без необходимости каждый раз вручную вносить изменения в данные API. Мои инструменты выбора-SSMS и Power Query, но я, похоже, не могу использовать API таким образом, я был бы признателен за любые советы или предложения.

Спасибо всем