
Dataverse to podstawowa platforma danych stanowiąca fundament rozwiązań Dynamics 365 i Power Platform, odpowiada za przechowywanie i zarządzanie danymi biznesowymi. Jak każda chmurowa usługa przechowująca dane, ma ona swoje zdefiniowane ograniczenia, których przekroczenie może negatywnie wpłynąć na zarządzanie systemem i elastyczność operacyjną.
W tym artykule krótko omówimy sposób przydzielania przestrzeni magazynowej, przedstawimy potencjalne konsekwencje przekroczenia limitów pojemności oraz zaprezentujemy kilka strategii architektonicznych pozwalających zminimalizować ryzyko ich przekroczenia. Celem jest wspieranie projektowania systemów, które już od wczesnych etapów cyklu życia będą łatwiejsze do skalowania, lepiej zoptymalizowane pod względem kosztów i łatwiejsze w utrzymaniu.
Limity Dataverse
Na początku warto podkreślić, że pojemność Dataverse jest przydzielana na podstawie modelu licencjonowania i liczby użytkowników. Na przykład w ramach licencji Dynamics 365 Sales Enterprise, tenant otrzymuje 30 GB pojemności bazy danych Dataverse oraz dodatkowe 250 MB na każdego licencjonowanego użytkownika.
Warto również pamiętać, że przestrzeni Dataverse wyróżniamy trzy typy pojemności – przestrzeń bazy danych, przestrzeń plików i przestrzeń logów, z których każda ma osobne limity i własny sposób wykorzystania. Z perspektywy architektonicznej rozróżnienie to ma kluczowe znaczenie przy projektowaniu skalowalnych rozwiązań.
Łącznie dostępna pojemność bazowa okazuje się niewielka, szczególnie w przypadku systemów przechowujących dużo danych lub używanych przez dłuższy czas.

Przekroczenie Limitów
Jak wcześniej zauważyliśmy, w wielu przypadkach limity te są niskie i łatwo je przekroczyć. Gdy to nastąpi, Microsoft informuje o tym za pomocą wiadomości e-mail - zakładając, że jesteśmy właścicielami środowiska.
Zgodnie z oficjalną dokumentacją, po przekroczeniu limitu niektóre operacje stają się niedostępne, takie jak:
- tworzenie nowego środowiska,
- przywracanie istniejącego środowiska z kopii.
Nie ma jednoznacznych informacji o jakimkolwiek negatywnym wpływie na dostępność czy sposób działania już aktywnych usług. Jednak z perspektywy inżyniera specjalizującego się w tym obszarze, operacja przywracania jest szczególnie istotna i może być potrzebna w każdym momencie. Dlatego możliwość wykonania takich operacji powinna być zawsze dostępna.

Zarządzanie Ryzykiem Przekroczenia & Architektura Systemu
Zakup Dodatkowej Przestrzeni
Najprostszym, ale jednocześnie najmniej optymalnym rozwiązaniem jest zakup dodatkowej przestrzeni bazy danych - 1 GB kosztuje 40 USD miesięcznie.
Należy jednak pamiętać, że takie rozszerzenie może okazać się niewystarczające w dłuższej perspektywie, a w trakcie życia systemu najprawdopodobniej pojawi się konieczność dokupienia przestrzeni więcej niż jeden raz.
Zewnętrzna Baza Danych
Pierwszym rozwiązaniem, które przychodzi mi na myśl i jest bardziej zaawansowane niż poprzednie, jest przechowywanie danych w zewnętrznej bazie danych. Platforma Azure oferuje wiele różnych typów baz danych, które można łatwo integrować za pomocą konektorów Microsoft. Dzięki temu operacje na danych są stosunkowo łatwe do zaimplementowania, na przykład z wykorzystaniem przepływów Power Automate i konektorów, o których wspomnieliśmy już wcześniej.
Warto podkreślić, że koszty baz danych w Azure są znacząco niższe niż koszt dodatkowej przestrzeni Dataverse. Dla przykładu, baza SQL z dostępnymi 10 DTU (Database Transaction Units, czyli jednostkami określającymi zasoby dostępne dla bazy danych) oraz maksymalnym rozmiarem 250 GB w modelu cenowym Standard kosztuje około 14,7 USD miesięcznie. Taka konfiguracja jest wystarczająca dla wielu podstawowych wymagań biznesowych.

Tabele Wirtualne
Innym dobrym rozwiązaniem architektonicznym dla aplikacji Dynamics 365 jest wykorzystanie tabel wirtualnych. Dane te nie są fizycznie przechowywane w Dataverse, dzięki czemu nie zwiększają wykorzystania limitów przestrzeni. Zamiast tego są pobierane w czasie rzeczywistym z zewnętrznego źródła. Z perspektywy użytkownika systemu, praca z tabelami wirtualnymi wygląda tak samo jak praca ze standardowymi tabelami Dataverse. Należy jednak pamiętać, że mają one pewne ograniczenia techniczne i najlepiej sprawdzają się w przypadku encji, które nie są częścią złożonej logiki biznesowej. Jako przykład - danych z tabel wirtualnych nie można używać w pluginach, co ogranicza możliwość implementacji zaawansowanej logiki po stronie serwera.
SharePoint
Jeżeli system i procesy biznesowe obejmują pracę z wieloma plikami, warto rozważyć użycie SharePoint zamiast przechowywania ich bezpośrednio w polach typu plik. Rozwiązanie to jest natywnie zintegrowane z Dynamics 365. Należy jednak zaznaczyć, że podejście to może nie sprawdzić się dobrze, jeśli wymagany jest złożony model uprawnień dostępu. Warto także pamiętać, że to rozwiązanie również ma ograniczenia pojemnościowe.
Azure Blob Storage
Poprzednia opcja sprawdza się dobrze, ale tylko w ograniczonych scenariuszach. Bardziej elastycznym i skalowalnym podejściem jest użycie komponentu Blob Storage w Azure Storage Account. Dzięki niestandardowej kontrolce PCF pliki mogą być przetwarzane bezpośrednio z poziomu formularza dowolnej encji w aplikacji Power Apps. W naszym przypadku niestandardowa kontrolka PCF została stworzona przez mojego kolegę Rafała z oneDynamics i integruje się z wcześniej wspomnianym źródłem danych. To rozwiązanie jest szczególnie wartościowe, ponieważ oferuje wysoką skalowalność i może zostać dostosowane do złożonych procesów biznesowych. W wielu przypadkach jest to najbardziej elastyczne i praktyczne podejście.

Okresowe Usuwanie Danych
Innym możliwym rozwiązaniem jest okresowe usuwanie danych. Obecnie dane są często porównywane do złota. Z mojego doświadczenia wynika jednak, że część danych z czasem traci swoją wartość więc dalsze przechowywanie ich w bazie jest zbędne. Kluczowe jest więc jednoznaczne określenie, które dane mogą zostać usunięte i oczywiście po jakim czasie.
Po ustaleniu tych zasad, potrzebujemy mechanizmu, który będzie odpowiadał za ich usuwanie. Rekomendowane jest utworzenie przepływu Power Automate, który będzie okresowo pobierał rekordy spełniające określone warunki i je usuwał. Wdrożenie takiego procesu jest wyjątkowo proste nawet dla osób nietechnicznych.

Krótkie Podsumowanie
Jak widać, istnieje kilka sposobów radzenia sobie z ograniczeniami pojemności Dataverse. Oczywiście nie są to jedyne możliwe opcje. Poniższa tabela zawiera podsumowanie najważniejszych aspektów technicznych proponowanych rozwiązań.

Jeśli masz pytania dotyczące powyższe artykułu albo chcesz, abyśmy przeanalizowali Twój przypadek indywidualnie i dobrali najlepiej dopasowane rozwiązanie, skontaktuj się z nami mailowo.
Źródła:
1. https://learn.microsoft.com/en-us/power-platform/admin/capacity-storage
2. https://www.microsoft.com/en-us/power-platform/products/power-apps/pricing
3. https://learn.microsoft.com/en-us/power-apps/developer/data-platform/virtual-entities/get-started-ve
4. https://azure.microsoft.com/en-us/pricing/details/storage/blobs/
5. https://azure.microsoft.com/en-us/pricing/details/azure-sql-database/single/
Przekroczenie limitów pojemności Dataverse może uniemożliwić wykonanie kluczowych operacji administracyjnych, w tym przywrócenie środowiska z kopii zapasowej. Dlatego już na etapie projektowania systemu warto rozważyć przechowywanie części danych poza Dataverse, np. w Azure SQL lub Azure Blob Storage, zamiast polegać wyłącznie na dokupowaniu dodatkowej przestrzeni.
Masz podobne wyzwanie?

Jeden mail miesięcznie, tylko konkrety
Co się dzieje w Dynamics, Power Platform i Copilot — bez marketingowego ozdobnika.


