- 1
Faster AS400 loads into SQL Server: one column per row
How we cut the fetch of 361,899 IBM i rows from 487 seconds to 57 to 95 seconds by packing 76 columns into one string, and how we kept it safe.
- 6,3K
How to Truncate All Tables in a Database While Preserving Foreign Keys: A Complete Script
When testing a data warehouse , a common challenge is managing large datasets effectively. Often, you need to reset tables to a clean state, ensuring consistent testing environments. The most ...
- 3,7K
Understanding Lakehouse, Warehouse, and Datamart: The Differences Between the Three Fabric Objects
In the world of data management, there are several data storage and processing models that organizations use to handle their ever-growing data needs. Three of these models, which have risen to ...
- 4,4K
The Correspondence Between Excel Formulas and DAX Formulas: Why Financial Analysts Should Learn DAX
Excel, a widely used tool in the world of finance, has been the go-to platform for data analysis for decades. The formula-based structure of Excel allows analysts to manipulate, aggregate, and ...
- 11,2K
SSIS Maximum insert commit size
The default value of the Maximum insert commit size is 2147483647, the largest value a 4 byte INT will hold. This value is default set in SQL 2012+ but you need to set it manually in versions lower ...
- 18,2K
Data Warehouse - Waarom heb je er een nodig?
Het woord "Data Warehouse" klinkt behoorlijk spannend! Het doet vermoeden dat het een ingewikkeld gebeuren is, een soort pakhuis of verzameling met data. Eigenlijk is een data warehouse een database ...
- 6,4K
SSAS OLAP is returning wrong results
Like the title says; my SSAS OLAP cube (SQL 2008R2) was giving me wrong results when selecting a combination of a measure and a fact. I was struggling for days with this issue. I called old ...
- 539,9K
How to implement Dimension Security in SSAS
I know it was not difficult to implement dimension security in Analysis Services. While it's not difficult, why did it cost me a lot of days to get this to work? Well, its because you have to do a ...
- 11,9K
SSAS: How to format a dimension attribute?
I was looking for a method of formatting a dimension attrbibute in SSAS2008R2 to, for example a currency symbol €. In search of this question, I found out this is not possible within the default SSAS ...
- 4,7K
Powerpivot architectuur
Ik kwam vandaag een leuke pagina tegen op de Microsoft site over de architectuur van Microsoft Powerpivot.
- 9,7K
Datawarehouse and Datamart - Empty Strings or NULL Values?
I was wondering what's the best method to store empty fields from source systems in a datawarehouse. For example;a customer record without a first name stored in the database. When loading this ...
- 9K
Hoe maak ik een Periode Dimensie?
Deze blog behandelt de periode dimensie . Deze lijkt sterk op de datum dimensie die eerder is besproken (en onmisbaar is in ieder datawarehouse) maar zijn functie is net iets anders. De kracht van ...
- 7,5K
Data Vault AdventureWorks Voorbeeld
Op internet zijn veel artikele te lezen over de Data Vault. Dit is een manier/datamodel om een data warehouse te onwerpen. Wat mij opvalt is dat er (nog) geen goede voorbeelden te vinden zijn van het ...
- 4,8K
One Single Version of the Truth bestaat niet
Ik ben deze week naar een seminar geweest bij Logica genaamd Guru4Pro. Het onderwerp was: “Best Practices in Data Vault” waarbij de Godfather van Data Vault, Dan Linstedt, een van de sprekers was.
- 7,8K
Data conversie performance SSIS
Vandaag liep ik tegen een heel goed artikel aan van het SQL CAT omtrent performance verschillen tussen de verschillen mogelijkheden voor het converteren van datatypen binnen SSIS.
- 7,6K
Aansturing ETL jobs binnen Datawarehouse
Om de ETL jobs van een datawarehouse te activeren kun je diverse manieren toepassen. Je kunt een SSIS package maken die alle onderliggen ETL packages aanroept. Je kunt ook een SSIS package maken die ...
- 6,2K
Metadata – Tabelgroei in Datawarehouses
Tijdens het uitwerken van het beheer van metadata (opslag in een metadata-database) voor ons Datawarehouse kwam het onderdeel ‘tabelgroei’ naar voren. In een Datawarehouse is het zinvol om te weten ...
- 7,3K
ETL Tool of SQL
In een voorgaand artikel schreef ik over het voordeel van het afhandelen van wijzigingen binnen een dimensie volgens het Kimball Slowly Changing Dimension Type 2 principe, het aanmaken van een nieuwe ...
- 8,7K
Dimensie bijwerken in een Datawarehouse
In een voorgaand artikel schreef ik over het voordeel van het afhandelen van wijzigingen binnen een dimensie volgens het Kimball Slowly Changing Dimension Type 2 principe, het aanmaken van een nieuwe ...
- 5,9K
Historical Staging Area HSA in een DWH project
Bij Datawarehouse-projecten is er altijd de vraag welke architectuur het beste kan worden ingezet. Iedere architectuur heeft zijn eigen voor- en nadelen. Wat ik belangrijk vind aan een architectuur ...
- 4,9K
Waarom niet enkel Type 2?
Bij een Slowly Changing Dimension scenario wordt normaliter per veld bepaald of het een type 1, type 2 of type 3 veld betreft. Bij een type 1 wordt het record overschreven met de nieuwe waarde, bij ...
- 4,1K
Dimensie Lookup Optimalisatie
Voor het bijwerken van de dimensie/feit moet er worden bepaald of een record al bestaat. Dit gebeurt normaal gesproken door te kijken naar de business key (natural key) in de dimensie. Als deze niet ...
- 4K
SSIS Package Configurations
Het werken met SSIS packages kan nog wel eens problemen opleveren als er over verschillende omgevingen ontwikkeld moet worden. Dougbert.com heeft in een blogpostje wat vermeldingen naar SQL MVP's ...
- 3,7K
MSc Business Intelligence
DNV Academy CIBIT zal in 2010 als eerste nederlands opleidingsinstituur gaan beginnen met een officiele Master of Science opleiding Business Intelligence. Op 12 maart was hier een informatieavond ...
- 3,8K
Checkpoints in SSIS
De Control Flow in Integration Services biedt controle en overzicht over de verschillende tasks welke binnen je package uitgevoerd worden. Maar als een van deze tasks echter fout gaat wil je vaak ...
- 3,9K
Exporteren SSIS Data naar Excel 2007
Hieronder volgt een korte beschrijving hoe je vanuit SSIS een koppeling kunt maken met Excel 2007.
- 4K
SQLBI Methodology
Ik liep van de week tegen een interessant stukje informatie aan omtrent een methodologie voor BI en Datawarehouse oplossingen. Zoals de meesten welbekend zijn de grootste theorieen binnen de BI markt ...
- 3,5K
Excel-connectoren en 64-bit
De SSIS Excel-connector is een speciale connector welke niet veel configuratiemogelijkheden heeft maar precies doet wat hij zou moeten doen: data vanuit een Excel-tabblad lezen en het erin ...
- 3,7K
Variabele gebruiken in OLE-DB Source (SSIS)
In Integration Services kan het voorkomen dat je SQL in je Dataflowtask dynamisch wilt opbouwen door gebruik te maken van een variabele. Om dit voor elkaar te krijgen in een truukje nodig.
- 3,3K
Waarde van een variable vinden in SSIS
SSIS bevat een aantal debugging tools. Degene die ik zelf niet konden vinden was een hulpmiddel om variable-values te kunnen traceren tijdens runtime. Even op internet zoeken deed wonderen.
- 3,6K
Hulpmiddel bij het vinden van KPI's
Een collega van me kwam laatst met een tip voor een website waarop je KPI's (Key Performance Indicators) kunt vinden voor belangrijke bedrijfsprocessen.
- 3,8K
Custom Logging in SSIS
Logging In SSIS (Integration Services) is een handige methode die je standaard in iedere package zou moeten inbouwen. Door te loggen kun je (indien nodig) altijd terugzoeken hoe laat packages zijn ...
- 3,9K
BIDS Helper
De Business Intelligence Development Studio (ofwel BIDS) wordt doorgaans gebruikt voor het ontwikkelen van Microsoft BI-programmatuur. Nu is er overal ruimte voor verbetering en in dit is de BIDS ...
- 4,3K
Analysis Services Enterprise vs Standard
Als je bij een Microsoft Analysis omgeving te maken hebt met meerdere servers met verschillende versies, zul je altijd een afweging moeten maken hoe je de servers onderling in sync houdt.
- 4K
Analysis Services, Reporting en Excel 2007
Momenteel werk ik op een project waarbij SQL Server 2005 (64-bit), Analysis & Reporting Services plus Excel 2007 wordt geimplementeerd. De combinatie Analysis en Excel biedt zeer goede mogelijkheden ...
- 4,3K
SQL Server Services starten - stoppen
Jorg Klein heeft een slimme manier gevonden om alle SQL Server Services in 1x te stoppen en weer te starten. Dit scheelt veel tijd omdat je het niet meer met de hand hoeft te doen!
- 4,5K
Business Rules in het Datawarehouse
Zoals de naam al zegt zijn Business Rules regels die voor een bedrijf gelden. Iedereen met een gezond verstand kan Business Rules bedenken. Ook bij Datawarehousing krijg je te maken met Business ...
- 8,4K
Query Active Directory
Het kan handig zijn om data uit je Active Directory (AD) op te nemen in je Datawarehouse. In mijn situatie was het handig omdat de klant graag wilde zien of een gebruiker die uit dienst was nog ...
- 3,9K
Hierarchieën in Analysis Services 2005
Iedere kent ze wel, hierarchieën in Analysis Services 2005. Met een hierarchy kun je bepaalde data op verschillende niveau's aan de eindgebruiker tonen. Een bekend voorbeeld is: Jaar -> Kwartaal -> ...
- 3,4K
Foutenrapportage SSIS mbv. Event Handlers
Wanneer er een fout ontstaat in je ETL-package wil je als Datawarehouse beheerder ook graag weten wat en wanneer er iets fout is gegaan. Wanneer je gebruik maakt van een event handler wordt er ...