Schlagwort: SSIS

Dieser Beitrag zeigt eine Möglichkeit, wie der Package Creator von DeltaMaster ETL verwendet werden kann, um Matrizen zu importieren, bei denen die Spaltennamen und -anzahl dynamisch sind.

Wenn man größere Datenbanken hat, kann es durchaus vorkommen, das mehrere Leute an derselben Datenbank arbeiten, mit mehrfachen Kopien und Entwicklungsumgebungen. Zwischen diesen Datenbanken kommt es [...]

In diesem Blogbeitrag wird zunächst das Dateiformat JSON vorgestellt und gezeigt, wie derartige Dateien komfortabel gelesen werden können. Es wird erläutert, wie die Dateien im JSON-Format zur weiteren [...]

In vielen Projekten wird ein SQL-Agent-Job definiert, der ein dtsx-Paket auf Verzeichnisebene aufruft. Hierbei findet die Verwaltung des dtsx-Pakets und des zugehörigen Projektes innerhalb des Verzeichnissystems [...]

In diesem Blogbeitrag wird aufgezeigt, wie ein Import von Währungskursdaten der EZB per SSIS Paket darstellbar ist. Zudem wird aufgezeigt für welche Zwecke dies sinnvoll sein kann.

Wenn DeltaMaster auf Daten aus SAP HANA zugreift, sind diese in der Regel bereits vorhanden. Manchmal kommt es vor, dass zusätzliche oder externe Datenquellen angebunden werden sollen. Dies ist der Fall [...]

Nicht nur für Hobby-Meteorologen oder Klimaforscher können Wetterdaten spannende Einblicke gewähren und Trends bzw. Zusammenhänge aufzeigen. Auch im unternehmerischen Kontext haben Wetterdaten ihre [...]

Häufig müssen Daten in bestehenden Modellen angepasst oder ergänzt werden. Um neue Daten relational zu übernehmen oder Hintergrundprozesse zu starten, kennen wir schon die Funktionalität der Custom [...]

Mit dem ETL-Werkzeug SQL Server Integration Services (SSIS) des Microsoft SQL Servers können unterschiedlichste Datenladeprozesse umgesetzt werden. Dabei ist nicht nur die Zahl an anzubindenden Ziel- [...]

Die meisten Anwendungssysteme – und somit auch unsere DeltaMaster-Welt – werden in einer Mehrsystemlandschaft betrieben. Typisch in aktuellen IT-Infrastrukturen sind 2- oder 3-Systemlandschaften [...]

Häufig bestehen SSIS-Pakete aus einem Schleifencontainer mit dem mehrere strukturgleiche Quelldateien in eine SQL-Server-Datenbank importiert werden. Da der Datentyp für die jeweilige Spalte in der [...]

Mit den SQL Server Integration Services stehen einem fast alle Türen offen um Daten von A nach B zu transportieren. Dabei können die Quelldateien unterschiedlicher nicht sein. Hier möchte Ich Ihnen [...]

Die Quelldateien eines BI-Systems können in unterschiedlichsten Formaten geliefert werden. Eines dieser Formate ist das Flatfile. Flatfiles haben eine festgelegte Zeichenkodierung („Codepage“), wie [...]

Wer mit den SQL Server Integration Services gearbeitet hat, stand sicher schon einmal vor der Aufgabe, mehrere gleichformatierte Dateien in eine Datenbank zu laden. Bisher habe ich dazu immer (wahrscheinlich [...]

In den meisten BI-Systemen nimmt das Laden der Faktendaten die meiste Zeit in Anspruch. Daher kommt man schnell auf die Idee, nicht immer alle Faktendaten zu laden, sondern nur die neuen und die geänderten [...]

Daten sind die Grundlage jedes BI-Projekts – ohne Daten ist keine Analyse möglich. Aber woher kommen diese Daten? Häufig wird eine SQL-Server-Datenbank als relationale Datenquelle gewählt. Aber meistens [...]

Passwörter sind sensible Daten. Diese sollten immer und überall geschützt werden. Wenn automati-sche Prozesse laufen und Passwörter gespeichert werden müssen, sollten diese auf beste Art und Weise [...]

Letztens konnte ich bei einem unserer Kunden ein Upgrade eines SQL-Server 2005 auf die Version 2012 begleiten. Dabei war auch ein größeres, über Jahre ‚gewachsenes‘ SSIS-Paket enthalten. Jeder [...]

Hier bei Bissantz & Company legen wir sehr großen Wert auf Konsistenz beim Datenladeprozess. Die Summe des Inputs muss der Summe des Outputs entsprechen. Alles andere führt zum protokollierten Abbruch [...]

Jeder, der selbst SQL- oder MDX-Statements schreibt und die anderer lesen und verstehen möchte, wird feststellen, dass jeder einen etwas anderen Schreibstil verwendet. Da T-SQL eine flexible Gestaltung [...]

Neulich im Support: „Ich habe ein Problem. Meine nächtliche Datenaufbereitung ist nicht durchgelaufen.“ Gut, das kommt manchmal vor. Da wir wie immer den DeltaMaster Modeler einsetzen, haben wir [...]

Heute möchte ich mich einmal mit einer sehr nützlichen T-SQL-Funktion namens CHECKSUM() beschäftigen. An einem Beispiel aus dem Datenladeprozess soll gezeigt werden, wie dieser durch die Verwendung [...]

Nürnberger Nächte sind lang. Manchmal jedoch nicht lange genug, sodass der Datenraum, der bei einem nächtlichen Ladevorgang in die DeltaMaster Datenbank überführt werden soll, eingeschränkt werden [...]

Dies ist ein kurzer Beitrag. Aber einer, der all denen, die sich bereits damit geplagt haben, unsaubere Textdateien mit SQL Server Integration Services (SSIS) zu importieren, eine einfache Lösung liefert [...]

Für das Versenden von Mails gibt es im SSIS eine spezialisierte Task, die das übernehmen kann. Sie ist sehr einfach zu konfigurieren und leistete in der Vergangenheit auch in meinen Kundenprojekten [...]

Im Beitrag "Export von OLAP-Daten in eine SQL-Tabelle" ist beschrieben, wie mittels Linked-Server und T-SQL Befehlen (OpenQuery) die Abfrage von OLAP-Daten und Übernahme in eine SQL-Tabelle des Microsoft [...]

Es kommt mitunter vor, daß strukturgleiche Daten im Ladeprozess aus verschiedenen Datenquellen in das System überführt werden müssen. Um hier nicht für jede Datenquelle einen eigenen Prozesschritt [...]