Oracle XML Datenbank

Oracle XML Datenbank
Carsten Czarski
Business Unit Database
Oracle Deutschland GmbH
Agenda
XML in der Datenbank
Speicherformen für XML-Dokumente, Datenbankansätze, Oracle XML Technologie,
Architektur der Oracle XML-Datenbank, Installation + Konfiguration
XML-Speicherstrukturen
Festlegung der Speicherungsform, XML Schema, Registrierung, objektrelationale
Strukturen
Umgang mit XML-Dokumenten
Speichern und Abrufen von XML-Dokumenten; Verbindung mit SQL; Protokollzugriff
XML in der Praxis – Szenarien und Implementierung
Implementierung der Szenarien mit der XML-Datenbank, Zusammenspiel mit OracleTechnologie
Warum XML in der Datenbank ...?
... und nicht einfach im Dateisystem?
Warum XML in der Datenbank ...
... und nicht im Dateisystem?
relationale Daten bereits vorhanden
–
–
Kombination mit XML Dokumenten
Ausgabe als XML-Dokument
Erweiterung des XML-Datenmodells
–
–
–
–
–
Zusätzliche Datenbankvalidierung
Transaktionskonzept
Datennahe Sicherheitskonzepte
Datennahe Logik
...
XML Standards
XML – W3C
DOM – W3C
XPath – W3C
XML Schema – W3C
XSL and XSLT – W3C
WebDAV - IETF
SQL/XML – ANSI/ISO
Wie speichert man XML-Dokumente
in Datenbanken ...?
Herausforderungen
Abruf als XML
relationale
Datenbestände
Beispiele:
- heterogene Systeme
- XML Schnittstellen
- Versorgung des Workflow
- Abruf per HTTP oder FTP
Herausforderungen
Abruf mit SQL
Beispiele:
- XML als Austauschformat
im e-Business
- Sammlung und
Aggregation im DWH
- DWH-Versorgung aus
heterogenen Systemen
XML-Dokumente
Überführung in DWH
oder andere Anwendung
Herausforderungen
Beispiele:
- XML Dokumente nativ
speichern (jur. Gründe)
- Validitätsprüfung gegen
Stammdaten in einer
relationalen Datenbank
- Validierung im laufenden
Workflow
Integritätsbedingungen
relationale
Datenbestände
XML
Datenbestände
Herausforderungen
Referentielle Integrität in XML
XML-Datenmodell
referentielle Integrität
–
–
–
ID
IDREF
IDREFS
Dokumentbezogen
Herausforderungen
Referentielle Integrität in XML
XML-Datenmodell
referentielle Integrität
–
–
–
ID
IDREF
IDREFS
Dokumentbezogen
Das Dokument kann
ohne weiteres nicht
verlassen werden
1. Lösungsansatz
relationale Speicherung
Zwei-Tabellen-Modell
ID
1
2
3
4
5
6
TYPE
VALUE
ELE
ELE
ELE
TEX
ATT
TEXT
Order
Kunde
Name
Mustermann
id
4711
ID
1
2
3
4
5
6
PARENT_ID
NULL
1
2
3
1
5
1. Lösungsansatz
• Semantik aus Tabellen nicht nachvollziehbar
• Schwierige Integration
• z.B. Stammdatentabellen
•
•
•
•
Tuning schwierig
Indizierung schwierig
Volltextsuche schwierig
Komplexe JOIN-Operationen
2. Lösungsansatz
relationale Speicherung
Fachliches Datenmodell
KUNDEN ID
NAME
DEPOT
1 Muster
2 Meier
3 Schmitt
4711
4712
4713
ID
WERTPAPIER
1
VW AG
2
Oracle Corp.
3
Sun Microsys.
2. Lösungsansatz
•
•
•
•
•
•
Semantik nachvollziehbar
einfache Integration mit anderen Tabellen
Tuning für bestimmte Abfragen möglich
Volltextsuche schwierig
Komplexe Logik (Dokumentzerlegung)
Informationsverluste
gute Eignung, wenn XML als reines Transportformat dient und die
relationale Tabellenform im Vordergrund steht.
3. Lösungsansatz
•
•
•
•
•
•
Reine XML-Datenbank
"native" XML-Speicherung
für XML Strukturen optimiert
gute XML Schnittstellen
gute XML-Indizierung
Integration mit relationalen Daten schwierig
•
•
Locking-Verhalten
Referentielle Integrität
Native XML-Speicherung
XML:DB Initiative
Definition
–
Unterstützt das XML-Datenmodell
Elemente, Attribute, PCDATA, Kommentare, ...
–
–
–
Garantiert 1:1-Wiederherstellung des XMLDokumentes
Unterstützt standardkonforme Abfragesprachen
Ist unabhängig von physikalischer Speicherung!
Praxisanforderungen
Lösungsansatz:
I
II
III
native XML-Speicherung
Nein
Nein
Ja
XML-Standardkonformität
Nein
Nein
Ja
offene Schnittstellen
Nein
Nein
Ja
Integrität relational - XML
Nein
Ja
Nein
relationale XML-Darstellung
Nein
Ja
Nein
Ja
Ja
Nein
XML-Darstellung von rel. Tabellen
Oracle XML DB: zwei Welten ...
XML Server
SQL
XML
RDBMS
... wachsen zusammen!
Oracle
SQL
Indizes
Integrität
XML
Ansichten
XML-Technologie mit Oracle
Ansichten
Indizes
Integrität
Messaging mit Oracle AQ
Oracle XML Technologie
Oracle XML DB (seit Oracle Release 2)
Oracle XDK (seit Oracle8i )
–
–
XML Parser [DOM, SAX]
XSQL Servlet
Dynamische XML-Dokumente auf SQL-Basis
XSQL-Pages
deklaratorisch
–
XML Class Generator
Geschichte
i
8
Release 1
Release 2
Geschichte
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
Release 1
Release 2
Geschichte
XML Datentyp
SQL-Zugriffe
einfache Indizes
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
Release 2
Geschichte
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
XML Schema
XML Standards
HTTP, WebDAV
FTP
XML Datentyp
SQL-Zugriffe
einfache Indizes
XML Datentyp
SQL-Zugriffe
einfache Indizes
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
XML Werkzeuge
relational / CLOB
XSQL Servlet
XML SQL Utility
Oracle XML DB: Architektur
User XDB: XML DB Repository
HTTP
FTP
XML Schema
User VW: XML Dokumente
SQL*NET
Oracle Shared Server
WebDAV
FTP
Installation der XML DB
Softwareinstallation
–
Keine Besonderheiten, automatisch bei der DBKonfiguration, zusätzliches Schema XDB,
FTP und HTTP-Portkonfiguration
Datenbankerstellung
Installation der XML DB
Installation der XML DB
Voraussetzungen:
–
–
–
R2 Standard oder Enterprise Edition
Oracle Java VM
Shared Server um Protokolle zu nutzen
Manuelle Installation in eine bestehende Datenbank
–
–
$ORACLE_HOME/rdbms/admin/catqm.sql
[XDB-Passwort] [XDB-TS] [TEMP-TS]
$ORACLE_HOME/rdbms/admin/catxdbj.sql
Deaktivieren der XML DB
–
–
$ORACLE_HOME/rdbms/admin/catnoqm.sql
Datenbank neu starten
TCP/IP Port für FTP und HTTP
TCP/IP Port für FTP und HTTP
Manuelle Änderung der Ports über Skripts
–
$ORACLE_HOME/rdbms/admin/catxdbdbca.sql
[ftp-port] [http-port]
Protokollserver abschalten
–
Initialisierungsparameter
dispatchers =
(protocol=TCP)(service=<SID>XDB)
XML DB Repository
xdb$resource
Table
Name
ACL
Property Property Property
1
N
N
Resource_view
FTP
HTTP
B Tree
Index
Text
Index
Hierarchical
Index
XML Tabellen im
User Schema
Das Repository
RESOURCE_VIEW
SQL> desc path_view
Name
----------------------------------------PATH
RES
LINK
SQL> desc resource_view
Name
----------------------------------------RES
ANY_PATH
PATH_VIEW
Null?
Type
-------- -------------------------VARCHAR2(1024)
SYS.XMLTYPE
SYS.XMLTYPE
Null?
Type
-------- ------------------------SYS.XMLTYPE
VARCHAR2(4000)
Folder anlegen
PL/SQL
declare
result boolean;
begin
result := dbms_xdb.createFolder('/public/VW');
end;
COMMIT;
per FTP oder im WebDAV-Client
Unterschiedliche Speicherarten
Die Speicherart richtet
sich nach den
Anforderungen der
Anwendung:
Clob
Nativ als
Dokument
Relational
Nativ
Objektrelational
• Konkurrierender Zugriff
• Vokabularänderung
• Ladeperformance
• Abfrage-Performance
• Redundanzen
• XML Schema Support
Unterschiedliche Speicherarten
Die Speicherart richtet
sich nach den
Anforderungen der
Anwendung:
Clob
Nativ als
Dokument
Relational
Nativ
Objektrelational
• Konkurrierender Zugriff
• Vokabularänderung
• Ladeperformance
• Abfrage-Performance
• Redundanzen
• XML Schema Support
Dokumentorientiertes XML
Dokument im Vordergrund
Dokument-Transformationen
Dokument als kleinste Einheit
–
Lesen und Schreiben als Ganzes
Dokumentteile nur selten
Skalare Daten nur selten
–
Häufig Volltextsuche
XML als medienneutrales Speicherformat
Datenorientiertes XML
Daten im Vordergrund
Dokumentkontext nicht unbedingt wichtig
Häufig strukturierte Suche
–
größer-als und kleiner-als Abfragen
XML als Austauschformat
–
–
Standardisierung der Werkzeuge
Integration in die IT-Landschaft
Mischformen
Beide Konzepte in einem Dokument
Beispiele:
–
Zeitungsartikel mit strukturierten
Zusatzinformationen
Autor, Zeitung, Erscheinungsdatum
...
–
Kreditanträge
Strukturierte Kunden- und Kreditdaten
Unstrukturierte Begründungen
Technologie-Stack
XML-Dokumentspeicherung
OS-Blöcke
System Calls
Technologie-Stack
XML-Dokumentspeicherung
relationale
Tabellen
(Oracle 1.0)
SQL
OS-Blöcke
System Calls
Technologie-Stack
XML-Dokumentspeicherung
Objektrelationale
Datenbank
(Oracle 8.0)
SQL – Objektrelationale
Syntax (SQL99)
relationale
Tabellen
SQL
OS-Blöcke
System Calls
Technologie-Stack
XML-Dokumentspeicherung
XML DB
(Oracle 9.2)
XML-Navigation
XPath
Objektrelationale
Datenbank
SQL – Objektrelationale
Syntax (SQL99)
relationale
Tabellen
SQL
OS-Blöcke
System Calls
Technologie-Stack
rein dokumentorientiertes XML
XML DB
XML-Navigation
XPath
CLOB-Datentyp
relationale
Tabellen
SQL
OS-Blöcke
System Calls
Beispiel: Börsennachrichten
Beispiel: Börsennachrichten
Beschreibung als XML Schema
Beispiel: Börsennachrichten
Überlegungen ...
Strukturierte Informationen
–
–
–
–
(WKN, Reuters-Code, Quelle, Kontakte, Datum)
Zugriff auf Elemente im Vordergrund
Kombination mit bspw. Kursdatenbank
Strukturierte Speicherung
Unstrukturierte Informationen
–
–
–
Zugriff auf den vollständigen Text im Vordergrund
Volltextsuche
Unstrukturierte Speicherung
Beispiel Börsennachricht
Registrierung des XML Schemas
1. Ansatz:
–
–
W3C XML Schema
wird unverändert in
Oracle registriert
Oracle Enterprise
Manager
Beispiel Börsennachricht
Registrierung des XML Schemas
Schema-URL zur
Identifizierung des
XML Schemas in der
Datenbank
URL sinnvoll
jeder String möglich
Beispiel Börsennachricht
Ergebnisse:
Feingranulares Mapping
Abbildung nach Objektmodell
darüberhinaus „BODY“-Element
SQL-Datentypen
Systemgenerierte SQL-Namen
–
–
–
Case-Sensitiv
Sequence-Element für Eindeutigkeit über Namespaces
hinweg
Neue Namen bei neuer Schema-Registrierung
Tabellen für XML-Dokumente bereits angelegt
"annotated" XML Schema
XML Schema mit "Zusatzinformationen"
Herstellerspezifische Tags und Attribute zur
Steuerung der Persistenz
Namespace-Konzept
bei der Schema-Prüfung ignoriert der Parser gemäß
W3C "alle Namespaces, die er nicht kennt"
–
–
Datenbankunabhängige Parser beachten nur das
allgemeine XML Schema
Bei Registrieren in der Datenbank beachtet diese nur das
allgemeine XML Schema und die eigenen "Annotations"
annotated XML Schema
http://xmlns.microsoft.com/xml
http://www.w3.org/2001/XMLSchema
Ein XML Schema kann Annotations für
verschiedene Datenbanken enthalten,
da die jeweiligen Datenbanken fremde
Annotations gemäß W3C ignorieren
sollen
http://xmlns.oracle.com/xdb
Beispiel Börsennachricht
Schema Annotations
<xs:complexType name="aktie_t">
<xs:attribute name="wkn" use="required" type="xs:string">
<xs:attribute name="name" use="required" type="xs:string">
<xs:attribute name="reuters" use="required" type="xs:string">
<xs:attribute name="branche" use="required" type="xs:string">
</xs:complexType>
Das XML Schema beschreibt die Struktur des XML-Dokumentes,
nicht deren physikalische Speicherung in einer Datenbank.
Die Oracle XML DB macht daher Standard-Annahmen
bei der Nachbildung des XML-Datenmodells mit Objekttypen.
Beispiel Börsennachricht
Schema Annotations
<xs:complexType name="aktie_t" xdb:SQLType="NR_AKTIE_T">
<xs:attribute name="wkn" use="required" xdb:SQLName="AKT_WKN">
<xs:attribute name="name" use="required" xdb:SQLName="AKT_NAME">
<xs:attribute name="reuters" use="required" xdb:SQLName="AKT_REUTERSCODE">
<xs:attribute name="branche" use="required" xdb:SQLName="AKT_BRANCHE">
</xs:complexType>
SQLType:
Abbildung von XML-Datentypen
auf Oracle-Datentypen
SQLName:
Benennung von Elementen in
Oracle
Der XML-Komplexe Typ „aktie_t“ wird in der Datenbank als
Objekttyp „NR_AKTIE_T“ nachgebildet.
Beispiel Börsennachricht
Schema Annotations
<xs:element name="body" xdb:SQLName="NR_BODY">
<xs:complexType mixed="true" xdb:SQLType="CLOB">
<xs:choice minOccurs="0" maxOccurs="unbounded">
</xs:complexType>
</xs:element>
SQLType:
Abbildung von XML-Datentypen
auf Oracle-Datentypen
SQLName:
Benennung von Elementen in
Oracle
Der komplexe Typ für den Nachrichten-Body
wird nicht als Objekttyp, sondern als CLOB abgebildet.
Beispiel Börsennachricht
Schema Annotations
<xs:element
name="kontakt" type="kontakt_t" minOccurs="0" maxOccurs="unbounded"
xdb:SQLName="NR_KONTAKT" xdb:defaultTable="NR_KONTAKT_TAB"
xdb:SQLInline="false"
/>
SQLInline:
Speicherung in einer separaten Tabelle
(true = nein; false = ja)
defaultTable:
Name der Objekt-Tabelle
Die Kontakte werden in einer separaten Tabelle
NR_KONTAKT_TAB gespeichert
Beispiel: Börsennachrichten
Beschreibung als XML Schema
Speicherung als
Ganzes
Beispiel Börsennachricht
Registrierung des XML Schemas
2. Ansatz:
–
–
–
–
Oracle-Annotations
SQLType
SQLName
...
Beispiel Börsennachricht
Ergebnisse:
Anforderung genaues Mapping
Abbildung nach Objektmodell
BODY Element als Fließtext (CLOB) abgebildet
SQL-Datentypen
Eigene SQL-Namen
–
–
–
Hier: case-insensitiv
Ohne Sequence-Element
Bei jeder Schema Registrierung gleich
Tabellen für Nachrichten und Kontakte angelegt
Beispiel Börsennachrichten
Neue Tabellen anlegen
–
XMLTYPE als Datentyp
CREATE TABLE nachrichten_tab
(
nr_id
number(10),
nr_nachricht xmltype
);
Ohne Angabe eines bereits registrieren XML Schemas
fehlen die Angaben zur Objektrelationalen Speicherung,
daher wird dokumentbasiert als CLOB gespeichert.
Beispiel Börsennachrichten
Neue Tabellen anlegen
–
XMLTYPE als Datentyp
CREATE TABLE nachrichten_tab
(
nr_id
number(10),
nr_nachricht xmltype
)
xmltype column nr_nachricht store as object relational
xmlschema "<schema-url>"
element "<root element>"
XML Schema referenzieren
<nachricht
xmlns="http://www.oracle.com/aktie/nachrichten.xsd"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
typ="Unternehmensmeldung"
xsi:schemaLocation="http://www.oracle.com/aktie/nachrichten.xsd
C:\nachrichten.xsd"
>
W3C-Standardkonforme Verknüpfung von XML Dokument
und XML Schema. Das Dokument wird häufig als "Instanz"
des XML Schemas bezeichnet.
Gut zu erkennen ist die Lage des Schemadokumentes im
Dateisystem.
XML Schema referenzieren
<nachricht
xmlns="http://www.oracle.com/aktie/nachrichten.xsd"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
typ="Unternehmensmeldung"
xsi:schemaLocation="http://www.oracle.com/aktie/nachrichten.xsd
http://www.oracle.com/aktie/nachrichten.xsd"
>
Unter dieser URL wurde das XML Schema in Oracle
mit dem Enterprise Manager registriert.
Beispiel Börsennachrichten
Status ....
XML Schema
–
–
Oracle Annotations vorhanden
Schema in der Datenbank registriert
Speicherungsmodell objektrelational
–
–
Objekttypen vorhanden
Tabelle vorhanden
Laden
objektrelationale Speicherung
–
–
–
XML Schema muss in XML-Dokument
referenziert sein
FTP und WebDAV
SQL und SQL*Loader
Beispiel Börsennachrichten
Laden mit FTP oder WebDAV
Referenz auf Nein
XML Schema?
Ohne Schema-Referenz ist keine
Tabellenzuordnung und somit keine
objektrelationale Speicherung möglich.
Oracle kann nicht wissen, ob dieses
XML Dokument gültig ist oder nicht
und speichert es daher als Datei ins
XML DB Repository.
dokumentbasiert im
XML DB Repository
Beispiel Börsennachrichten
Laden mit FTP oder WebDAV
Ja
XML Schema
registriert?
Referenz auf
XML Schema?
Nein
Wenn das XML Schema nicht
registriert wurde, kann Oracle
ebenfalls nicht prüfen, ob das
XML Dokument gültig ist oder nicht.
Es wird daher ebenfalls als Datei ins
XML DB Repository abgelegt.
dokumentbasiert im
XML DB Repository
Beispiel Börsennachrichten
Laden mit FTP oder WebDAV
Ja
Ja
XML Schema
registriert?
Ja Verstoß gegen
Constraints?
Dokument wird
abgewiesen
Referenz auf
XML Schema?
Wenn die Inhalte des XML-Dokuments
gegen hinterlegte Integritätsbedinungen
verstoßen, wird es abgelehnt. Es ist für
die Datenbank ungültig.
Beispiel Börsennachrichten
Laden mit FTP oder WebDAV
Ja
Ja
Referenz auf
XML Schema?
XML Schema
registriert?
Verstoß gegen Nein
Constraints?
objektrelational in
XMLTYPE-Tabelle
Beispiel Börsennachrichten:
Constraints und Datenmodell
In XML ist das Dokument die zentrale Einheit
Integritätsbedingungen ohne weiteres nur innerhalb
des Dokumentes möglich
Referenz zu anderen Dokumenten oder Daten muss
programmiert werden
nachricht:
aktie
datum
quelle
kontakte
titel
body
1
1
1
*
aktie:
wkn
name
branche
reuters
kontakte:
ziel
art
adresse
Beispiel Börsennachrichten:
Constraints und Datenmodell
Überschreiten der Dokumentgrenze
Integritätsbedingungen möglich zu ...
–
–
–
relationalen Tabellen
anderen XML-Dokumenten
Flat files (external tables)
nachricht:
aktie
datum
quelle
kontakte
titel
body
*
1
1
*
aktie:
wkn
name
branche
reuters
kontakte:
ziel
art
adresse
Beispiel Börsennachrichten
SQL INSERT
INSERT INTO NR_NACHRICHT_TAB
VALUES
(
XMLTYPE
(
'<?xml version="1.0"?><nachricht xmlns........
)
);
Schemavalidierung
"leichte Schemaprüfung"
–
–
–
beim Einfügen
Strukturprüfung
Performancegründe
vollständige Schemavalidierung
–
–
–
aktivierbar
Trigger
XMLTYPE.schemaValidate()
Beispiel Börsennachrichten
Zugriff mit HTTP
Zugriff mit URL
–
–
Protokoll
Hostname und TCP/IP Port
http://localhost:9080/
Beispiel Börsennachrichten
Zugriff mit HTTP
Zugriff mit URL
–
–
–
Protokoll
Hostname und TCP/IP Port
Datenbank-Kürzel
http://localhost:9080/oradb/
Beispiel Börsennachrichten
Zugriff mit HTTP
Zugriff mit URL
–
–
–
–
Protokoll
Hostname und TCP/IP Port
Datenbank-Kürzel
Datenbankschema
http://localhost:9080/oradb/VW
Beispiel Börsennachrichten
Zugriff mit HTTP
Zugriff mit URL
–
–
–
–
–
Protokoll
Hostname und TCP/IP Port
Datenbank-Kürzel
Datenbankschema
Tabelle
http://localhost:9080/oradb/VW/
NR_NACHRICHT_TAB
Beispiel Börsennachrichten
Zugriff mit HTTP
Zugriff mit URL
–
–
–
–
–
–
Protokoll
Hostname und TCP/IP Port
Datenbank-Kürzel
Datenbankschema
Tabelle
Optional: XPath Einschränkung
http://localhost:9080/oradb/VW/
NR_NACHRICHT_TAB/
ROW/nachricht/kontakt[ziel="Finanzen.net"]
Zugriff mit SQL
Zugriff auf XML-Elemente
XPath
SQL-Funktionen
–
–
–
EXTRACT
EXTRACTVALUE
EXISTSNODE
Zugriff mit SQL
Gib mir von allen Nachrichten das Datum,
die Aktiengesellschaft und den Titel
select
extractvalue
(value(e), '/nachricht/datum') as datum
,extractvalue
(value(e), '/nachricht/aktie/@name') as ag
,extractvalue
(value(e), '/nachricht/titel') as titel
from nr_nachricht_tab e
Zugriff mit SQL
Gib mir von allen Oracle-Nachrichten
das Datum und den Titel
select
extractvalue
(value(e), '/nachricht/datum') as datum
,extractvalue
(value(e), '/nachricht/aktie/@name') as ag
,extractvalue
(value(e), '/nachricht/titel') as titel
from nr_nachricht_tab e
where existsnode
(
value(e), '/nachricht/aktie[@wkn="871460"]'
) = 1
Ohne „Query Rewrite“
SELECT
extractvalue ...
FROM nr_nachricht_tab e
XML-Dokument
DOM-Baum
wkn
Mit „Query Rewrite“
SELECT
extractvalue ...
FROM nr_nachricht_tab e
Query Rewrite
SELECT
e.xmldata. ...
FROM nr_nachricht_tab e
Objektrelational gespeichertes
XML-Dokument
nachricht:
aktie
datum
quelle
kontakte
titel
body
1
1
1
*
aktie:
wkn
name
branche
reuters
kontakte:
ziel
art
adresse
Query Rewrite
Optimizer Funktionalität
nicht möglich bei ...
–
–
–
–
XPath Funktionen
XPath Variablen
Wildcards
UNION Operator
Technologie-Stack
XML-Dokumentspeicherung
XML DB
(Oracle 9.2)
Objektrelationale
Datenbank
relationale
Tabellen
OS-Blöcke
Q
U
E
XML-Navigation
R
XPath
Y
R
E
SQL – Objektrelationale
W
Syntax (SQL99)
R
I
T
E
SQL
System Calls
Piecewise Update
XML Dokumentknoten gezielt ändern
kein Ersetzen des Gesamtdokumentes
nur auf SQL-Ebene
–
FTP und WebDAV sind dateiorientiert
SQL-Funktion updateXML()
Durch Query Rewrite direkte Änderung der
Objektrelationalen Tabellenspalten
Piecewise Update
Ändere den Firmennamen bei den Nachrichten mit
der WKN 871460 auf "Oracle Corporation"
update nr_nachricht_tab e
set value(e) = updatexml
(
value(e),
,'/nachricht/aktie/@name'
,'Oracle Corporation'
)
where existsnode
(
value(e)
,'/nachricht/aktie[@wkn="871460"]'
) = 1
Piecewise Update
Ändere die Kontaktart "email" nach "Mail"
update nr_kontakte_tab e
set value(e) = updatexml
(
value(e)
,'/konkakt/@art'
,'Mail'
)
where existsnode
(
value(e),
,'/kontakt[@art="email"]'
) = 1
Einsatzgebiete für die Praxis
Layoutneutrale Dokumentspeicherung
Datenaustausch und Integration
–
–
–
DWH-Integration mit relationalen Sichten auf
XML-Dokumente
Datenaustausch mit XML-Sichten auf relationale
Datenbestände
XML-Messaging
Layoutneutrale
Dokumentspeicherung
Dokumente als XMLTYPE
unstrukturiert
–
–
u.U. strukturierte Teile
Börsennachrichten
Volltextsuche
Stylesheet-Transformationen
Volltextsuche
mit Oracle TEXT
Volltextindex auf jedes XML-Dokument
möglich
Oracle TEXT Index
–
–
–
–
–
–
Wildcard Suche (links und rechts)
Phrasensuche
Unscharfe Suche (Fuzzy)
Wortstamm
Stopwort-Listen
Thesaurus-Unterstützung
Volltextsuche mit
Oracle TEXT
Index anlegen
ctx_ddl.create_section_group
(
group_name => 'nachrichten_sec_group'
,group_type => 'PATH_SECTION_GROUP'
);
create index idx_nachrichten_volltext
on nr_nachricht_tab e (value(e))
indextype is CTXSYS.CONTEXT
parameters ('section group nachrichten_sec_group')
Volltextsuche mit
Oracle TEXT
Volltextrecherche ...
select score(1), value(e)
from nr_nachricht_tab e
where
CONTAINS
(
value(e)
,'
(Software and Kooperation)
INPATH
(/nachricht/body)
'
,1
)>0
Stylesheet Transformationen
Datenbankintern
–
Stylesheet muss in der Datenbank vorliegen
SQL-Funktion
–
XMLTransform()
Aggregat über mehrere Dokumente
–
XMLAgg()
Stylesheet-Transformationen
1:1-Transformation ...
n:1 Transformation ...
select
xmltransform
(
value(e)
,xdburitype
(
'/public/idevelop/nachricht_html.xsl'
).getxml()
)
from nr_nachricht_tab e
Stylesheet-Transformationen
View-Definition
TABLE
VIEW
HTTP-Zugriff 1:1 Transformation
HTTP-Zugriff n:1 Transformation
Einsatzgebiete für die Praxis
Layoutneutrale Dokumentspeicherung
Datenaustausch und Integration
–
–
–
DWH-Integration mit relationalen Sichten auf
XML-Dokumente
Datenaustausch mit XML-Sichten auf relationale
Datenbestände
XML-Messaging
DWH-Integration
Was hat das mit XML zu tun?
Data Warehouse
–
–
–
relationale Tabellen
Star Schema
Auswertungswerkzeuge
XML
–
–
–
hierarchisch
W3C-Abfragesprachen
XML-Parsing-Vorgänge sehr aufwendig
Integration mit relationalen Views
Beispiel Börsennachrichten
Kontaktinformationen
–
–
–
relationale Tabelle
schneller Zugriff
Herausforderung:
eine Nachricht hat viele Kontakte
WKN
GESELLSCHAFT
KONTAKTART ADRESSE
Beispiel Börsennachrichten
Kontakt-View
create or replace view nr_kontakte
as
select
extractvalue
(value(e), '/nachricht/aktie/@wkn') as wkn
,extractvalue
(value(e), '/nachricht/aktie/@name') as gesellschaft
,extractvalue
(value(k), '/kontakt/@art') as kontaktart
,extractvalue
(value(k), '/kontakt/ziel') as kontaktziel
,extractvalue
(value(k), '/kontakt/adresse') as adresse
from
nr_nachricht_tab e
,table(xmlsequence(extract(value(e),'/nachricht/kontakt'))) k
Beispiel Börsennachrichten
Weiterverarbeitung
View-Definition
Oracle
SQL
PL/SQL
Beispiel Börsennachrichten
Kontakt-View
Doppelte Kontakte eliminieren
insert into nr_kontakte_rel_tab
(
wkn, gesellschaft, kontaktart, kontaktziel, adresse
)
(
select distinct
wkn, gesellschaft, kontaktart, kontaktziel, adresse
from nr_kontakte
)
Einsatzgebiete für die Praxis
Layoutneutrale Dokumentspeicherung
Datenaustausch und Integration
–
–
–
DWH-Integration mit relationalen Sichten auf
XML-Dokumente
Datenaustausch mit XML-Sichten auf relationale
Datenbestände
XML-Messaging
Beispiel Aktienkurse
relationales Tabellenschema
aktien_tab:
wkn
name
1
*
kurse_tab:
wkn
datum
kurs
Beispiel Aktienkurse
XML Views
Erstellen der View
create or replace view aktienkurse_xml as
select
XMLElement(
"Aktienkurse",
XMLElement("Aktie",
XMLAttributes(
wkn as "WKN", ak.name as "Gesellschaft")),
XMLElement("Kurse", XMLAgg(
XMLElement(
"Kurs" ,XMLAttributes(
k.datum as "vom"),
k.kurs))))
as kurse_dokument
from aktien_tab ak join kurse_tab k using (wkn)
where k.datum > sysdate-60
group by wkn, ak.name
XML Views
Nutzbar wie XMLType Tabellen
Stylesheet-Transformationen
Zugriff durch HTTP
einfacher Austausch relational vorliegender
Daten
XML-Datenaustausch
mit Views
Kommunikation mit Internet-Protokollen
HTTP, FTP
INSTEAD-OF
Trigger
Einsatzgebiete für die Praxis
Layoutneutrale Dokumentspeicherung
Datenaustausch und Integration
–
–
–
DWH-Integration mit relationalen Sichten auf
XML-Dokumente
Datenaustausch mit XML-Sichten auf relationale
Datenbestände
XML-Messaging
Oracle Advanced Queuing
Datenbankinternes Messaging
Asynchron
Point-to-Point / Publish-Subscribe
Nutzung der Oracle Datenbank
–
Backup / Recovery, Datenintegrität,
Skalierbarkeit, Nachrichten-Persistenz
Transaktionskonzept
SQL-Zugriff
Oracle Advanced Queuing
Messaging auf einem Rechnerknoten
Point-to-Point
Oracle
Anwendung
Enqueue
Dequeue
Advanced Queueing
Anwendung
Anwendung
Oracle Advanced Queuing
Messaging auf einem Rechnerknoten
publish-subscribe
Oracle
publish
subscribe
Anwendung
Advanced Queueing
Anwendung
publish
Anwendung
Anwendung
subscribe
Oracle Advanced Queuing
Messaging über Rechnergrenzen
Oracle
Propagate
Dequeue
Anwendung
Enqueue
Anwendung
Oracle
Anwendung
Advanced
Queues
Enqueue
Advanced
Queues
Oracle
Propagate
Dequeue
Advanced
Queues
Anwendung
Oracle AQ Fähigkeiten
Nachrichten
–
–
–
–
–
Nachrichten können nach dem Dequeue behalten werden
Nachrichten-Historie
Nachrichten-Transformation
Kombination mit Oracle DWH-Fähigkeiten
Business-Intelligence
API-Unterstützung
–
–
SQL, PL/SQL (DBMS_AQ)
Java (JMS, Oracle AQ API, JDBC)
Oracle AQ – PL/SQL Pakete
DBMS_AQADM
–
–
–
–
Administrative Aufgaben
Einrichten von Queues
Einrichten von Queue Tabellen
Rechteverwaltung
DBMS_AQ
–
–
–
Umgang mit Queues
Einstellen von Nachrichten (ENQUEUE)
Auslesen von Nachrichten (DEQUEUE)
Oracle AQ
Nachrichten-Transformation
Oracle
Propagate
Dequeue
Anwendung
Enqueue
Advanced
Queues
Oracle
Anwendung
Transform
Anwendung
Enqueue
Advanced
Queues
Oracle
Anwendung
Propagate
Advanced
Queues
Transform
Dequeue
Oracle AQ - Transformationen
PL/SQL oder Java-Funktion
Aktiv ...
–
–
–
direkt nach dem ENQUEUE
direkt vor dem DEQUEUE
direkt vor oder nach dem PROPAGATE
Oracle AQ und XML DB
Definition des Queue-Payload als XMLType
Nachrichten-Transformation mit XSLT
ENQUEUE / DEQUEUE mit
–
–
AQ Servlet
Oracle XML DB und RDBMS Trigger
Zugriff auf Dokumentteile
Integration mit Views
–
–
Relationale Views auf Queue Tabelle
XML-Views auf relationale Tabellen mit anschließendem
ENQUEUE des virtuellen Dokumentes
Oracle AQ und XML DB
Datenbank II [Order]
Oracle
Anwendung
FTP
HTTP
Datenbank I
Datenbank III [DWH]
Oracle AQ und XML DB
Datenbank II [Order]
Oracle
Anwendung
Log
FTP
HTTP
Enqueue
Datenbank I
Datenbank III [DWH]
Oracle AQ und XML DB
Datenbank II [Order]
Propagate
Oracle
Anwendung
Log
Dequeue
FTP
HTTP
Enqueue
Datenbank I
Propagate
Datenbank III [DWH]
Oracle AQ und XML DB
Datenbank II [Order]
Dequeue
Propagate
Oracle
Anwendung
Log
Dequeue
FTP
HTTP
Enqueue
Datenbank I
Dequeue
Propagate
Datenbank III [DWH]
Weitere Informationen
Oracle Technology Network
– http://otn.oracle.com/tech/xml/xmldb/content.html
– http://otn.oracle.com/products/aq/index.html
Dokumentation
– Oracle XML database Developers Guide
http://download-west.oracle.com/docs/cd/B10501_01
/appdev.920/a96620/toc.htm
– Oracle Application Developer's Guide - Advanced Queuing
http://download-west.oracle.com/docs/cd/B10501_01
/appdev.920/a96587/toc.htm