Oracle Exadata Database Machine X2-2 Hardware
von Frank Schneede, ORACLE Deutschland B.V. & Co. KG
Die Engineered Systems bereits vor geraumer Zeit vorgestellt worden. Unter Engineered Systems versteht man Rechnersysteme aus vorkonfigurierten
Standard Hardwarekomponenten, auf denen in einem standardisierten Prozess speziell abgestimmte Software installiert und konfiguriert wird. Durch den hohen Grad der
Standardisierung in Bezug auf Hardware, Software und Konfiguration wird eine extrem kurze Zeit bis zur betriebsbereiten Übergabe des Systems erreicht.
Im Laufe der Zeit hat es diverse Änderungen an der Hardware gegeben, daher soll dieser Tipp dazu dienen, den aktuellen Stand der Hardware der
1. Exadata Storage Server X2-2
Der Exadata Storage Server Software, ohne die die I/O Leistung der Engineered Systems nicht möglich
wäre.
Die Basis des Komponente
Beschreibung
Prozessor
2 * Six-Core Intel® Xeon® L5640 Processors (2.26 GHz)
Hauptspeicher
24GB (6 * 4GB DDR3 DIMM 1333MHz)
Festplatten
12 * 600GB 15K RPM High Performance SAS (hot-swappable)
oder12 * 3TB 7,2K RPM High Capacity SAS (hot-swappable)
Flash
4 * 96 GB Sun Flash Accelerator F20 PCIe Cards
Festplatten Controller
Disk Controller HBA with 512MB Battery Backed Cache
Netzwerkanschlüsse
2 * InfiniBand 4X QDR (40Gb/s) Ports (1 Dual-port PCIe 2.0 HCA)
4 * Embedded Gigabit Ethernet Ports
Remote Management
1 Ethernet port (ILOM)
Stromversorgung
Redundant Hot-Swappable power supplies and fans
Die korrekte Funktion des Storage Servers wird durch entsprechende LEDs an der Vorderseite angezeigt. Über USB Ports, die von außen zugänglich sind, erfolgt das
Aufspielen der Installation durch den Advanced Customer Support. Verschiedene Komponenten sind "Hot-Swappable", das heisst, sie können während des Betriebes
ohne Downtime ausgetauscht werden. Zu diesem Komponenten gehören die Festplatten, Stromversorgungen und Lüfter. Die folgenden Bilder zeigen die Vorder- und die
Rückseite des Vorderseite:
In der Draufsicht:
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Rückseite:
In der Draufsicht:
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Der Exadata Storage Server kann wahlweise mit 12 600GB oder 3TB SAS Festplatten ausgerüstet werden. Hierbei ist zu beachten, dass stets alle Festplatten in einem Storage
Server den gleichen Typ haben müssen. Ein Mischbetrieb ist nicht möglich! Ebenso muss stets ein kompletter Storage Server mit der Exadata Storage Server Software
lizenziert werden, das Abschalten einzelner Festplatten ist nicht möglich. Die Lizenzierung erfolgt unabhängig von deren Typ nach Anzahl der Festplatten, das bedeutet,
dass für einen Storage Server 12 Lizenzen der Exadata Software benötigt werden.
Auf den ersten beiden Festplatten des Storage Servers befinden sich Partitionen für das Betriebssystem. Diese sind gespiegelt, so dass ein rolling Upgrade durchgeführt
werden kann, also ein Upgrade, ohne den Betrieb unterbrechen zu müssen. Die Aufteilung der Festplatten erfolgt grundsätzlich so, dass die Bereiche, die dem ASM als Grid Disk zur
Verfügung gestellt werden, gleich groß sind.
Eine Besonderheit im Exadata Storage Server ist die Bestückung mit vier
Für eine größere Ansicht auf das Bild klicken,
zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken,
zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken,
zurück zum Artikel mit dem Back-Button des Browser!
Exadata Storage Server werden in den verschiedenen Exadata Modellen, dem Expansion Rack und dem SuperCluster verbaut. Zusätzlich können Kunden auch einzelne
Storage Server erwerben, jedoch können diese nur in ein vom Kunden bereitgestelltes Rack eingebaut werden. Die Erweiterung eines existierenden Exadata Racks um
einzelne Storage Server ist nicht erlaubt. Wenn eine Exadata Database Machine im gleichen Rack erweitert werden soll, werden hierzu entsprechende Upgrades (Quarter
auf Half Rack bzw. Half auf Full Rack) angeboten. Eine Erweiterung mittels Expansion Racks ist
immer möglich, Details hierzu werden in einem späteren Community Tipp beschrieben.
Als Betriebssystem wird auf dem Exadata Storage Server Oracle Enterprise Linux 5.5 (mit dem Red Hat kompatiblen Kernel) eingesetzt. Neben der aktuell gültigen Version der
Exadata Storage Server Software befindet sich keine weitere Software auf dem Server. Es ist strikt untersagt, zusätzliche Software auf dem Exadata Storage Server zu
installieren. Das betrifft zusätzliche Linux Bibliotheken ebenso wie Monitoring oder Backup Agenten.
2. Datenbank Server
Die Modelle der Exadata Database Machine unterscheiden sich im Wesentlichen durch den Typ des Datenbank Servers, der in dem jeweiligen Modell zum Einsatz kommt.
In der Komponente
Beschreibung
Prozessor
2 * Six-Core Intel® Xeon® X5675 Processors (3.06 GHz)
Hauptspeicher
96 GB (12 * 8GB DDR3 DIMM 1333MHz)
erweiterbar auf
144 GB (18 * 8GB DDR3 DIMM 1333MHz)
lokale Festplatten
4 * 300GB 10K RPM SAS Disks (hot-swappable)
Festplatten Controller
Disk Controller HBA with 512MB Battery Backed Cache
Netzwerkanschlüsse
2 * InfiniBand 4X QDR (40Gb/s) Ports (1 Dual-port PCIe 2.0 HCA)
4 * 1GbE Ethernet Ports
2 * 10GbE Ethernet SFP+ Ports (1 Dual-port 10GbE PCIe 2.0 network card based on the Intel 82599 10GbE Controller Technology)
Remote Management
1 Ethernet port (ILOM)
Stromversorgung
Redundant Hot-Swappable power supplies and fans
An Vorder- und Rückseite des Servers befinden sich Statusanzeigen, die über den Zustand des Systems Auskunft geben. Wie bereits beim Exadata Storage Server
sind auch in dem Datenbankserver der Vorderseite:
In der Draufsicht:
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Rückseite:
In der Draufsicht:
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Auf den Datenbank Servern der Exadata Database Machine X2-2 stehen zwei Betriebssystemalternativen zur Verfügung. Es können
3. Netzwerk Komponenten
Die Datenbank Server und die Storage Server innerhalb der Exadata werden über InfiniBand Switches miteinander verbunden. Eingesetzt wird hierzu der
Vorderseite:
Rückseite:
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Für eine größere Ansicht auf das Bild klicken, zurück zum Artikel mit dem Back-Button des Browser!
Kunden können in den Switches Stromversorgung und Lüfter während des laufenden Betriebs austauschen, da diese Komponenten redundant ausgelegt sind.
In der Leaf Switches fungieren, die die verschiedenen Server ausfallsicher miteinander verbinden. Ein dritter
Spine Switch dient dazu, die Skalierbarkeit bei Half oder Full Racks zu realisieren. Für die Einbindung in ein kundeneigenes InfiniBand Netzwerk
stehen 12 freie Ports zur Verfügung.
Innerhalb der
Für eine größere Ansicht auf das Bild klicken,
zurück zum Artikel mit dem Back-Button des Browser!
Der InfiniBand HCA unterstützt RDMA (Remote Direct Memory Access), das bedeutet, dass die Prozesse im Storage und in den Datenbankknoten über InfiniBand direkt
miteinander kommunizieren, ohne Bufferkopien erstellen zu müssen. Diese Art der Interprozesskommunikation und die geringe Latenz der InfiniBand Technologie trägt
maßgeblich dazu bei, dass die 10GbE Anschluss über die in den Datenbank Servern eingebaute Netzwerkkarte
40Gb InfiniBand Anschluss über freie Ports des eingebauten InfiniBand Switches
Falls also der Kunde über kein InfiniBand Netzwerk verfügt, so ist es möglich, die Exadata mittels der in den Datanbank Servern verbauten
Für eine größere Ansicht auf das Bild klicken,
zurück zum Artikel mit dem Back-Button des Browser!
4. Sonstige Hardware
Die weiteren Komponenten der ein Cisco Catalyst 4948 (48) Port Management Switch, der alle verbauten Server und InfiniBand
Switches an ein internes 1GbE Administrations- und Management-Netzwerk anschließt. Vom Switch sind im Vollausbau der Exadata 47 Ports belegt, 22 werden für ILOM
Verbindungen verwendet, 22 für die NET0 Verbindungen und 3 Ports werden für die ILOM Verbindung zu den InfiniBand Switches benötigt. Der Cisco Switch
kann über den verbleibenden freien Port in das kundeneigene Administrations-Netzwerk eingebunden werden.
KVM (Keyboard, Video, Mouse) Komponenten zur lokalen Administration der
Die einzige Hardware Modifikation, die der Kunde an der
5. Technische Daten
Von der Quarter Rack, bestehend aus 2 Datenbank Servern, 3 Storage Servern und 2 InfiniBand Switches
Half Rack, bestehend aus 4 Datenbank Servern, 7 Storage Servern und 3 InfiniBand Switches
Full Rack, bestehend aus 8 Datenbank Servern, 14 Storage Servern und 3 InfiniBand Switches
Die X2-2 Full
X2-2 Half
X2-2 Quarter
Abbildung
Für eine größere Ansicht
auf das Bild klicken,
zurück zum Artikel mit dem
Back-Button des Browser!
Für eine größere Ansicht
auf das Bild klicken,
zurück zum Artikel mit dem
Back-Button des Browser!
Für eine größere Ansicht
auf das Bild klicken,
zurück zum Artikel mit dem
Back-Button des Browser!
Database Server
8
4
2
Database Grid CPU Cores
96
48
24
Database Grid Memory
768GB (max. 1152GB)
384GB (max. 576GB)
192GB (max. 288GB)
InfiniBand Switches
3
2
2
Ethernet Switch
1
1
1
Storage Server
14
7
3
Storage Grid CPU Cores
168
7
3
Flash Kapazität
5,3TB
2,6TB
1,1TB
Gesamt Storage
KapazitätHigh Performance
High Capacity
100TB
504TB
50TB
252TB
21,6TB
108TB
Nutzbare Kapazität
gespiegeltHigh Performance
High Capacity
45TB
224TB
22,5TB
112TB
9,5TB
48TB
Nutzbare Kapazität
dreifach gespiegeltHigh Performance
High Capacity
30TB
150TB
15TB
75TB
6,5TB
32TB
Bandbreite
FestplattenHigh Performance
High Capacity
25GB/s
18GB/s
12,5GB/s
9GB/s
5,4GB/s
4GB/s
Bandbreite
FlashHigh Performance
High Capacity
75GB/s
68GB/s
37,5GB/s
34GB/s
16GB/s
14,5GB/s
Disk
IOPSHigh Performance
High Capacity
50.000
28.000
25.000
14.000
10.800
6.000
Flash IOPS
1.500.000
750.000
375.000
Daten Laderate
12TB/Std
6TB/Std
3TB/Std
Weitere Details finden Sie unter: