Dell PowerEdge Systems Oracle Database on Microsoft Windows Server x64 Storage and Network Guide Version 1.
Notes, Cautions, and Warnings NOTE: A NOTE indicates important information that helps you make better use of your computer. CAUTION: A CAUTION indicates potential damage to hardware or loss of data if instructions are not followed. WARNING: A WARNING indicates a potential for property damage, personal injury, or death. ____________________ Information in this publication is subject to change without notice. © 2011 Dell Inc. All rights reserved.
Contents 1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . Required Documentation for Deploying the Dell|Oracle 11g R2 Database . . . . . . . . . . . . . 7 . . . . . . . . . . . 8 . . . . . . . . . . . . . . . . . . . . . . . . 8 Terminology Used in This Document Getting Help Dell Support . . . . . . . . . . . . . . . . . . . . . . Oracle Support 2 7 . . . . . . . . . . . . . . . . . . . . Configuring Your Network . . . . . . . . . . . . .
3 Setting Up a SAS Cluster for Dell PowerVault Storage Enclosures Setting Up the Hardware. . . . 23 . . . . . . . . . . . . . . . . 25 . . . . . . . . 26 Verifying and Upgrading the Firmware . . . . . . . . . 27 Installing the SAS HBA Adapter Driver . . . . . . . . . 27 Installing Host-Based Storage Software Installing Host-Based Storage Software . . . . . . . . 27 Installing the MD Storage Software . . . . . . . . 28 . . . . . . . . . . . . . . .
Setting Up an iSCSI Cluster for the Dell|EqualLogic PS Series Storage System . . . . . . . . . . . . . . . EqualLogic Terminology . . . . . . 43 . . . . . . . . . . . . . . . . 43 . . . 43 . . . . . . . . . . . . . . . . . 46 Setting Up the EqualLogic iSCSI Storage System . Creating Volumes . Configuring iSCSI Networks . . . . . . . . . . . . Configuring Host Access to Volumes. 6 Configuring Database Storage on the Host . . . . . . . . . . . . . . . 48 . . . . . . . .
Contents
1 Overview This document provides instructions to configure the network and storage requirements for running the Dell|Oracle database on a system with the Microsoft Windows Server 2008 R2 SP1 operating system installed. The procedures in this document apply to Oracle Database 11g R2 running on Microsoft Windows Server x64. For the list of network and storage configurations supported by your system, go to dell.com/oracle and select Dell Validated Components.
Terminology Used in This Document This document uses the terms volume and virtual disk. These terms are synonymous and can be used interchangeably. Volume is commonly used in a Dell EqualLogic iSCSI storage system environment and virtual disk is commonly used in a Dell PowerVault SAS and iSCSI (Dell PowerVault MD3000/MD32xx/MD36xxi and Dell PowerVault MD3000i/MD32xxi with Dell PowerVault MD1000/MD12xx expansion) storage environment.
Configuring Your Network 2 This section provides information about configuring the public and private cluster network. NOTE: Each node requires a unique public and private internet protocol (IP) address and an additional public IP address to serve as the virtual IP address for the client connections and connection failover. The virtual IP address must belong to the same subnet as the public IP address.
5 Navigate to HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\. 6 Double-click DisabledComponents to modify it. If there is no value listed, click EditNewDWORD (32-bit) Value. 7 Type DisabledComponents and press . 8 Enter DWORD value : 0xffffffff. All IPv6 components except the IPv6 loopback interface are disabled. Configuring NIC Teaming for Your Private Network Adapters 1 On node 1, identify two network adapters that will be used for NIC teaming.
k On the Team Properties window, click OK. l On the Intel NIC's Properties window, click OK. m Close the Computer Management window. 4 If node 1 is configured with Broadcom NICs, configure NIC teaming by performing the following steps. Else go to step 5. a Click Start All Programs Broadcom Broadcom Advanced Control Suite 3. The Broadcom Advanced Control Suite 3 window is displayed. b Select Team Management, and right-click Teams and select Create a Team.
n On the information message window click Yes to proceed. o On the Broadcom Advanced Control Suite 3 window, click FileExit. 5 Repeat step 1 to step 4 on the remaining nodes. NOTE: It is recommended to have the two bonded NIC ports for the private network on separate PCI buses. For example, a bonded pair can consist of one on-board NIC (LOM) and one add-on NIC card. Configuring the IP Addresses for Your Public and Private Network Adapters 1 Update the adapter's network interface name, if required.
e On the Properties window, click Close. f Repeat step a through step e on the Private NIC team. NOTE: Private NIC team does not require a default gateway address and DNS server entry. 3 Ensure that the public and private network adapters appear in the appropriate order for access by network services. a On the Windows Server, click StartSearch programs and files search box, type View network connections. Click on View network connections in the search results.
NOTE: Windows Firewall is turned ON by default in Windows Server 2008 R2 SP1, which results in the Ping command to fail with Static IPs. Disable the Windows Firewall to be able to Ping other nodes. NOTE: Virtual internet protocol (VIP) is configured later and cannot be pinged at this point. c Repeat step a through step b on the remaining nodes.
Configuring a DNS Server To configure a DNS server using GNS: 1 Configure GNS VIP address on DNS server—In the DNS, create a name resolution entry for the GNS virtual IP address in the forward Lookup zones. a Open the DNS manager. b Click DNS server Forward Lookup Zones DNS Domain. c Right-click DNS domain and select New Host (A or AAAA). d In the New Host windows, enter the name and IP address for GNS virtual IP address. e Click Add Host. f Click OK. g Click Done on New Host window.
Configuring Host Name Resolution Add host entries within the %SystemRoot%\system32\drivers\etc\hosts file domain name. On each node, modify lines in the %SystemRoot%\system32\drivers\etc\hosts file by typing: 127.0.0.
Configuring a DNS Server To configure changes on a DNS server for an Oracle 11g R2 cluster using a DNS (without GNS): 1 Configure SCAN NAME resolution on DNS server. 2 In the DNS, create a name resolution entry for the GNS virtual IP address in the forward Lookup file. 3 Open the DNS manager. 4 Click the DNS server Forward Lookup Zones DNS Domain. 5 Right-click DNS domain and select New Host (A or AAAA). 6 In the New Host window, enter the name and IP address for GNS virtual IP address. 7 Click Add Host.
Enabling IPMI Intelligent Platform Management Interface (IPMI) provides a set of common interfaces to the hardware and firmware that system administrators can use to monitor system health and manage the system. With Oracle 11g R2, Oracle Clusterware can integrate IPMI to provide failure isolation support and to ensure cluster integrity. Prerequisites for Enabling IPMI Each cluster node requires a Baseboard Management Controller (BMC), running a firmware compatible with IPMI version 1.
Entering the Remote Access Configuration Utility 1 Turn on or restart your system. 2 Press when prompted after POST. If your operating system begins to load before you press , allow the system to finish booting, and then restart your system and try again. Remote Access Configuration Utility Options Table 2-4 lists the Remote Access Configuration Utility options and shows how to configure the BMC on a managed system.
Table 2-4. Remote Access Configuration Utility Option Description IPMI Over LAN Enable. NIC Selection Dedicated. Enables the remote access device to utilize the dedicated network interface available on the Remote Access Controller. This interface is not shared with the host operating system and routes the systems management traffic to a separate physical network, enabling it to be separated from the application traffic. NOTE: This option is available only on systems with a DRAC installed.
Table 2-4. Remote Access Configuration Utility (continued) Option Description Account Access Enabled. Account Privilege Set the account to: Admin. Account User Name Assign account user name. Enter Password Enter the password for this Account User. You must enter at least one non-null character. Confirm Password Confirm the password you entered.
Configuring Your Network
3 Setting Up a SAS Cluster for Dell PowerVault Storage Enclosures WARNING: Before you begin any of the procedures in this section, read the safety information that shipped with your system. For additional best practices information, see dell.com/regulatory_compliance.
Figure 3-1. Cabling the Serial-Attached SCSI (SAS) Cluster and the Dell PowerVault MD32xx Storage Enclosure Client Systems Private Network DNS and DHCP Server LAN/WAN PowerEdge Systems PowerVault MD32xx Storage System Two PowerVault MD12xx Expansion Enclosures CAT 5e/6 (Public NIC) CAT 5e/6 (Copper Gigabit NIC) SAS Cables Table 3-1.
Table 3-1. SAS Cluster Hardware Interconnections (continued) Cluster Component Connections PowerVault MD32xx storage enclosure • Two CAT 5e/6 cables connected to LAN (one from each storage processor module) • Two SAS connections to each PowerEdge system node through the SAS 6/E cables NOTE: For more information on the PowerVault MD32xx storage enclosure interconnection, see "Setting Up the Hardware" on page 25.
6 If applicable, connect two SAS cables from the two PowerVault MD12xx storage enclosures out ports to the In-0 ports of the second PowerVault MD12xx expansion enclosure. NOTE: For information on configuring the PowerVault MD12xx expansion enclosure, see the PowerVault MD12xx storage system documentation at support.dell.com/manuals. Figure 3-2.
Verifying and Upgrading the Firmware To verify and upgrade the firmware: 1 Discover the direct-attached storage of the host system using the MDSM software that is installed on the host system.
For more information on supported hardware and software for Dell PowerVault systems, see the Support Matrix located at support.dell.com/manuals. NOTE: It is recommended that you install all the latest updates available at support.dell.com. Installing the MD Storage Software The PowerVault MD32xx Series storage software installer provides features that include the core software and providers.
4 Install the MD Storage software. Select one of the following installation options: • Full—This package installs core software, providers, and utilities. It includes the necessary host-based storage agent, multipath driver, MD Storage Manager, providers, and optional utilities. • Host Only—This package includes the host context agent, multipath drivers, and optional utilities required to configure the host.
Post Installation Tasks Before using the PowerVault MD32xx Series storage array for the first time, complete a number of initial configuration tasks in the order shown. These tasks are performed using the MD Storage Manager (MDSM) software. To complete the post installation tasks: 1 For out-of-band management, set the network configuration for each RAID controller module, including its Internet Protocol (IP) address, subnetwork mask (subnet mask), and gateway.
2 Verify that the array is on the local subnetwork. If it is not, click the New link to manually add it. 3 Verify that the status of each storage array is Optimal. If any array shows an Unresponsive status, complete one of the following steps: a To remove the array from the management domain, highlight the array and then click Remove link. b To add an array, click New link and click OK. 4 If the array still shows an Unresponsive status, contact Dell.
Setting Up a SAS Cluster
4 Setting Up an iSCSI Cluster for Dell PowerVault Storage Enclosures WARNING: Before you begin any of the procedures in this section, read the safety information that shipped with your system. For additional best practices information, see dell.com/regulatory_compliance. This section provides information and procedures for configuring your Dell PowerEdge system and the PowerVault MD32xxi and MD12xx storage enclosures to function in an Oracle Real Application Cluster (RAC) environment.
Table 4-1. iSCSI Hardware Interconnections (continued) Cluster Component Connections PowerVault MD12xx storage expansion enclosure (optional) Additional SAS cable connections, as required for the PowerVault MD12xx expansion enclosure Setting Up the Hardware Direct-attached iSCSI clusters are limited to four nodes only. Figure 4-1.
To configure your nodes in a direct-attached configuration, see Figure 4-1. 1 Connect one CAT 5e/6 cable from a port (iSCSI HBA or NIC) of node 1 to the In-0 port of RAID controller 0 in the PowerVault MD32xxi storage enclosure. 2 Connect one CAT 5e/6 cable from the other port (iSCSI HBA or NIC) of node 1 to the In-0 port of RAID controller 1 in the PowerVault MD32xxi storage enclosure.
Figure 4-2.
To configure your nodes in a switched configuration, see Figure 4-2. 1 Connect one CAT 5e/6 cable from a port (iSCSI HBA or NIC) of node 1 to the port of network switch 1. 2 Connect one CAT 5e/6 cable from a port (iSCSI HBA or NIC) of node 1 to the port of network switch 2. 3 Connect one CAT 5e/6 cable from a port (iSCSI HBA or NIC) of node 2 to the port of network switch 1. 4 Connect one CAT 5e/6 cable from a port (iSCSI HBA or NIC) of node 2 to the port of network switch 2.
Installing Host-Based Software Needed for Storage To install the necessary host-based storage software for the PowerVault MD32xxi storage system, use the Dell PowerVault Resource media that came with your PowerVault MD32xxi storage system. Follow the procedures in the PowerVault MD32xxi storage enclosure documentation at support.dell.com/manuals, to install the Modular Disk Storage Manager Software (MDSM) on the Master node and the Multi-Path IO (MPIO) software on the remaining nodes.
Setting Up an iSCSI Cluster for the Dell PowerVault MD32xxi and MD12xx Storage Enclosures Setting Up the Hardware For assistance in setting up or installing your PowerVault MD32xxi and PowerVault MD12xx expansion enclosure, please refer to the PowerVault documentation at support.dell.com/manuals. Installing Host-Based Storage Software The PowerVault MD32xxi Series storage software installer provides features that include the core software, providers, and optional utilities.
The PowerVault MD32xxi Series resource media provided offers the following installation methods: • GUI-based Installation (Recommended)—The installer presents a graphical wizard-driven interface that allows customization of components to be installed. • Silent Installation—This installation procedure is useful for users who prefer to create scripted installations. Graphical Installation (Recommended) To complete graphical installation: 1 Close all other programs before installing any new software.
2 To specify which features are to be installed silently, you must modify the custom_silent.properties file located in the same directory and copy it to a writable location on the host server. This file contains a list of supported features and their descriptions. To utilize the modified custom_silent.properties file, run the command: md32xxi_install -f /custom_silent.
Setting Up an iSCSI Cluster
5 Setting Up an iSCSI Cluster for the Dell|EqualLogic PS Series Storage System WARNING: Before you begin any of the procedures in this section, read the safety information that shipped with your system. For additional best practices information, see dell.com/regulatory_compliance. EqualLogic Terminology The EqualLogic PS series storage array includes storage virtualization technology.
NOTE: It is recommended to use two 10 Gigabit Ethernet switches. In the event of a switch failure in a single Ethernet switch environment, all hosts lose access to the storage until the switch is physically replaced and the configuration restored. In such a configuration, there must be multiple ports with link aggregation providing the inter-switch, or trunk connection.
Figure 5-2.
An EqualLogic PS-series storage group can be segregated into multiple tiers or pools. Tiered storage provides administrators with greater control over how disk resources are allocated. At any one time, a member can be assigned to only one pool. It is easy to assign a member to a pool and to move a member between pools with no impact to data availability. Pools can be organized according to different criteria, such as disk types or speeds, RAID levels, and application types.
Table 5-1 shows a sample volume configuration. Table 5-1.
4 Click Configure. 5 Click Advanced. 6 Select Jumbo Packet, and set its value to 9014 bytes. 7 Select Performance Options, then click Properties. The Performance Options window is displayed. 8 Select Flow Control, and set its value to Rx & Tx Enabled. 9 Repeat step 3 to step 8 for all other network interfaces used for iSCSI traffic. Configuring Host Access to Volumes Installing and Configuring Dell EqualLogic Host Integration Tool (HIT) Kit 1 Download the latest HIT tool kit on your database server.
8 On the System Restart Required window, select Yes, I want to restart my computer now, and click OK. On completion of reboot, the Remote Setup Wizard window is displayed. 9 Select Configure MPIO settings for this computer, then click Next. 10 Move the iSCSI network subnets under Subnets included for MPIO. 11 Move all other network subnets under Subnets excluded from MPIO. NOTE: If you do not see all your subnets then ensure that your Microsoft iSCSI Initiator Service is running.
g Enter the CHAP user name defined in EqualLogic storage in the User name box. h Enter the CHAP password defined in EqualLogic storage in the Target secret box. NOTE: The CHAP password must be at least 12 characters long. i Click OK. 4 In the Targets tab of the iSCSI Initiator Properties window, click on one volume that was created for the Oracle database and click Connect.
6 Configuring Database Storage on the Host WARNING: Before you begin any of the procedures in this section, read the safety information that shipped with your system. For additional best practices information, see dell.com/regulatory_compliance. Oracle Real Application Clusters (RAC) requires an ordered list of procedures. The following sections describe how to verify, adjust, and configure the storage disks for the direct-attached SAS, or iSCSI storage on your host.
4 On the Disk Management window, verify if four disks appear. The disks should be similar in size to each other and to the virtual disks that are assigned to the nodes in the storage system. 5 Repeat step 1 to step 4 on the remaining nodes. Preparing the Disks for Oracle Clusterware, Database, and Backup This section provides information for creating the logical drives for the following disks: • Oracle Cluster Registry disk (OCR)—Contains the cluster configuration information.
Preparing the OCR and Voting Disk for Clusterware, Database Disk and Flash Recovery Area for Database Storage With ASM on Windows 2008 R2 SP1 The procedure to create extended partitions and logical drives is as follows: 1 Click Start Run and type cmd and press to open a command prompt window. 2 Type diskpart in the command prompt to open the diskpart interface.
Removing the Assigned Drive Letters 1 Click Start Administrative Tools Server Manager. 2 Expand Storage and click Disk Management. 3 If you find any drive letters assigned to the drives that you created in "Preparing the OCR and Voting Disk for Clusterware, Database Disk and Flash Recovery Area for Database Storage With ASM on Windows 2008 R2 SP1" on page 53, perform the following steps: 54 a Right-click the logical drive and select Change Drive Letter and Paths.
Index C R cabling iSCSI cluster, 34 Resource Media PowerVault MD3000, 27 H S help, 8 Dell support, 8 Oracle support, 8 SAS cluster setup, 23, 33, 43, 51 M Modular Disk Storage Manager, 26 MPIO software, 26 N NIC port assignments, 9 T term Group, 43 Member, 43 Pool, 43 Volume, 43 V volumes, 46 P PowerConnect switch, 43 Index 55
Index
Dell PowerEdge 系统 Microsoft Windows Server x64 上的 Oracle 数据库 存储设备和网络 指南 版本 1.
注、小心和警告 注：“注”表示可以帮助您更好地使用计算机的重要信息。 小心：“小心”表示如果不遵循说明，就有可能损坏硬件或导致数据丢 失。 警告： “警告”表示可能会造成财产损失、人身伤害甚至死亡。 ____________________ 本出版物中的信息如有更改，恕不另行通知。 © 2011 Dell Inc. 版权所有，翻印必究。 未经 Dell Inc. 书面许可，严禁以任何形式复制这些材料。 本文中使用的商标：Dell™、 DELL 徽标、 EqualLogic™、 Optiplex™、 PowerConnect™、 PowerEdge™ 和 PowerVault™ 是 Dell Inc.
目录 1 概览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 部署 Dell|Oracle 11g R2 Database 所需的说明文件 . . . . . . . . . . . . . . . . . . . . 63 . . . . . . . . . . . . . . . 64 . . . . . . . . . . . . . . . . . . . . . . . . 64 本说明文件中使用的术语 获得帮助 . Dell 支持 . . . . . . . . . . . . . . . . . . . . . . Oracle 支持 . 2 配置网络 63 64 . . . . . . . . . . . . . . . . . . . . 64 . . . . . . . . . . . . . . . . . . . . . . . . . 65 对网络适配器禁用 IPv6 . . . . . . . . . . . . . . . .
3 设置用于 Dell PowerVault 存储设备盘柜的 SAS 群集 设置硬件 . . . . . . . . . . . . 79 . . . . . . . . . . . . . . . . . . . . . . . . 81 . . . . . . . . . . . . . . . 82 . . . . . . . . . . . . . . . . . . . . 83 安装基于主机的存储软件 验证并升级固件 . . . . . . . . . . . . . 83 . . . . . . . . . . . . . . . 83 . . . . . . . . . . . . . . . . 84 . . . . . . . . . . . . . . . . . . . . 85 安装 SAS HBA 适配器驱动程序 安装基于主机的存储软件 安装 MD 存储软件 . 安装后任务 . 验证存储阵列搜索. 4 . . . . . . . . . . . . . . . .
5 设置用于 Dell|EqualLogic PS 系列存储系统的 iSCSI 群集 . EqualLogic 术语 . . . . . . . . . . 95 . . . . . . . . . . . . . . . . . . . . 95 . . . . . . . . . . . 95 . . . . . . . . . . . . . . . . . . . . . . . 98 设置 EqualLogic iSCSI 存储系统 . 创建卷 配置 iSCSI 网络 6 验证和识别存储磁盘 . . . . . . . 103 103 . . . . . . . . . . . . . . . . . 验证节点的存储分配 103 . . . . . . . . . . . . . . . . . . . . 104 . . . . . . . . . 104 为 Oracle 群集件、数据库和备份准备磁盘 为共享磁盘启用自动安装选项 .
目录
1 概览 本说明文件提供了如何配置在安装 Microsoft Windows Server 2008 R2 SP1 操 作系统的系统上运行 Dell|Oracle 数据库所需的网络和存储设备的说明。 本说明文件中的步骤适用于运行在 Microsoft Windows Server x64 上的 Oracle Database 11g R2。有关您的系统支持的网络和存储设备配置的列表， 请访问 dell.
本说明文件中使用的术语 本说明文件使用术语卷和虚拟磁盘。这些术语是同义词并可互换使用。术语 卷通常在 Dell EqualLogic iSCSI 存储系统环境中使用，而虚拟磁盘通常在 Dell PowerVault SAS 和 iSCSI（Dell PowerVault MD3000/MD32xx/MD36xxi 和带有 Dell PowerVault MD1000/MD12xx 扩展的 Dell PowerVault MD3000i/MD32xxi）存储环境中使用。 获得帮助 Dell 支持 • 有关使用系统的详情，请参阅随系统组件附带的说明文件。 • 有关白皮书、Dell 支持的配置和一般信息，请访问 dell.com/oracle。 • 要获得对硬件和操作系统软件的 Dell 技术支持并下载最新的系统更 新，请访问 support.dell.com。 • 有关 Dell 企业培训服务的信息，请访问 dell.
2 配置网络 本节介绍关于配置公用和专用群集网络的信息。 注：每个节点都需要一个唯一的公用和专用网际协议 (IP) 地址，以及一个附 加公用 IP 地址，该附加公用 IP 地址用作客户端连接和连接故障转移的虚拟 IP 地址。虚拟 IP 地址必须与公用 IP 地址属于同一个子网。所有公用 IP 地 址，包括虚拟 IP 地址，都应该在域命名服务 (DNS) 中注册。如果 DNS 服务 器不可用，则必须在所有群集节点上的主机文件中注册 IP 地址。 如表 2-1 中所示，根据可用 NIC 端口的数量配置接口。 表 2-1.
5 导航到 HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\。 6 双击 DisabledComponents 进行修改。如果未列出任何值，请单击 Edit （编辑） New （新建） DWORD (32-bit) Value （DWORD [32 位 ] 值）。 7 键入 DisabledComponents 并按 键。 8 输入 DWORD 值：0xffffffff。 将禁用所有 IPv6 组件，但 IPv6 回送接口除外。 为专用网络适配器配置 NIC 组队 1 在节点 1 上，确定两个要用于 NIC 组队的网络适配器。 2 使用以太网电缆从每个选定的网络适配器连接至专用网络交换机。 3 如果节点 1 配置为使用 Broadcom NIC，请转至步骤 4。如果节点 1 配 置为使用 Intel NIC，请通过执行以下步骤配置 NIC 组队： 66 a 单击 Start （开始） Administrative tools （管理工具） Server Manager （服务器管
k 在 Team Properties （组队属性）窗口中，单击 OK （确定）。 l 在 Intel NIC 的 Properties （属性）窗口中，单击 OK （确定）。 m 关闭 Computer Management （计算机管理）窗口。 4 如果使用 Broadcom NIC 配置节点 1，请通过执行以下步骤配置 NIC 组 队。否则转至步骤 5。 a 单击 Start （开始） All Programs （所有程序） BroadcomBroadcom Advanced Control Suite 3 （Broadcom 高级 控制套件 3）。 随即显示 Broadcom Advanced Control Suite 3（Broadcom 高级控 制套件 3）窗口。 b 选择 Team Management （组队管理），然后右键单击 Teams （组 队）并选择 Create a Team （创建组队）。 随即显示 Broadcom Teaming Wizard（Broadcom 组队向导） 窗口。 c 单击 Next （下一步）。 d 在 Enter t
k 在 VLAN Support （VLAN 支持）窗口中，如果有 VLAN 需要配 置，则选择 Add VLAN （添加 VLAN），否则选择 Skip manage VLAN （跳过管理 VLAN）。 l 在最后一个窗口中，单击 Preview （预览）验证 NIC 组队和适配 器。验证后，请选择 Commit changes to system （向系统提交更 改），然后退出向导。 m 单击 Finish （完成）。 n 在提示信息窗口中，单击 Yes （是）继续。 o 在 Broadcom Advanced Control Suite 3 （Broadcom 高级控制 套件 3）窗口中，单击 File （文件） Exit （退出）。 5 在其余的节点上重复执行步骤 1 至步骤 4。 注：建议将专用网络的两个绑定的 NIC 端口位于独立的 PCI 总线上。例如， 一个绑定对可由一个机载 NIC (LOM) 和一个添加式 NIC 卡组成。 为公用网络适配器和专用网络适配器配置 IP 地址 1 更新适配器的网络接口名称 （如果需要）。否则，请转至步骤 2。 a 在节点 1 上，单击
2 配置 IP 地址。 a 单击 Start （开始） Administrative Tools （管理工具） Server Manager （服务器管理器） View Network Connections （查看网络连接） Public （公用） Properties （属性）。 b 双击 Internet Protocol (TCP/IP) （网际协议 [TCP/IP]）。 c 单击 Use the following IP address （使用以下 IP 地址），输入所需 的 IP 地址、默认网关地址和 DNS 服务器 IP 地址，然后单击 OK （确定）。 d 单击 OK （确定）。 e 在 Properties （属性）窗口中，单击 Close （关闭）。 f 在专用 NIC 组队上重复执行步骤 a 至步骤 e。 注：专用 NIC 组队不需要输入默认网关地址和 DNS 服务器。 3 确保公用和专用网络适配器以适当的顺序显示，以便通过网络服务进 行访问。 a 在 Windows Server 上，单击 Start （开始） Search prog
5 确保群集节点可以与公用和专用网络进行通信。 a 在节点 1 上，打开命令提示符窗口。 b 在命令提示符下键入： ping ping 其中 和 是其余节点中 公用和专用网络适配器的主机名。 如果节点的网络适配器没有响应 ping 命令，请检查网络配置，然 后再次执行此步骤。 注：Windows Server 2008 R2 SP1 中默认打开 Windows 防火墙，这导致 对静态 IP 执行 Ping 命令失败。禁用 Windows 防火墙以便对其它节点执 行 Ping 命令。 注：虚拟网际协议 (VIP) 将在后面配置，因此此时无法使用 ping 命令。 c 在其余的节点上重复执行步骤 a 至步骤 b。 IP 地址和名称解析要求 对于使用 GNS 的群集 使用 Oracle 全局命名服务器 (GNS) 设置 Oracle 11g R2 远程访问控制， 您需要： 70 • 每个节点中至少配置两个接口，一个用于专用 IP 地址，一个用
表 2-2 介绍了不同的接口、IP 地址设置和群集中的解析。 表 2-2.
2 配置 GNS 子域代理 — 在 DNS 服务器中，建立 DNS 查找，将 GNS 子 域的 DNS 解析指向群集。打开 DNS 管理器并执行以下操作： a 单击 DNS server （DNS 服务器） Conditional Forwarders （条 件转发器）。 b 右键单击 Conditional Forwarders （条件转发器）并选择 New Conditional Forwarder （新条件转发器）。 c 在 New Conditional Forwarders （新条件转发器）窗口中，输入 GNS 子域和 GNS VIP 地址 （在网格安装过程中必须提供）。 示例：clusterdomain.subdomain.com（GNS 子域） 192.0.2.
表 2-3 介绍了不同的接口、IP 地址设置和群集中的解析。 表 2-3.
配置主机名解析 在群集节点上配置进行名称解析所需的更改： 1 在 %SystemRoot%\system32\drivers\etc\hosts 文件中添加主机条目。 2 在每个节点上，通过键入以下命令修改 %SystemRoot%\system32\drivers\etc\hosts 文件中的行： 127.0.0.
底板管理控制器配置 在系统启动时，您可以使用远程访问配置公用程序执行基本的 BMC 配置。 进入远程访问配置公用程序 1 打开或重新启动系统。 2 系统完成 POST 后提示您时，请按 组合键。 如果按 组合键之前已开始载入操作系统，请让系统完成引导 过程，然后重新启动系统并再试一次。 远程访问配置公用程序选项 表 2-4 列出了远程访问配置公用程序选项，并显示如何在 Managed System 上配置 BMC。输入所有设置后，按 并选择以下选项之一： • Save Changes and Exit（保存更改并退出）- 保留在远程访问配置公用 程序中所做的所有输入。 • Discard Changes and Exit（放弃更改并退出）- 取消在远程访问配置公 用程序中所做的所有输入。 • Return to Setup（返回设置）- 继续使用远程访问配置公用程序。 配置网络 75
表 2-4. 远程访问配置公用程序 选项 说明 IPMI Over LAN （LAN 上 IPMI） 启用。 NIC Selection（NIC 选择） 专用。 让远程访问设备利用 Remote Access Controller 上的专用网络接口。此接口不与主机操作系统 共享并且会将系统管理通信路由到单独的物理 网络，从而能够与应用程序通信分开。 注：此选项仅在安装了 DRAC 的系统上可用。 LAN Parameters（LAN 参数） IP Address Source （IP 地址源） 给网络控制器分配静态 IP 地址或 DHCP 地址。 Ethernet IP Address（以太网 IP 地址） BMC 的静态 IP 地址。该字段的最大值为 255.255.255.255。 以下 IPv4 规格适用： • IP 地址不能是 127.xxx.xxx.xxx，其中 xxx 是 0 – 255 的值。 • 第一个八位位组必须在 1 至 223 之间 （即 143.xxx.xxx.xxx）。 注：当 BMC 无法与 DHCP 服务器联系时，将 返回 IP 地址 169.254.0.
表 2-4.
配置网络
3 设置用于 Dell PowerVault 存储设 备盘柜的 SAS 群集 警告：开始执行本节中的任何步骤之前，请阅读系统附带的安全信息。 有关其它最佳实践信息，请访问 dell.
图 3-1. 串行连接的 SCSI (SAS) 群集和 Dell PowerVault MD32xx 存储设备盘柜布线 客户端系统 专用网络 DNS 和 DHCP 服务器 LAN/WAN PowerEdge 系统 PowerVault MD32xx 存储系统 两个 PowerVault MD12xx 存储系统 CAT 5e/6 （公用 NIC） CAT 5e/6 （铜质千兆位 NIC） SAS 电缆 表 3-1.
表 3-1.
图 3-2.
验证并升级固件 验证并升级固件： 1 使用安装在主机系统中的 MDSM 软件搜索直接连接的主机系统存 储设备。 2 验证以下存储设备组件的固件是否满足最低所需版本： • RAID 控制器固件 • PowerVault MD32xx 存储系统固件 • PowerVault MD12xx 扩展盘柜固件 注：有关最低固件版本要求，请选择 dell.com/oracle 上的 Dell Validated Components（经过验证的 Dell 组件）链接。 安装 SAS HBA 适配器驱动程序 从 PowerVault MD32xx Resource 介质安装 SAS HBA 驱动程序。 注：确保 SAS HBA 驱动程序的版本与 Solution Deliverable List（可提供的解 决方案列表，SDL）中列出的版本相同或者比列出版本更新，各个经 Dell 认 证的组件的 SDL 都可在 dell.
安装 MD 存储软件 PowerVault MD32xx 系列存储软件安装程序提供多种功能，包括核心软件和 提供程序。核心软件功能包括用于配置、管理和监测存储阵列解决方案的基 于主机的存储代理、多路径驱动程序以及 MD Storage Manager 应用程序。 提供程序功能包括用于 Microsoft 虚拟磁盘服务 (VDS) 和 Microsoft 卷影复 制服务 (VSS) 框架的提供程序。 注：有关 Microsoft VDS 和 Microsoft VSS 提供程序的详情，请参阅 《用户手册》。 注：要在 Windows 系统上安装软件，必须具有管理权限。 PowerVault MD32xx 系列资源介质提供以下三种安装方法： • 基于 GUI 的安装（推荐）— 安装程序显示图形向导驱动型界面，允许 安装自定义组件。 • 无提示安装 — 此安装方法对于喜欢创建脚本安装的用户非常有用。 图形化安装 （推荐） 完成图形化安装： 1 安装任何新软件之前，请关闭所有其它程序。 2 插入资源介质。 3 选择 Install MD32xx Storage Software （安装 MD32xx 存储软
无提示安装 此选项允许您在无提示模式下安装软件。要在 Windows 系统中运行无提示 安装，请按照下面列出的步骤进行操作： 1 要使用所有默认选项开始安装，可浏览至资源介质上的 windows 文件 夹并运行以下命令： md32xx_install -i silent 2 要指定要无提示安装的功能，必须修改位于相同目录中的 custom_silent.properties 文件，并将其复制到主机服务器上的可写位 置。此文件包含支持功能及其说明的列表。要利用修改后的 custom_silent.properties 文件，可运行以下命令： md32xx_install -f C:\path\to\custom_silent.
验证存储阵列搜索 Automatic Discovery（自动搜索）选项会自动搜索带内和带外的阵列，并将 存储阵列添加至管理域。如果 Summary（摘要）页面中显示的带外或带内 连接不准确，请完成以下步骤： 验证存储阵列搜索： 1 检查可能的硬件和连接问题。有关排除接口故障的特定步骤，请参阅 相关存储阵列的 《用户手册》。 2 验证该阵列是否位于本地子网中。如果不在，则单击 New （新建）链 接以手动添加。 3 验证各存储阵列的状态是否为 Optimal （最佳）。如果任何阵列显示 Unresponsive （非响应）状态，则完成以下步骤之一： a 要从管理域中移除阵列，可高亮度显示该阵列并单击 Remove （移除）链接。 b 要添加阵列，单击 New （新建）链接并单击 OK （确定）。 4 如果阵列仍显示 Unresponsive （未响应）状态，请与 Dell 联络。 初始设置任务 完成初始设置任务： 1 此时将在 EMW 中的 Devices （设备）选项卡中显示找到的第一个存 储阵列的名称。要查看在本地网络中找到的所有存储阵列的列表，请 在 EMW 的 Device （设备）窗格中展
4 设置用于 Dell PowerVault 存储设 备盘柜的 iSCSI 群集 警告：开始执行本节中的任何步骤之前，请阅读系统附带的安全信息。 有关其它最佳实践信息，请访问 dell.com/regulatory_compliance。 本节提供有关如何配置 Dell PowerEdge 系统以及 PowerVault MD32xxi 和 MD12xx 存储设备盘柜，使其能在 Oracle Real Application Cluster (RAC) 环 境中正常运行的信息和步骤。 使用 Dell PowerVault MD32xxi 支持值表（可从 support.dell.com/manuals 获 取）中的“支持的配置”部分，验证硬件连接以及硬件和软件配置。 表 4-1.
设置硬件 直接连接的 iSCSI 群集仅限于四个节点。 图 4-1.
要在直接连接的配置中配置节点，请参阅图 4-1。 1 使用一根 CAT 5e/6 电缆从节点 1 的一个端口 （iSCSI HBA 或 NIC） 连接至 PowerVault MD32xxi 存储设备盘柜中 RAID 控制器 0 的 In-0 端口。 2 使用一根 CAT 5e/6 电缆从节点 1 的另一个端口 （iSCSI HBA 或 NIC） 连接至 PowerVault MD32xxi 存储设备盘柜中 RAID 控制器 1 的 In-0 端口。 3 使用一根 CAT 5e/6 电缆从节点 2 的一个端口 （iSCSI HBA 或 NIC） 连接至 PowerVault MD32xxi 存储设备盘柜中 RAID 控制器 0 的 In-1 端口。 4 使用一根 CAT 5e/6 电缆从节点 2 的另一个端口 （iSCSI HBA 或 NIC） 连接至 PowerVault MD32xxi 存储设备盘柜中 RAID 控制器 1 的 In-1 端口。 5 对连接至 RAID 控制器 0 和 RAID 控制器 1 的 In-2 和 In-3 的节点 3 和 节点 4 重复步骤 1 至步骤 4。 6 如果可用，使用
图 4-2.
要在交换式配置中配置节点，请参阅图 4-2。 1 使用一根 CAT 5e/6 电缆从节点 1 的一个端口 （iSCSI HBA 或 NIC）连 接至网络交换机 1 的端口。 2 使用一根 CAT 5e/6 电缆从节点 1 的一个端口 （iSCSI HBA 或 NIC）连 接至网络交换机 2 的端口。 3 使用一根 CAT 5e/6 电缆从节点 2 的一个端口 （iSCSI HBA 或 NIC）连 接至网络交换机 1 的端口。 4 使用一根 CAT 5e/6 电缆从节点 2 的一个端口 （iSCSI HBA 或 NIC）连 接至网络交换机 2 的端口。 5 使用两根 CAT 5e/6 电缆从交换机 1 连接至 PowerVault MD32xxi 存储设 备盘柜中 RAID 控制器 0 的 In-0 端口。 6 使用两根 CAT 5e/6 电缆从交换机 1 的另两个端口连接至 PowerVault MD32xxi 存储设备盘柜中的 RAID 控制器 1。 7 使用两根 CAT 5e/6 电缆从交换机 2 的一个端口连接至 PowerVault MD32xxi 存储设备盘柜中的 RAID 控制器 0。 8 使用两
安装存储设备所需的基于主机的软件 要安装用于 PowerVault MD32xxi 存储系统的基于主机的必需存储软件，请 使用随 PowerVault MD32xxi 存储系统附带的 Dell PowerVault Resource 介质。 按照 support.dell.com/manuals 上提供的 PowerVault MD32xxi 存储设备盘柜 说明文件中的步骤进行操作，在主节点上安装 Modular Disk Storage Manager (MDSM) 软件并在其余节点上安装多路径 IO (MPIO) 软件。 验证并升级固件 验证并升级固件： 1 使用安装在主机系统中的 MDSM 软件搜索直接连接的主机系统存 储设备。 2 验证以下存储设备组件的固件是否满足最低所需版本。 • MD32xxi 存储系统固件 • MD12xx 扩展盘柜固件 注：有关最低固件版本要求，请选择 dell.
设置用于 Dell PowerVault MD32xxi 和 MD12xx 存储设备盘柜的 iSCSI 群集 设置硬件 有关设置或安装 PowerVault MD32xxi 和 PowerVault MD12xx 扩展盘柜的帮 助，请参阅 support.dell.
图形化安装 （推荐） 完成图形化安装： 1 安装任何新软件之前，请关闭所有其它程序。 2 插入资源介质。 3 选择 Install MD32xxi Storage Software （安装 MD32xxi 存储软件）。 注：如果主机服务器运行 Windows Server Core 版本，或者启动程序没 有自动运行，则可浏览至介质的根目录并运行 md_launcher.
5 设置用于 Dell|EqualLogic PS 系列 存储系统的 iSCSI 群集 警告：开始执行本节中的任何步骤之前，请阅读系统附带的安全信息。 有关其它最佳实践信息，请访问 dell.
图 5-1.
图 5-2. 配置带有三个 PS6010XV 阵列的示例 Oracle RAC Dell Optiplex 台式机 公用网络 RAC 专用互连 DNS 和 DHCP 服务器 iSCSI SAN 管理界面 LAN/WAN PowerConnect 千兆位以太网交换机 链路聚合组 PowerConnect 8024 系列 10 千兆位以太网交换机 高带宽交换机之间 的链路 Dell|EqualLogic PS6010XV 存储阵列 存储设备成员 oracle-member02 存储设备成员 oracle-member01 OCR 和 CSS 投票磁 盘卷 数据卷 存储设备成员 oracle-member03 快擦写恢复区 域卷 RAID 5 存储池 RAID 10 存储池 存储组：oracle-group 注：有关如何初始化 EqualLogic 阵列的详情，请参阅 support.dell.
一个 EqualLogic PS 系列存储组可以分离到多个层或池中。分层存储可使管 理员更好地控制磁盘资源的分配方式。每次只能将一个成员分配到一个池。 将成员分配到池以及在不同池间移动成员很容易，而且不会影响数据的可用 性。池可以根据不同标准（如磁盘类型或速度、RAID 级别和应用类型）加 以组织。 在图 5-2 中，池按照成员 RAID 级别进行组织： • 一个名称为 RAID 10 的池由 RAID 10 成员组成。 • 一个名称为 RAID 5 的池由 RAID 5 成员组成。 创建卷 存储数据之前，先将 EqualLogic PS6010XV 存储阵列中的物理磁盘配置为可 用组件（称为卷）。卷表示存储池的一部分，具有特定大小、访问控制以及 其它属性。卷可以跨越多个磁盘和组成员。卷在网络上显示为 iSCSI 目标设 备。卷分配给池并可以在不同的池间轻松移动，而且不会影响数据的可用 性。此外，池还将根据池中的存储设备硬件资源的总工作负载进行自动数据 分布和自动负载平衡。 表 5-1 显示了一个卷配置示例。 表 5-1.
在 Dell|EqualLogic PS6010XV 阵列中创建卷，然后创建访问列表，以允许 所有主机 iSCSI 网络接口访问这些卷。例如，创建以下卷： • mdi-ocr • mdi-data1 • mdi-fra1 配置 iSCSI 网络 注：建议将用于 iSCSI 通信的主机网络接口配置为使用流控制和超长帧，以 实现最优性能。 要设置流控制和超长帧，请执行以下步骤： 1 单击 Start （开始） Search programs and files （搜索程序和文件）， 键入 View network connections。 2 在搜索结果中单击 View network connections （查看网络连接）。 3 选择 iSCSI network interface （iSCSI 网络接口），然后右键单击 Properties （属性）。 4 单击 Configure （配置）。 5 单击 Advanced （高级）。 6 选择 Jumbo Packet （巨型包），然后将其值设置为 9014 字节。 7 选择 Performance Options （性能选项），然后单击 Pro
配置主机对卷的访问权限 安装并配置 Dell EqualLogic 主机集成工具 (HIT) 套件 1 将最新的 HIT 工具套件下载到您的数据库服务器上。 2 双击 setup64.exe 以启动安装窗口。 3 在 Welcome to the Host Integration Tools 3.5.1 Installation Program （欢迎使用主机集成工具 3.5.
9 选择 Configure MPIO settings for this computer （为此计算机配置 MPIO 设置），然后单击 Next （下一步）。 10 将 iSCSI 网络子集移动到 Subnets included for MPIO （MPIO 包括的 子集）下。 11 将所有其它网络子网移动到 Subnets excluded from MPIO （从 MPIO 排除的子网）下。 注：如果未看到所有子集，则确保您的 Microsoft iSCSI 启动程序服务正 在运行。启动 iSCSI 启动程序后，可能必须重新启动 EqualLogic Remote Setup Wizard（EqualLogic 远程设置向导）。 12 单击 Finish （完成）。 注：建议您将 Load Balancing（负载均衡）的默认值设置为 Least Queue Depth（最少队列深度）。 13 在群集中的所有其它主机上重复执行步骤 1 至步骤 9。 配置 Microsoft iSCSI 启动程序 1 单击 Start （开始），并在搜索框中键入 iSCSI Initiator。从结果 列表中单
h 在 Target secret （目标机密）框中，输入在 EqualLogic 存储中定义 的 CHAP 密码。 注：CHAP 密码必须至少包含 12 个字符。 i 单击 OK （确定）。 4 在 iSCSI Initiator Properties （iSCSI 启动程序属性）窗口的 Targets （目标）选项卡中，单击为 Oracle 数据库创建的一个卷，然后单击 Connect （连接）。 5 在 Connect to Target （连接至目标）窗口中，同时选择 Add this connection to the list of Favorite Targets （将此连接添加至首选目标列 表）和 Enable multi-path （启用多路径），然后单击 Advanced （高 级）。 6 在 Advanced Settings （高级设置）窗口的 General （常规）选项卡 上，执行以下配置： a 通过 Local adapter （本地适配器）下拉式菜单选择 Microsoft iSCSI Initiator （Microsoft iSCSI 启动程序）。 b 通过
6 在主机上配置数据库存储设备 警告：开始执行本节中的任何步骤之前，请阅读系统附带的安全信息。 有关其它最佳实践信息，请参阅 dell.
为 Oracle 群集件、数据库和备份准备磁盘 本节介绍有关为以下磁盘创建逻辑驱动器的信息： • Oracle 群集注册表磁盘 (OCR) — 包含群集配置信息。 • 投票磁盘 — 当专用网络或连接的存储设备无法用于一个或多个节 点时，投票磁盘提供群集节点间的仲裁。 • 数据和备份磁盘 — 为创建数据库（数据磁盘）及保存备份和日志数据 （备份磁盘）提供存储区域。 在本说明文件中所述的群集配置过程中，确保在共享存储设备上创建分区 时，群集节点可以检测到在连接的存储系统中创建的逻辑磁盘。 要为 Oracle 群集件准备磁盘，应确定 OCR、投票、数据和快擦写恢复区域 磁盘。确定适当的磁盘后，在节点 1 上执行以下步骤： 为共享磁盘启用自动安装选项 1 在节点 1 上，单击 Start （开始） Run （运行）。 2 键入 cmd，然后单击 OK （确定）。 3 在命令提示符下，键入 diskpart，然后按 键。 4 在 DISKPART 命令提示符下，键入 automount enable，然后按 键。 将显示以下信息：Automatic mounting o
为 Windows 2008 R2 SP1 上使用 ASM 的数据库 存储准备用于群集件、数据库磁盘和快擦写恢 复区域的 OCR 和投票磁盘 创建扩展分区和逻辑驱动器的程序如下： 1 单击 Start （开始） Run （运行），然后键入 cmd 并按 键 以打开命令提示符窗口。 2 在命令提示符中键入 diskpart 以打开 diskpart 界面。 3 键入 list disk，将显示以下表： Disk ### Status Size Free Dyn GPT Disk 0 Online 37 GB 0 MB - - Disk 1 Online 2048 MB 2048 MB - - Disk 2 Online 100 GB 100 GB - - Disk 3 Online 200 GB 200 GB - - 4 输入 select disk [disk #] （目标磁盘的磁盘编号）。 注：以下步骤介绍如何为 MBR 磁盘创建分区和逻辑磁盘。 5 键入 create partition extended，然后按 键。
删除分配的驱动器号 1 单击 Start （开始） Administrative Tools （管理工具） Server Manager （服务器管理器）。 2 展开 Storage （存储），然后单击 Disk Management （磁盘管理）。 3 如果找到任何分配给在第 105 页上的 “为 Windows 2008 R2 SP1 上使 用 ASM 的数据库存储准备用于群集件、数据库磁盘和快擦写恢复区域 的 OCR 和投票磁盘”中创建的驱动器的驱动器号，请执行以 下步骤： 106 a 右键单击逻辑驱动器，然后选择 Change Drive Letter and Paths （更改驱动器号和路径）。 b 选择驱动器号，然后单击 Remove （删除）。 c 在 Confirm （确认）窗口中，单击 Yes （是）。 d 对存储分区上的其余逻辑驱动器重复执行步骤 a 至步骤 c。 在主机上配置数据库存储设备
索引 M Z Modular Disk Storage Manager, 82 帮助 , 64 Dell 支持 , 64 Oracle 支持 , 64 MPIO 软件 , 82 N NIC 端口分配 , 65 P PowerConnect 交换机 , 95 布线 iSCSI 群集 , 88 卷 , 98 术语 成员 , 95 池 , 95 卷 , 95 组 , 95 资源介质 PowerVault MD3000, 83 S SAS 群集设置 , 79, 87, 95, 103 索引 107
索引
Oracle Database sous Microsoft Windows Server x64 pour systèmes Dell PowerEdge Guide de stockage et de mise en réseau Version 1.
Remarques, précautions et avertissements REMARQUE : une REMARQUE indique des informations importantes qui peuvent vous aider à mieux utiliser votre ordinateur. PRÉCAUTION : une PRÉCAUTION indique un risque de dommage matériel ou de perte de données en cas de non-respect des instructions. AVERTISSEMENT : un AVERTISSEMENT indique un risque potentiel d'endommagement du matériel, de blessure corporelle ou même de mort.
Table des matières 1 Présentation . . . . . . . . . . . . . . . . . . . . . Documentation nécessaire au déploiement de la base de données Dell|Oracle 11g R2 . 115 . . . . . . . . . 116 Obtention d'aide . . . . . . . . . . . . . . . . . . . . . 116 Support Dell . . . . . . . . . . . . . . . . . . . . 116 Terminologie utilisée dans le présent document . Support Oracle 2 115 116 . . . . . . . . . . . . . . . . . . . Configuration du réseau . . . . . . . . . . . .
3 Configuration d'un cluster SAS pour les châssis de stockage Dell PowerVault . . . . . . . . . . . . . Configuration du matériel . . . . . . 133 . . . . . . . . . . . . . . . 135 Installation des logiciels hôtes requis pour le stockage . . . . . . . . . . . . . . . . . . . . Vérification et mise à niveau du micrologiciel . . . . 137 . . . . . . . . 138 . . . . . . . 138 . . . . . . . . . . . 140 Installation du logiciel MD Storage . Tâches de post-installation .
5 Configuration d'un cluster iSCSI pour le système de stockage Dell|EqualLogic PS Series . . . . . Terminologie EqualLogic Création des volumes . 153 . . . . . . . . . 154 . . . . . . . . . . . . . . . 157 Configuration des réseaux iSCSI . Vérification et identification des disques de stockage . . . . . . . . . . . . . . . . 159 . . . . . . Configuration du stockage de la base de données sur l'hôte . . . . . . . . . . . . . . 163 163 . . . . . . .
Table des matières
1 Présentation Ce document fournit des instructions de configuration du stockage et de la mise en réseau en vue de l'exécution de Dell|Oracle Database sur un système doté de Microsoft Windows Server 2008 R2 SP1. Les procédures décrites dans ce document s'appliquent à Oracle Database 11g R2 exécuté sous Microsoft Windows Server x64. Pour obtenir la liste des configurations de stockage et de mise en réseau prises en charge par votre système, accédez à dell.
Terminologie utilisée dans le présent document Ce document utilise les termes volume et disque virtuel, qui sont synonymes et interchangeables. Le terme volume s'utilise généralement dans un environnement de stockage Dell EqualLogic iSCSI tandis que le terme disque virtuel est plutôt réservé aux environnements de stockage Dell PowerVault SAS et iSCSI (Dell PowerVault MD3000/MD32xx/MD36xxi et Dell PowerVault MD3000i/MD32xxi avec châssis d'extension Dell PowerVault MD1000/MD12xx).
Configuration du réseau 2 Cette section fournit des informations sur la configuration du réseau de clusters publics et privés. REMARQUE : chaque nœud doit être associé à une adresse IP publique et privée unique. Une adresse IP publique supplémentaire doit être utilisée comme adresse IP virtuelle pour les connexions des clients et le basculement en cas de panne. L'adresse IP virtuelle doit appartenir au même sous-réseau que l'adresse IP publique.
3 Cliquez sur Gestionnaire de périphériquesAffichageAfficher les périphériques cachés. Les adaptateurs Microsoft Failover Cluster Virtual Adapter et Tunnel (Microsoft ISATAP, 6to4, Teredo) doivent être désactivés. 4 Ouvrez Regedit et Registre de sauvegarde. 5 Accédez à HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\. 6 Double-cliquez sur DisabledComponents (Composants désactivés) pour le modifier. Si aucune valeur n'est affichée, cliquez sur EditNewDWORD (32-bit) Value.
d Cliquez avec le bouton droit de la souris sur la carte réseau Intel qui est identifiée comme faisant partie du regroupement des cartes réseau et sélectionnez Propriétés. e Cliquez sur l'onglet Teaming (Regroupement). f Sélectionnez Team with other Adapters (Regrouper avec d'autres cartes), puis New Team (Nouveau regroupement). g Spécifiez le nom du regroupement des cartes réseau et cliquez sur Next (Suivant).
d Dans le champ Enter the name for the team (Entrer le nom du regroupement), entrez Private (Privé) et cliquez sur Next (Suivant). e Dans le champ Team Type (Type de regroupement), sélectionnez Smart Load Balancing (TM) (Équilibrage de charge dynamique) et Failover (SLB) (Basculement), puis cliquez sur Next (Suivant). f La fenêtre Assigning Team Members (Affectation des membres du regroupement) s'affiche.
5 Recommencez la procédure de l'étape 1 à l'étape 4 sur les nœuds restants. REMARQUE : il est recommandé d'avoir les deux ports de cartes réseau avec lien pour réseau privé sur des bus PCI distincts. Par exemple, une paire avec lien peut être composée d'une carte réseau intégrée et d'une carte réseau supplémentaire. Configuration des adresses IP pour les cartes des réseaux public et privé 1 Mettez à jour le nom de l'interface réseau de la carte, si cela est nécessaire. Sinon, passez à l'étape 2.
e Dans la fenêtre Propriétés, cliquez sur Fermer. f Recommencez la procédure de l'étape a à l'étape e sur le regroupement de cartes réseau privées. REMARQUE : le regroupement de cartes réseau privées ne requiert pas d'adresse de passerelle par défaut ni d'entrée sur le serveur DNS. 3 Vérifiez que les cartes réseau publiques et privées apparaissent dans l'ordre approprié pour que les services réseau puissent y accéder.
5 Vérifiez que les nœuds du cluster peuvent communiquer avec les réseaux public et privé. a Sur le nœud 1, ouvrez une fenêtre d'invite de commande. b À l'invite de commande, entrez : ping ping où et sont les noms des hôtes des cartes réseau publiques et privées sur le nœud restant. Si les cartes réseau de ce nœud ne répondent pas aux commandes ping, vérifiez la configuration du réseau et recommencez cette étape.
• Un service DHCP s'exécutant sur le réseau public du cluster. • Suffisamment d'adresses sur le service DHCP pour attribuer une adresse IP au réseau virtuel IP de chaque nœud et trois adresses IP au cluster utilisé par le nom SCAN. Le tableau 2-2 présente les interfaces, paramètres d'adresses IP et résolutions d'un cluster. Tableau 2-2.
g Cliquez sur Done (Terminé) dans la fenêtre New Host (Nouvel hôte). Par exemple : serveur-gns Host A 192.0.2.2 où serveur-gns est l'adresse IP virtuelle du serveur GNS attribuée lors de l'installation de la grille. L'adresse fournie doit être routable et appartenir à la plage publique. Par exemple, 192.0.2.2. 2 Configurez la délégation de sous-domaine GNS.
Pour un cluster utilisant un serveur DNS Pour configurer Oracle 11g R2 RAC à l'aide d'Oracle DNS (sans GNS) : 1 Configurez au moins deux interfaces sur chaque nœud, une pour l'adresse IP privée et une pour l'adresse IP publique. 2 Configurez un NOM SCAN pour le DNS pour une résolution en alternance vers trois adresses (recommandé) ou au moins une adresse. Les adresses SCAN doivent appartenir au même sous-réseau que les adresses IP virtuelles et les adresses IP publiques.
Configuration d'un serveur DNS Pour configurer les modifications sur un serveur DNS pour un cluster Oracle 11g R2 avec un DNS (sans GNS) : 1 Configurez la résolution NOM SCAN sur le serveur DNS. 2 Sur le serveur DNS, créez une entrée de résolution de nom pour l'adresse IP virtuelle du serveur GNS dans le fichier de recherche. 3 Ouvrez DNS Manager (Gestionnaire DNS). 4 Cliquez sur DNS server Forward Lookup Zones DNS Domain (Serveur DNS Zones de recherche Domaine DNS).
Configuration de la résolution des noms d'hôte Pour configurer les modifications requises sur les nœuds du cluster pour la résolution de noms : 1 Ajoutez des entrées d'hôte dans le fichier %RacineSystème%\system32\drivers\etc\hosts. 2 Sur chaque nœud, modifiez les lignes du fichier %RacineSystème%\system32\drivers\etc\hosts en tapant : 127.0.0.
Configuration de votre système géré Avant d'utiliser l'utilitaire de gestion du contrôleur BMC, configurez certains éléments nécessaires, comme le BIOS du système, le réseau, la clé de cryptage de l'interface de gestion de plateforme intelligente (IPMI) et les paramètres de connexion série, selon la fonctionnalité à exécuter, pour activer l'accès au contrôleur BMC.
Si le système d'exploitation commence à se charger alors que vous n'avez pas encore appuyé sur , attendez qu'il finisse de démarrer, puis redémarrez-le et réessayez. Options de l'utilitaire de configuration de l'accès à distance Le tableau 2-4 répertorie les options de l'utilitaire de configuration de l'accès à distance et montre comment configurer le contrôleur BMC sur un système géré.
Tableau 2-4. Utilitaire de configuration de l'accès à distance (suite) Option Description LAN Parameters (Paramètres LAN) IP Address Source (Source d'adresse IP) Une adresse IP statique ou une adresse DHCP est attribuée au contrôleur réseau. Ethernet IP Address (Adresse IP Adresse IP statique du contrôleur BMC. Ce Ethernet) champ est limité à une valeur maximale de 255.255.255.255. Les règles IPv4 suivantes sont appliquées : • Les adresses IP ne peuvent pas être 127.xxx.xxx.
Tableau 2-4. Utilitaire de configuration de l'accès à distance (suite) Option Description Enter Password (Saisir le mot de passe) Saisissez le mot de passe de ce compte utilisateur. Vous devez saisir au moins 1 caractère valide. Confirm Password (Confirmer le mot de passe) Confirmez le mot de passe que vous avez saisi.
Configuration d'un cluster SAS pour les châssis de stockage Dell PowerVault 3 AVERTISSEMENT : avant d'exécuter les opérations décrites dans cette section, lisez les consignes de sécurité fournies avec votre système. Pour plus d'informations sur les meilleures pratiques, consultez le site dell.com/regulatory_compliance.
Figure 3-1. Câblage du cluster SAS et du châssis de stockage Dell PowerVault MD32xx Systèmes clients Réseau privé Serveur DNS et DHCP Réseau local/Réseau étendu Systèmes PowerEdge Système de stockage PowerVault MD32xx Deux châssis d'extension PowerVault MD12xx CAT 5e/6 (carte réseau publique) CAT 5e/6 (carte réseau Gigabit cuivre) Câbles SAS Tableau 3-1.
Tableau 3-1. Interconnexions matérielles d'un cluster SAS (suite) Composant de cluster Connexions Châssis de stockage • Deux câbles CAT 5e/6 connectés au réseau local (un à partir PowerVault MD32xx de chaque processeur de stockage) • Deux connexions SAS vers chaque nœud système PowerEdge à l'aide de câbles SAS 6/E REMARQUE : pour plus d'informations sur l'interconnexion du châssis de stockage PowerVault MD32xx, voir la section « Configuration du matériel », à la page 135.
6 Le cas échéant, connectez deux câbles SAS entre les deux ports de sortie du châssis de stockage PowerVault MD12xx et les ports In-0 du second châssis d'extension PowerVault MD12xx. REMARQUE : pour des informations supplémentaires sur la configuration du châssis d'extension PowerVault MD12xx, voir la documentation relative au système de stockage PowerVault MD12xx à l'adresse support.dell.com/manuals. Figure 3-2.
Installation des logiciels hôtes requis pour le stockage Pour installer les logiciels hôtes requis pour le stockage sur un châssis de stockage PowerVault MD32xx, utilisez le support Dell PowerVault Resource livré avec le système. Pour installer le logiciel Modular Disk Storage Manager (MDSM) sur le nœud principal et le logiciel multiacheminement (MPIO) sur les autres nœuds, suivez les procédures décrites dans la documentation du châssis de stockage PowerVault MD32xx.
Installation des logiciels hôtes requis pour le stockage Installation du logiciel Le support de ressource PowerVault MD32xx Series contient des logiciels et des pilotes. À la racine du support, on trouve un fichier readme.txt (Lisez-moi) qui présente les modifications apportées au logiciel, les mises à jour et les correctifs, et qui fournit d'autres informations importantes applicables aux systèmes d'exploitation Windows.
Le support de ressources PowerVault MD32xx Series offre les méthodes d'installation suivantes : • Installation à base GUI (recommandée) : le programme d'installation présente une interface graphique accompagnée d'assistants, qui permet de personnaliser les composants à installer. • Installation silencieuse : cette procédure d'installation est particulièrement utile pour les utilisateurs qui souhaitent créer des installations scriptées.
Installation silencieuse Cette option permet d'installer le logiciel sans surveillance. Pour exécuter l'installation silencieuse sur un système Windows, suivez les étapes cidessous : 1 Pour lancer l'installation en conservant toutes les options par défaut, naviguez jusqu'au dossier Windows du support de ressources et exécutez la commande suivante : md32xx_install -i silent 2 Pour indiquer les fonctions à installer silencieusement, modifiez le fichier custom_silent.
3 Dans la fenêtre Enterprise Management Window (Fenêtre de gestion d'entreprise) (EMW), cliquez sur Setup Add Storage Array (Configurer Ajouter une matrice de stockage), puis lancez la détection automatique des systèmes. REMARQUE : seules les matrices de stockage configurées avec une adresse IP sur le même sous-réseau que les stations de gestion seront détectées. REMARQUE : le processus de détection peut prendre plusieurs minutes.
Tâches de configuration initiales Pour effectuer les tâches de configuration initiales : 1 Le nom de la première matrice de stockage détectée apparaît dans l'onglet Périphériques de la fenêtre EMW. Pour afficher la liste de toutes les matrices de stockage qui se trouvent sur le réseau local, développez l'onglet des matrices de stockage détectées du volet des périphériques de la fenêtre EMW. 2 Le nom par défaut d'une matrice de stockage MD32xx nouvellement installée est Unnamed (Sans nom).
Configuration d'un cluster iSCSI pour les châssis de stockage Dell PowerVault 4 AVERTISSEMENT : avant d'exécuter les opérations décrites dans cette section, lisez les consignes de sécurité fournies avec votre système. Pour plus d'informations sur les meilleures pratiques, consultez le site dell.com/regulatory_compliance.
Tableau 4-1. Interconnexions de composants matériels iSCSI (suite) Composant de cluster Connexions Système de stockage PowerVault MD30xxi • Deux câbles CAT 5e/6 connectés au réseau local (un à partir de chaque processeur de stockage) pour l'interface de gestion • Deux câbles CAT 5e/6 par processeur de stockage pour l'interconnexion iSCSI REMARQUE : pour des informations supplémentaires sur le châssis de stockage PowerVault MD32xxi, voir la documentation connexe à l'adresse support.dell.com/manuals.
Configuration du matériel Les clusters iSCSI à connexion directe sont limités à quatre nœuds. Figure 4-1.
Pour configurer les nœuds dans un environnement à connexion directe, voir la figure 4-1. 1 Installez un câble CAT 5e/6 entre un port (adaptateur HBA iSCSI ou carte réseau) du nœud 1 et le port In-0 du contrôleur RAID 0 du châssis de stockage PowerVault MD32xxi. 2 Installez un câble CAT 5e/6 entre l'autre port (adaptateur HBA iSCSI ou carte réseau) du nœud 1 et le port In-0 du contrôleur RAID 1 du châssis de stockage PowerVault MD32xxi.
Figure 4-2.
Pour configurer les nœuds dans une liaison par commutateur, voir la figure 4-2. 1 Installez un câble CAT 5e/6 entre un port (adaptateur HBA iSCSI ou carte réseau) du nœud 1 et le port du commutateur réseau 1. 2 Installez un câble CAT 5e/6 entre un port (adaptateur HBA iSCSI ou carte réseau) du nœud 1 et le port du commutateur réseau 2. 3 Installez un câble CAT 5e/6 entre un port (adaptateur HBA iSCSI ou carte réseau) du nœud 2 et le port du commutateur réseau 1.
Installation des logiciels hôtes requis pour le stockage Pour installer les logiciels hôtes requis pour le système de stockage PowerVault MD32xxi, utilisez le support Dell PowerVault Resource qui l'accompagne. Pour installer le logiciel MDSM (Modular Disk Storage Manager) sur le nœud principal et le logiciel multiacheminement (MPIO) sur les autres nœuds, suivez les procédures décrites dans la documentation du châssis de stockage PowerVault MD32xxi, disponible à l'adresse support.dell.com/manuals.
Configuration d'un cluster iSCSI pour les châssis de stockage Dell PowerVault MD32xxi et MD12xx Configuration du matériel Pour obtenir une assistance pour la configuration ou l'installation de votre châssis d'extension PowerVault MD32xxi et PowerVault MD12xx, veuillez vous reporter à la documentation PowerVault disponible à l'adresse support.dell.com/manuals.
Le support de ressources PowerVault MD32xxi Series fourni offre les méthodes d'installation suivantes : • Installation à base GUI (recommandée) : le programme d'installation présente une interface graphique accompagnée d'assistants, qui permet de personnaliser les composants à installer. • Installation silencieuse : cette procédure d'installation est particulièrement utile pour les utilisateurs qui souhaitent créer des installations scriptées.
Installation silencieuse Cette option permet d'installer le logiciel sans surveillance. Pour lancer l'installation silencieuse dans un système Windows, effectuez les étapes suivantes : 1 Pour lancer l'installation en conservant toutes les options par défaut, naviguez jusqu'au dossier Windows du support de ressources et exécutez la commande suivante : md32xxi_install -i silent 2 Pour indiquer les fonctions à installer silencieusement, vous devez modifier le fichier custom_silent.
Configuration d'un cluster iSCSI pour le système de stockage Dell|EqualLogic PS Series 5 AVERTISSEMENT : avant d'exécuter les opérations décrites dans cette section, lisez les consignes de sécurité fournies avec votre système. Pour plus d'informations sur les meilleures pratiques, consultez le site dell.com/regulatory_compliance. Terminologie EqualLogic Les matrices de stockage EqualLogic série PS sont équipées de la technologie de virtualisation du stockage.
Configuration du système de stockage iSCSI EqualLogic Les systèmes hôtes peuvent être connectés à la matrice iSCSI EqualLogic PS6010XV via un commutateur IP SAN Ethernet 10 Gigabit standard. La figure 5-1 présente la configuration réseau recommandée pour une matrice Dell EqualLogic PS6010XV à double module de contrôle. Cette configuration inclut deux commutateurs Ethernet 10 Gigabit Dell PowerConnect, destinés à optimiser la disponibilité et la bande passante du réseau.
Figure 5-1. Configuration réseau recommandée Liaison intercommutateur haut débit Commutateurs Ethernet 10 Gigabit PowerConnect 8024 Matrice de stockage Dell|EqualLogic iSCSI PS6010XV Réseau SAN iSCSI Interface de gestion La figure 5-2 présente l'architecture d'une configuration Oracle RAC (Real Application Cluster) fictive à trois matrices Dell|EqualLogic PS6010XV. Les matrices de stockage Dell|EqualLogic PS6010XV fournissent la capacité de stockage physique allouée à la base de données RAC.
Figure 5-2.
Un groupe de stockage EqualLogic série PS peut être divisé en plusieurs niveaux ou pools. Le stockage à plusieurs niveaux offre aux administrateurs la possibilité de mieux contrôler l'allocation des ressources de disque. Un membre ne peut être attribué qu'à un seul pool à la fois. On peut facilement affecter un membre à un pool ou le déplacer d'un pool à un autre sans aucune incidence sur la disponibilité des données.
Le tableau 5-1 présente un exemple de configuration de volume. Tableau 5-1.
Configuration des réseaux iSCSI REMARQUE : pour des performances optimales, il est recommandé de configurer les interfaces réseau des systèmes hôtes de telle sorte que le trafic iSCSI utilise les paramètres Flow Control (Contrôle de flux) et Jumbo Frame (Trame Jumbo). Pour définir le contrôle de flux et la trame Jumbo, effectuez les opérations suivantes : 1 Cliquez sur DémarrerRechercher des programmes et fichiers et tapez View network connections (Afficher les connexions réseau).
5 Dans la fenêtre Installation Type (Type d'installation), sélectionnez Typical (Standard) et cliquez sur Next (Suivant). REMARQUE : si la fenêtre Microsoft iSCSI Initiator service not running (Le service Microsoft iSCSI Initiator ne s'exécute pas) apparaît, cliquez sur No (Non). 6 Dans la fenêtre Ready to install the components (Prêt pour l'installation des composants), cliquez sur Install (Installer).
REMARQUE : si vous ne visualisez pas tous vos sous-réseaux, vérifiez que le service Microsoft iSCSI Initiator fonctionne. Vous devrez peut-être redémarrer l'assistant EqualLogic Remote Setup Wizard après qu'iSCSI Initiator démarre. 12 Cliquez sur Finish (Terminer). REMARQUE : il est recommandé d'attriber au paramètre Load Balancing (Équilibrage de charge) la valeur Least Queue Depth (Moindre profondeur de file d'attente).
4 Dans l'onglet Targets (Cibles) de la fenêtre iSCSI Initiator Properties (Propriétés de l'initiateur iSCSI), cliquez sur un volume créé pour la base de données Oracle puis sur Connect (Se connecter). 5 Dans la fenêtre Connect to Target (Connexion à la cible), sélectionnez les deux options Add this connection to the list of Favorite Targets (Ajouter cette connexion à la liste des cibles favorites) et Enable multi-path (Activer le multiacheminement), puis cliquez sur Advanced (Avancé).
Configuration du stockage de la base de données sur l'hôte 6 AVERTISSEMENT : avant d'exécuter les opérations décrites dans cette section, lisez les consignes de sécurité fournies avec votre système. Pour plus d'informations sur les meilleures pratiques, consultez le site dell.com/regulatory_compliance. Oracle Real Application Clusters (RAC) nécessite une série ordonnée de procédures.
3 Développez Stockage et sélectionnez Gestion des disques. a Effectuez un clic droit sur le volume puis cliquez sur En ligne. b Effectuez un clic droit sur le volume, sélectionnez Initialiser puis cliquez sur OK dans la fenêtre d'initialisation de disque. c Répétez la procédure de l'étape a à l'étape b pour tous les volumes. REMARQUE : cette procédure permet de configurer les disques en tant que disques de base. 4 Dans la fenêtre Gestion des disques, vérifiez que les quatre disques apparaissent.
Activation de l'option Automount sur les disques partagés 1 Sur le nœud 1, cliquez sur DémarrerExécuter. 2 Tapez cmd et cliquez sur OK. 3 À l'invite de commande, entrez diskpart et appuyez sur . 4 À l'invite DISKPART, entrez automount enable et appuyez sur . Le message suivant s'affiche : Automatic mounting of new volumes enabled (Montage automatique des nouveaux volumes activé). 5 À l'invite DISKPART, entrez exit et appuyez sur . 6 Fermez l'invite de commande.
4 Entrez select disk [n° disque] avec le numéro du disque cible. REMARQUE : la procédure suivante explique comment créer des partitions et des disques logiques pour un disque MBR. 5 Tapez create partition extended, puis appuyez sur . 6 Tapez create partition logical size= et appuyez sur .
Index A S aide, 116 support Dell, 116 support Oracle, 116 SAS configuration d'un cluster, 133, 143, 153, 163 C câblage cluster iSCSI, 145 carte réseau affectation des ports, 117 commutateur PowerConnect, 154 L logiciel MPIO, 137 support de ressources PowerVault MD3000, 137 T terme groupe, 153 membre, 153 pool, 153 volume, 153 V volumes, 157 M Modular Disk Storage Manager, 137 Index 167
Index
Dell PowerEdge-Systeme Oracle Database unter Microsoft Windows Server x64 Speicher- und Netzwerkhandbuch Version 1.
Anmerkungen, Vorsichtshinweise und Warnungen ANMERKUNG: Eine ANMERKUNG macht auf wichtige Informationen aufmerksam, mit denen Sie den Computer besser einsetzen können. VORSICHTSHINWEIS: Ein VORSICHTSHINWEIS macht Sie auf potenzielle Gefahrenquellen aufmerksam, die Hardwareschäden oder Datenverlust zur Folge haben können, wenn die Anweisungen nicht befolgt werden.
Inhalt 1 Übersicht . . . . . . . . . . . . . . . . . . . . . . . . Erforderliche Dokumentation zum Bereitstellen von Dell|Oracle 11g R2 Database . . . . . . . . . . . . 175 In diesem Dokument verwendete Terminologie . . . . 176 . . . . . . . . . . . . . . . . 176 . . . . . . . . . . . . . . . . . . . . 176 Wie Sie Hilfe bekommen Dell-Support Oracle-Support . 2 175 177 . . . . . . . . . . . . . . . . . . Konfiguration des Netzwerks . . . . . . . .
3 Einrichten eines SAS-Clusters für Dell PowerVault-Speichergehäuse . . . . . . Einrichten der Hardware. . 195 . . . . . . . . . . . . . . . 197 . . 199 . . . . . . . 199 Installation der hostbasierten Speichersoftware . Überprüfung und Upgrade der Firmware Installation des SAS-HBA-Adaptertreibers . . . . . . . . 200 . . . . . 200 . . . . . . . . 202 Installation der hostbasierten Speichersoftware . Installieren der MD-Storage-Software .
5 Einrichten eines iSCSI-Clusters für das Dell|EqualLogic PS−Speichersystem . . . . . . . . . EqualLogic-Terminologie Erstellen von Volumes . . 216 . . . . . . . . . . . . . . . 219 Konfiguration von iSCSI-Netzwerken 225 225 . . . . . . . . . . . . . Überprüfen der Zuordnung zwischen dem Speichersystem und den Knoten Aktivieren der Automount-Option für freigegebene Datenträger . . 226 . . . . . . . Vorbereiten der Datenträger für Oracle Clusterware, Database und Backup . . . . . . . . . . . .
Inhalt
1 Übersicht In diesem Dokument finden Sie eine Anleitung für das Konfigurieren der Netzwerk- und Speicheranforderungen zur Ausführung der Dell|OracleDatenbank auf einem System mit installiertem Betriebssystem Microsoft Windows Server 2008 R2 SP1. Die in diesem Dokument beschriebenen Verfahren gelten für Oracle Database 11g R2, ausgeführt unter Microsoft Windows Server x64. Eine Liste der von Ihrem System unterstützten Netzwerk- und Speicherkonfigurationen finden Sie unter dell.
• Dell PowerEdge Systems Oracle Database on Microsoft Windows Server x64Troubleshooting Guide (Oracle Database auf Dell PowerEdge-Systemen unter Microsoft Windows Server x64 Fehlerbehebungshandbuch) – Beschreibt Maßnahmen zum Lösen von Problemen, die während der Installationsvorgänge in den vorangegangenen Modulen auftreten können. In diesem Dokument verwendete Terminologie In diesem Dokument werden die Begriffe Volume und virtueller Datenträger verwendet.
Oracle-Support • Informationen über Schulungen für Oracle-Software und AnwendungsClusterware sowie Kontaktinformationen finden Sie unter oracle.com oder in der Oracle-Dokumentation. • Technischen Support, Downloads und andere technische Informationen finden Sie unter support.oracle.com.
Übersicht
Konfiguration des Netzwerks 2 In diesem Abschnitt finden Sie Informationen zur Konfiguration des öffentlichen und privaten Clusternetzwerks. ANMERKUNG: Jeder Knoten benötigt eine eindeutige öffentliche und private IP−Adresse und eine weitere öffentliche IP-Adresse als virtuelle IP-Adresse für die Clientverbindungen und als Failover-Verbindung. Die virtuelle IP-Adresse muss dem gleichen Subnetz wie die öffentliche IP-Adresse angehören.
4 Öffnen Sie Regedit und sichern Sie die Registrierung. 5 Navigieren Sie zu HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\. 6 Doppelklicken Sie auf den Eintrag DisabledComponents, um ihn zu bearbeiten. Wenn kein Wert aufgeführt wird, klicken Sie auf BearbeitenNeuDWORD-Wert (32-Bit). 7 Geben Sie DisabledComponents ein und drücken Sie die . 8 Geben Sie den folgenden DWORD-Wert ein: 0xffffffff.
g Geben Sie einen Namen für das NIC-Team ein und klicken Sie auf Weiter. h Wählen Sie im Feld Select the adapters to include in this team (Adapter für dieses Team auswählen) die verbleibenden für das NICTeaming ausgewählten Netzwerkadapter und klicken Sie auf Weiter. i Wählen Sie im Listenfeld Select a team mode (Team-Modus auswählen) die Option Adaptive Load Balancing (Adaptiver Lastenausgleich). j Klicken Sie auf Fertig stellen, um das Teaming abzuschließen.
f Wählen Sie im Fenster Assigning Team Members (Team-Mitglieder zuweisen) im Feld Available Adapters (Verfügbare Adapter) die für das NIC-Teaming bestimmten Netzwerkadapter aus und fügen Sie sie zum Feld Team Members (Team-Mitglieder) hinzu. Die Aufnahme dieses Adapters in ein Team führt zu einer Unterbrechung der Systemverwaltungsfunktionen. g Klicken Sie auf Ja, um fortzufahren. h Klicken Sie auf Weiter.
Konfiguration der IP-Adressen für die öffentlichen und privaten Netzwerkadapter 1 Aktualisieren Sie den Netzwerkschnittstellennamen des Adapters, falls erforderlich. Ansonsten fahren Sie mit Schritt 2 fort. a Klicken Sie an Knoten 1 auf StartVerwaltungServerManagerNetzwerkverbindungen anzeigen. b Klicken Sie im Fenster Netzwerkverbindungen mit der rechten Maustaste auf den öffentlichen Netzwerkadapter, der umbenannt werden soll, und wählen Sie Umbenennen.
3 Stellen Sie sicher, dass öffentliche und private Netzwerkadapter in der korrekten Reihenfolge aufgeführt sind, um den Zugriff durch Netzwerkdienste zu ermöglichen. a Klicken Sie am Windows Server auf StartProgramme/Dateien durchsuchen und geben Sie im Suchfeld das Stichwort Netzwerkverbindungen anzeigen ein. Klicken Sie in den Suchergebnissen auf Netzwerkverbindungen anzeigen.
Wenn der Netzwerkadapter des Knotens auf ping-Befehle nicht reagiert, überprüfen Sie die Netzwerkkonfiguration und führen Sie diesen Schritt danach erneut aus. ANMERKUNG: In Windows Server 2008 R2 SP1 ist die Windows Firewall standardmäßig aktiviert, sodass der Ping-Befehl bei statischen IP-Adressen fehlschlägt. Deaktivieren Sie die Windows Firewall, damit Sie andere Knoten über Ping abfragen können.
Tabelle 2-2 beschreibt die verschiedenen Schnittstellen, IP-Adresseinstellungen und Auflösungen in einem Cluster. Tabelle 2-2.
2 Konfiguration der GNS-Subdomaindelegierung – Erstellen Sie auf dem DNS-Server einen Eintrag, um ein DNS-Lookup einzurichten, das die DNSAuflösung einer GNS-Subdomain an den Cluster leitet. Öffnen Sie den DNS-Manager und gehen Sie wie folgt vor: a Klicken Sie auf DNS-ServerBedingte Weiterleitungen. b Klicken Sie mit der rechten Maustaste auf Bedingte Weiterleitungen und wählen Sie Neue Bedingte Weiterleitung.
ANMERKUNG: Um hohe Verfügbarkeit und Skalierbarkeit zu erzielen, wird die SCANKonfiguration für die Verwendung der Round-Robin-Auflösung an drei IP-Adressen empfohlen. Der Name des SCAN darf nicht mit einer Ziffer anfangen. Für eine erfolgreiche Installation muss der SCAN auf mindestens eine Adresse aufgelöst werden. Tabelle 2-3 beschreibt die verschiedenen Schnittstellen, IP-Adresseinstellungen und Auflösungen in einem Cluster. Tabelle 2-3.
10 Klicken Sie im Fenster Neuer Host auf Fertig. Beispiel: scancluster Host A 192.0.2.1 scancluster Host A 192.0.2.2 scancluster Host A 192.0.2.3 Dabei ist scancluster der SCAN-NAME, der während der Grid-Installation angegeben wurde. ANMERKUNG: Die SCAN-IP-Adresse muss routingfähig sein und im öffentlichen Bereich liegen.
IPMI-Aktivierung Intelligent Platform Management Interface (IPMI) stellt gemeinsame Schnittstellen für die Hardware und Firmware bereit, die Systemadministratoren zur Überwachung der Systemintegrität und zur Systemverwaltung verwenden können. Mit Oracle 11g R2 kann Oracle Clusterware IPMI integrieren, um die fehlerabhängige Abschaltung einzelner Knoten zu unterstützen und die Clusterintegrität zu gewährleisten.
Baseboard-Management-Controller-Konfiguration Sie können die grundlegende BMC-Konfiguration mit dem RemotezugriffsKonfigurationsdienstprogramm während des Systemstarts festlegen. Aufruf des Remotezugriffs-Konfigurationsdienstprogramms 1 Schalten Sie das System ein oder starten Sie es neu. 2 Drücken Sie , wenn Sie nach dem POST dazu aufgefordert werden. Wenn das Betriebssystem zu laden beginnt, bevor Sie gedrückt haben, lassen Sie das System vollständig hochfahren.
Optionen des Remotezugriffs-Konfigurationshilfsprogramms In Tabelle 2-4 werden die Optionen des Remotezugriffs-Konfigurationsdienstprogramms aufgelistet. Außerdem wird beschrieben, wie der BMC auf einem verwalteten System konfiguriert wird. Drücken Sie nach Eingabe aller Einstellungen und wählen Sie dann eine der folgenden Optionen aus: • Save Changes and Exit (Änderungen speichern und Beenden) - Behalten Sie alle Einträge bei, die im Remotezugriffs-Konfigurationsdienstprogramm vorgenommen wurden.
Tabelle 2-4. Remotezugriffs-Konfigurationsdienstprogramm (fortgesetzt) Option Beschreibung LAN-Parameter IP-Adressen-Quelle Dem Netzwerkcontroller wird eine statische IPAdresse oder eine DHCP-Adresse zu gewiesen. Ethernet-IP-Adresse Die statische IP-Adresse des BMC. Dieses Feld ist auf einen maximalen Wert von 255.255.255.255 begrenzt. Die folgenden IPv4-Regeln sind anwendbar: • IP-Adressen können nicht auf 127.xxx.xxx.xxx gesetzt werden, wobei xxx zwischen 0-255 liegt.
ANMERKUNG: Wenn die erste integrierte Netzwerkkarte (NIC 1) in einem EtherChannel-Team oder einem Link-Aggregations-Team verwendet wird, wird die Verwaltung des BMC auf PowerEdge x8xx-Systemen nicht korrekt ausgeführt. Die Option NIC-Teaming wird nur auf PowerEdge x9xx- und xx0x-Systemen unterstützt. Weitere Informationen zu Netzwerkteams finden Sie in der Dokumentation für die Netzwerkkarte.
3 Einrichten eines SAS-Clusters für Dell PowerVault-Speichergehäuse WARNUNG: Bevor Sie mit den in diesem Abschnitt beschriebenen Verfahren beginnen, lesen Sie zunächst die Sicherheitshinweise in der entsprechenden Dokumentation zum System. Weitere Informationen zu empfohlenen und bewährten Praktiken finden Sie unter dell.com/regulatory_compliance.
Abbildung 3-1. Verkabelung des SAS (Serial-Attached SCSI)-Clusters und des Speichergehäuses Dell PowerVault MD32xx Clientsysteme Privates Netzwerk DNS- und DHCP-Server LAN/WAN PowerEdge-Systeme PowerVault MD32xxSpeichersystem CAT 5e/6 (öffentlicher NIC) Zwei PowerVault MD12xxErweiterungsgehäuse CAT 5e/6 (Kupfer-Gigabit-NIC) SAS-Kabel Tabelle 3-1.
Tabelle 3-1. Verbindungen der SAS-Clusterhardware (fortgesetzt) Clusterkomponente Verbindungen PowerVault MD32xxSpeichergehäuse • Zwei CAT 5e/6-Kabel zum LAN (eines von jedem Speicherprozessormodul) • Zwei SAS-Verbindungen zu jedem PowerEdge-Systemknoten über die SAS-5/E-Kabel. ANMERKUNG: Weitere Information zu Verbindungen bei PowerVault MD32xx-Speichergehäusen finden Sie unter „Einrichten der Hardware“ auf Seite 197.
6 Verbinden Sie gegebenenfalls die beiden Out-Ports des PowerVault MD12xx Speichergehäuses durch zwei SAS-Kabel mit den beiden In-0-Ports des zweiten PowerVault MD12xx-Erweiterungsgehäuses. ANMERKUNG: Informationen zur Konfiguration des PowerVault MD12xxErweiterungsgehäuses finden Sie in der Dokumentation zum PowerVault MD12xxSpeichersystem unter support.dell.com/manuals. Abbildung 3-2.
Installation der hostbasierten Speichersoftware Um die erforderliche hostbasierte Software für das Speichergehäuse PowerVault MD32xx zu installieren, verwenden Sie das Dell PowerVault Resource-Medium, das mit dem System geliefert wurde. Um die Modular Disk Storage Manager (MDSM)-Software auf dem Master-Knoten und die Multi-Path Input/Output (MPIO)-Software auf den restlichen Knoten zu installieren, folgen Sie den Anleitungen in der Dokumentation zum PowerVault MD32xx-Speichergehäuse.
Installation der hostbasierten Speichersoftware Installieren der Software Die Resource-Medien für die Reihe PowerVault MD32xx enthalten Software und Treiber. Im Stammverzeichnis des jweiligen Mediums befindet sich eine Datei namens readme.txt. Sie enthält Informationen zu Softwareänderungen, Aktualisierungen, Fixes, Patches und andere wichtige Daten für WindowsBetriebssysteme. Die Datei readme.
Das mitgelieferte Resource-Medium für die Reihe PowerVault MD32xx bietet die folgenden Installationsmethoden: • GUI-based Installation(Recommended) (Grafische Installation [Empfohlen]) – Das Installatonsprogramm bietet eine grafische assistentengeführte Oberfläche, die eine Anpassung der zu installierenden Komponenten erlaubt. • Silent Installation (Automatische Installation) – Dieses Installationsverfahren ist für Benutzer von Vorteil, die es vorziehen, Installationen mithilfe von Skripts zu erstellen.
Automatische Installation Diese Option ermöglicht Ihnen das Installieren der Software im unbeaufsichtigten Modus.
3 Klicken Sie im Enterprise Management-Fenster (EMF) auf Setup Add Storage Array (Speicherarray hinzufügen) und starten Sie die automatische Systemerkennung. ANMERKUNG: Es werden nur Speicherarrays erkannt, deren IP-Adressen demselben Subnetz wie die Verwaltungsstationen angehören. ANMERKUNG: Die Suche nach angeschlossenen Speicherarrays kann einige Minuten in Anspruch nehmen.
Grundlegende Einrichtungsvorgänge So führen Sie die grundlegenden Schritte zur Einrichtung durch: 1 Der Name des ersten gefundenen Speicherarrays erscheint in der Registerkarte „Geräte“ des EMW. Um eine Liste aller im lokalen Netzwerk gefundenen Speicherarrays anzuzeigen, vergrößern Sie die Registerkarte der erkannten Speicherarrays im Bereich „Geräte“ des EMW. 2 Der Standardname für ein neu installiertes MD32xx-Speicherarray lautet Unnamed (Unbenannt).
4 Einrichten eines iSCSI-Clusters für Dell PowerVault-Speichergehäuse WARNUNG: Bevor Sie mit den in diesem Abschnitt beschriebenen Verfahren beginnen, lesen Sie zunächst die Sicherheitshinweise in der entsprechenden Dokumentation zum System. Weitere Informationen zu empfohlenen und bewährten Praktiken finden Sie unter dell.com/regulatory_compliance.
Tabelle 4-1. iSCSI-Hardwareverbindungen (fortgesetzt) Clusterkomponente Verbindungen PowerVault MD30xxiSpeichersystem • Zwei CAT 5e/6-Kabel zum LAN (eines von jedem Speicherprozessormodul) für die Verwaltungsschnittstelle • Zwei CAT 5e/6-Kabel je Speicherprozessor als iSCSIVerbindung ANMERKUNG: Weitere Informationen zum PowerVault MD32xxi-Speichergehäuse finden Sie in der PowerVault MD32xxi-Dokumentation unter support.dell.com/manuals.
Einrichten der Hardware Direct-Attach-iSCSI-Cluster sind auf zwei Knoten beschränkt. Abbildung 4-1.
Hinweise zum Konfigurieren der Knoten in einer Direct-AttachKonfiguration finden Sie unter Abbildung 4-1. 1 Verbinden Sie einen Port (iSCSI-HBA oder NIC) von Knoten 1 über ein CAT 5e/6-Kabel mit Port In-0 von RAID-Controller 0 im PowerVault MD32xxi-Speichergehäuse. 2 Verbinden Sie den anderen Port (iSCSI-HBA oder NIC) von Knoten 1 über ein CAT 5e/6-Kabel mit Port In-0 von RAID-Controller 1 im PowerVault MD32xxi-Speichergehäuse.
Abbildung 4-2.
Hinweise zum Konfigurieren der Knoten in einer Switch-Konfiguration finden Sie unter Abbildung 4-2. 1 Verbinden Sie einen Port (iSCSI-HBA oder NIC) von Knoten 1 über ein CAT 5e/6-Kabel mit dem Port von Netzwerk-Switch 1. 2 Verbinden Sie einen Port (iSCSI-HBA oder NIC) von Knoten 1 über ein CAT 5e/6-Kabel mit dem Port von Netzwerk-Switch 2. 3 Verbinden Sie einen Port (iSCSI-HBA oder NIC) von Knoten 2 über ein CAT 5e/6-Kabel mit dem Port von Netzwerk-Switch 1.
Installation der hostbasierten Software für das Speichersystem Um die erforderliche hostbasierte Software für das Speichersystem PowerVault MD32xxi zu installieren, verwenden Sie das Dell PowerVault Resource-Medium, das mit dem MD32xxi-Speichersystem geliefert wurde.
Einrichten eines iSCSI-Clusters für Dell PowerVault MD32xxiund MD12xx−Speichergehäuse Einrichten der Hardware Hinweise zum Einrichten oder Installieren der Erweiterungsgehäuse PowerVault MD32xxi und PowerVault MD12xx finden Sie in der Dokumentation zu PowerVault unter support.dell.com/manuals.
Das mitgelieferte Resource-Medium der Reihe PowerVault MD32xxi bietet die folgenden drei Installationsmethoden: • GUI-based Installation (Recommended) (Grafische Installation [Empfohlen]) – Das Installationsprogramm bietet eine grafische assistentengeführte Oberfläche, die eine Anpassung der zu installierenden Komponenten erlaubt.
Automatische Installation Diese Option ermöglicht Ihnen das Installieren der Software im unbeaufsichtigten Modus.
Einrichten eines iSCSI-Clusters für das Dell|EqualLogic PS−Speichersystem 5 WARNUNG: Bevor Sie mit den in diesem Abschnitt beschriebenen Verfahren beginnen, lesen Sie zunächst die Sicherheitshinweise in der entsprechenden Dokumentation zum System. Weitere Informationen zu empfohlenen und bewährten Praktiken finden Sie unter dell.com/regulatory_compliance. EqualLogic-Terminologie Die PS-Speicherarrays von EqualLogic setzen Speichervirtualisierungstechnologie ein.
Einrichten des EqualLogic iSCSI−Speichersystems Hostsysteme lassen sich mit dem EqualLogic PS6010XV iSCSI-Array über einen gängigen IP-SAN-10-Gigabit-Ethernet-Switch verbinden. Abbildung 5-1 zeigt die empfohlene Netzwerkkonfiguration für ein EqualLogic PS6010XV-Array mit zwei Steuermodulen. Diese Konfiguration umfasst zwei Dell PowerConnect 10-Gigabit-Ethernet-Switches, um die höchste Netzwerkverfügbarkeit und maximale Netzwerkbandbreite zu ermöglichen.
Abbildung 5-1. Empfohlene Netzwerkkonfiguration Interswitch-Link mit hoher Bandbreite 10-GigabitEthernet-Switches PowerConnect 8024 iSCSI-SAN Dell|EqualLogic PS6010XV iSCSI-Speicherarray Verwaltungsschnittstelle Abbildung 5-2 gibt einen Überblick über die Systemarchitektur einer Oracle Real Application Cluster (RAC)-Beispielkonfiguration mit drei Dell|EqualLogic PS6010XV-Speicherarrays. Die Dell|EqualLogic PS6010XVSpeicherarrays stellen die physische Speicherkapazität für die RAC-Datenbank bereit.
Abbildung 5-2.
Eine EqualLogic PS-Speichergruppe kann in mehrere Ebenen oder Pools unterteilt werden. Mit gestaffeltem Speicher haben Administratoren mehr Kontrolle über die Zuweisung von Datenträgerressourcen. Zu jedem Zeitpunkt kann ein Mitglied nur einem einzigen Pool zugewiesen werden. Ein Mitglied lässt sich einem Pool problemlos zuweisen und zwischen Pools verschieben, ohne dass dies die Datenverfügbarkeit beeinflusst.
Tabelle 5-1 zeigt eine Volume-Beispielkonfiguration. Tabelle 5-1.
Konfiguration von iSCSI-Netzwerken ANMERKUNG: Es wird empfohlen, die Host-Netzwerkschnittstellen für iSCSI−Datenverkehr mit Flusskontrolle und Jumbo-Frames zu konfigurieren, um die Leistung zu optimieren. Um Flusskontrolle und Jumbo-Frames einzurichten, gehen Sie wie folgt vor: 1 Klicken Sie auf StartProgramme und Dateien suchen, und geben Sie Netzwerkverbindungen anzeigen. 2 Klicken Sie in den Suchergebnissen auf Netzwerkverbindungen anzeigen.
5 Wählen Sie im Fenster Installation Type (Installationsart) die Option Typical (Typisch) und klicken Sie auf Next (Weiter). ANMERKUNG: Wenn das Fenster Microsoft iSCSI-Initiator service not running (Der Microsoft iSCSI-Initiator-Dienst wird nicht ausgeführt) angezeigt wird, klicken Sie auf No (Nein). 6 Klicken Sie im Fenster Ready to install the components (Bereit zur Installation der Komponenten) auf Install (Installieren).
11 Verschieben Sie alle anderen Subnetze nach Subnets excluded from MPIO (Subnetze außerhalb MPIO). ANMERKUNG: Wenn Sie nicht alle Ihre Subnetze sehen, vergewissern Sie sich, dass der Microsoft iSCSI-Initiatordienst ausgeführt wird. Unter Umständen müssen Sie den EqualLogic Remote Setup Wizard (RemoteSetup-Assistent) neu starten, nachdem der iSCSI-Initiator gestartet ist. 12 Klicken Sie auf Finish (Fertig stellen).
h Geben Sie das CHAP-Kennwort, das im EqualLogic-Speicher definiert wurde, im Feld Ziel-Kennwort ein. ANMERKUNG: Das CHAP-Kennwort muss mindestens 12 Zeichen lang sein. i Klicken Sie auf OK. 4 Klicken Sie auf der Registerkarte Ziele des Fensters Eigenschaften von iSCSI-Initiator auf ein Volume, das für die Oracle-Datenbank erstellt wurde, und klicken Sie auf Verbinden.
Konfigurieren des Datenbankspeichers auf dem Hostsystem 6 WARNUNG: Bevor Sie mit den in diesem Abschnitt beschriebenen Verfahren beginnen, lesen Sie zunächst die Sicherheitshinweise in der entsprechenden Dokumentation zum System. Weitere Informationen zu empfohlenen und bewährten Praktiken finden Sie unter dell.com/regulatory_compliance. Oracle Real Application Clusters (RAC) erfordert eine geordnete Vorgehensweise.
Überprüfen der Zuordnung zwischen dem Speichersystem und den Knoten 1 Klicken Sie auf StartVerwaltungServer-Manager. 2 Klicken Sie im Fenster Server-Manager auf Geräte-Manager. 3 Blenden Sie Speicher ein und klicken Sie dann auf Datenträgerverwaltung. a Klicken Sie mit der rechten Maustaste auf das Volume und klicken Sie auf Online. b Klicken Sie im Fenster Datenträger initialisieren mit der rechten Maustaste auf das Volume, wählen Sie Initialisieren und klicken Sie auf OK.
Vorbereiten der Datenträger für Oracle Clusterware, Database und Backup Dieser Abschnitt enthält Informationen zum Erstellen der logischen Laufwerke für die folgenden Datenträger: • • • OCR-Datenträger (Oracle Cluster Registry) – Enthält die Clusterkonfigurationsinformationen Voting-Datenträger – Sorgt für Ausgleich zwischen den Clusterknoten, wenn das private Netzwerk oder das verbundene Speichersystem für einen oder mehrere Knoten nicht zugänglich ist Daten- und Sicherungsdatenträger – Stellen Speicherb
Vorbereiten der OCR- und Voting-Datenträger für Clusterware, Datenbankdatenträger und Flash-Wiederherstellungsbereich für ASMDatenspeicherung unter Windows 2008 R2 SP1 Verfahren Sie wie folgt, um erweiterte Partitionen und logische anzulegen: 1 Klicken Sie auf StartAusführen. Geben Sie cmd ein und drücken Sie die . Daraufhin erscheint ein Fenster mit einer Eingabeaufforderung. 2 Geben Sie an der Eingabeaufforderung diskpart ein, um die diskpartSchnittstelle zu starten.
Entfernen der zugewiesenen Laufwerksbuchstaben 1 Klicken Sie auf StartVerwaltungServer-Manager. 2 Blenden Sie Speicher ein und klicken Sie dann auf Datenträgerverwaltung.
Konfigurieren des Datenbankspeichers auf dem Hostsystem
Stichwortverzeichnis B R Begriff Gruppe, 215 Mitglied, 215 Pool, 215 Volume, 215 Resource-Medium PowerVault MD3000, 199 S H SAS Cluster-Einrichtung, 195, 205, 215, 225 Hilfe, 176 Dell-Support, 176 Oracle-Support, 177 V M Modular Disk Storage Manager, 199 Verkabelung iSCSI-Cluster, 207 Volumes, 219 MPIO-Software, 199 N NIC Port-Zuordnungen, 179 P PowerConnect-Switch, 216 Stichwortverzeichnis 231
Stichwortverzeichnis
Dell PowerEdge システム Microsoft Windows Server x64 で使用する Oracle データ ベース ストレージ & ネット ワークガイド バージョン 1.
メモ、注意、警告 メモ：コンピュータを使いやすくするための重要な情報を説明してい ます。 注意 : 手順に従わないと、ハードウェアの損傷やデータの損失につながる 可能性があることを示しています。 警告： 物的損害、けが、または死亡の原因となる可能性があることを示 しています。 ____________________ 本書の内容は予告なく変更されることがあります。 © 2011 すべての著作権は Dell Inc. にあります。 Dell Inc. の書面による許可のない複製は、いかなる形態においても厳重に禁じられて います。 本書に使用されている商標：Dell™、DELL ロゴ、EqualLogic™、Optiplex™、 PowerConnect™、PowerEdge™ および PowerVault™ は Dell Inc. の商標です。 Broadcom™ は Broadcom Corp.
目次 1 概要 . . . . . . . . . . . . . . . . . . . . . . . . . . . . Dell|Oracle 11g R2 Database の導入に必要 なマニュアル . . . . . . . . . . . . . . . . . . . . . . 239 . . . . . . . . . . . . . 240 . . . . . . . . . . . . . . . . . . . . . 240 本書で使用されている用語 . 困ったときは . デルサポート 240 . . . . . . . . . . . . . . . . . . . Oracle のサポート . 2 239 240 . . . . . . . . . . . . . . . . ネットワークの設定 . . . . . . . . . . . . . . ネットワークアダプタのために IPv6 を無 効にする . . . . . . . . . . . . . . . . . . . . 241 . . . . .
3 Dell PowerVault ストレージエンク ロージャ用の SAS クラスタのセッ トアップ . . . . . . . . . . . . . . . . . . . . . . ハードウェアのセットアップ . . 257 . . . . . . . . . . . 259 ホストベースのストレージソフトウェアの インストール . . . . . . . . . . . . . . . . . . . . . 261 ファームウェアの確認とアップグレード . . . . . 261 SAS HBA Adapter ドライバのインストール . . . . 261 ホストベースのストレージソフトウェアのイ ンストール . . . . . . . . . . . . . . . . . . . . . . 262 . . . 262 . . . . . . . . . . . 264 MD ストレージソフトウェアのインス トール . . . . . . . . . . . . . . . . . . . インストール後のタスク ストレージアレイ検知の検証 .
5 Dell|EqualLogic PS シリーズのスト レージシステム用の iSCSI クラス タのセットアップ . . . . . . . . . . . . . . EqualLogic の用語 ボリュームの作成 . . 278 . . . . . . . . . . . . . . . . 281 iSCSI ネットワークの設定 . 282 . . . . . . . . . . . ホストからボリュームへのアクセス の設定 . . . . . . . . . . . . . . . . . . ストレージディスクの検証と識別 . 283 . . . . . ホストのデータベースストレージ の設定 . . . . . . . . . . . . . . . . . . . . . . . 289 . . . 289 . . . . . . . . . ノードに対するストレージの割り当 ての確認 . . . . . . . . . . . . . . . . . 289 . . . . .
目次
1 概要 本書は、Microsoft Windows Server 2008 R2 SP1 をインストールしたシ ステムで Dell|Oracle データベースを実行するためのネットワークの設定 とストレージの要件を概説したものです。本書で説明する手順は、 Microsoft Windows Server x64 上で実行する Oracle Database 11g R2 に 適用されます。お使いのシステムでサポートされているネットワークとス トレージの構成のリストについては、dell.
本書で使用されている用語 本書では、「ボリューム」および「仮想ディスク」という語が使われてい ます。これらの用語は同義語であり、どちらを使用しても構いません。 「ボリューム」は Dell EqualLogic iSCSI ストレージシステムの環境で、 「仮想ディスク」は Dell PowerVault SAS および iSCSI（Dell PowerVault MD3000/MD32xx/MD36xxi および Dell PowerVault MD3000i/MD32xxi + Dell PowerVault MD1000/MD12xx 拡張）ストレージの環境で、通常使わ れる用語です。 困ったときは デルサポート • システムの使い方の詳細については、システムコンポーネントに付 属のマニュアルを参照してください。 • 各種のホワイトペーパー、デルがサポートする設定、一般情報につ いては、dell.com/oracle を参照してください。 • ハードウェアおよび OS ソフトウェアに対するデルのテクニカルサ ポート、およびアップデートのダウンロードについては、 support.dell.
2 ネットワークの設定 本項では、パブリックおよびプライベートクラスタのネットワークを設定 する方法について説明します。 メモ：クライアント接続および接続のフェイルオーバーのために、固有 のパブリックおよびプライベート IP アドレスを 1 つと、仮想 IP アドレス としての機能を果たす追加のパブリック IP アドレスを 1 つ、各ノードに設 定する必要があります。仮想 IP アドレスはパブリック IP アドレスと同じ サブネットに属していなければなりません。仮想 IP アドレスを含むすべ てのパブリック IP アドレスは、ドメインネームサービス（DNS）に登録す る必要があります。DNS サーバーが利用できない場合は、IP アドレスをす べてのクラスタノード上のホストファイルに登録する必要があります。 利用可能な NIC ポートの数に応じて、表 2-1 に示すとおりにインタ フェースを設定します。 表 2-1 NIC のポート割り当て NIC ポート 利用可能なポート 1 パブリック IP、仮想 IP、およびシングルクライアントアクセ ス名（SCAN）IP 2 プライベート IP（NIC チ
3 デバイスマネージャ View（表示）Show hidden devices （非表示のデバイスの表示）の順にクリックします。 Microsoft フェイルオーバークラスタアダプタおよびすべてのトンネ ルアダプタ（Microsoft ISATAP、6to4、Teredo）が無効になります。 4 Regedit を開き、レジストリをバックアップします。 5 HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\ に移動します。 6 DisabledComponents をダブルクリックして修正します。リスト に値がない場合は、Edit（編集）New（新規）DWORD (32-bit) Value（DWORD（32 ビット）値）の順にクリックします。 7 DisabledComponents と入力し、 を押します。 8 0xffffffff という DWORD 値を入力します。 IPv6 ループバックインタフェースを除くすべての IPv6 コンポーネン トが無効になりました。 プライベートネットワ
f Team with other Adapters（その他のアダプタとチーム化す る）を選択し、New Team（新規チーム）を選択します。 g NIC チームの名前を指定し、Next（次へ）をクリックします。 h Select the adapters to include in this team box（この チームに含めるアダプタを選択します）のボックスで、NIC チー ム化用として識別された残りのネットワークアダプタを選択し、 Next（次へ）をクリックします。 i Select a team mode（チームモードの選択）で、Adaptive Load Balancing（アダプティブ負荷バランシング）を選択 します。 j Finish（完了）をクリックしてチーム化を完了します。 k Team Properties（チームのプロパティ）ウィンドウで OK を クリックします。 l Intel NIC の Properties（プロパティ）ウィンドウで、OK をク リックします。 m Computer Management（コンピュータの管理）ウィンドウ を閉じます。
e Team Type（チームタイプ）フィールドで、Smart Load Balancing (TM) and Failover (SLB)（Smart Load Balancing (TM) とフェイルオーバー（SLB））を選択し、Next（次へ）をク リックします。 f Assigning Team Members（チームメンバーの割り当て） ウィンドウの Available Adapters（利用可能なアダプタ） ボックスから、NIC チーム化用として識別されたネットワークア ダプタを選択し、Team Members（チームメンバー）ボックス に追加します。 このアダプタをチームに含めると、システム管理機能に障害が発 生します。 g Yes（はい）をクリックして続行します。 h Next（次へ）をクリックします。 i Designating a Standby Member（スタンバイメンバーの指 定）ウィンドウで、NIC を選択するか、または NIC を選択しな い場合は、Do not configure a standby member（スタンバ イメンバーを指定しない）を選択しま
5 手順 1 ～ 手順 4 を残りのノードで繰り返します。 メモ：プライベートネットワーク用の 2 個のボンディング済み NIC ポート は、それぞれ別々の PCI バス上に置くことをお勧めします。たとえば、ボ ンディング済みのペアは、1 枚のオンボード NIC（LOM）カードと 1 枚のア ドオン NIC カードで構成される場合があります。 パブリックおよびプライベートネットワーク アダプタ用の IP アドレスの設定 1 必要に応じて、アダプタのネットワークインタフェース名をアップ デートします。それ以外の場合は、手順 2 に進んでください。 a ノード 1 で、スタート 管理ツール サーバーマネージャ ネットワーク接続を表示する の順にクリックします。 b ネットワーク接続 ウィンドウで、名前を変更するパブリック ネットワークアダプタを右クリックし、名前の変更 を選択 します。 メモ：すべてのクラスタノードでパブリックアダプタとプライベー トアダプタに同一の名前を使用しないと、Oracle データベースのイン ストーラでエラーが発生し、インストール手順を完了することがで きません。ク
c 次の IP アドレスを使う をクリックし、必要な IP アドレス、デ フォルトゲートウェイアドレス、および DNS サーバーの IP アド レスを入力し、OK をクリックします。 d OK をクリックします。 e プロパティ ウィンドウで、閉じる をクリックします。 f プライベート NIC チームで 手順 a ～ 手順 e を繰り返します。 メモ：プライベート NIC チームでは、デフォルトゲートウェイアド レスと DNS サーバー項目は不要です。 3 パブリックおよびプライベートネットワークアダプタが、ネット ワークサービスによってアクセスできる適切な順序で表示されてい ることを確認します。 a Windows サーバー上で、スタート Search programs and files（プログラムとファイルの検索）検索ボックスの順にク リックし、View network connections と入力します。検索 結果の中の View network connections をクリックします。 b Network Connections（ネットワーク接続）ウィンドウで Org
5 クラスタノードがパブリックおよびプライベートネットワークと通 信できることを確認します。 a ノード 1 で、コマンドプロンプトウィンドウを開きます。 b コマンドプロンプトで、次のコマンドを入力します。 ping ping < パブリックホスト名 > と < プライベートホスト名 > は、もう 1 つのノードにおけるパブリックおよびプライベートネットワーク アダプタのホスト名です。 ノードのネットワークアダプタが ping コマンドに反応しない場 合は、ネットワーク設定を確認し、この手順を繰り返します。 メモ：Windows Server 2008 R2 SP1 では、Windows ファイアウォール がデフォルトでオンに設定されており、そのために静的 IP で ping コ マンドが失敗します。他のノードへの ping を可能にするには、 Windows ファイアウォールを無効にしてください。 メモ：仮想インターネットプロトコル（VIP）の設定は後で行われ ます。この時点では ping コマンドによる確認ができませ
• クラスタのパブリックネットワーク上で DHCP サービスが実行されて いること。 • 各ノードの仮想 IP に 1 つの IP アドレスを、SCAN が使用するクラス タ用に 3 つの IP アドレスを提供するために、DHCP に十分なアドレス があること。 1 つのクラスタ内のさまざまなインタフェース、IP アドレスの設定、およ び解決を 表 2-2 に示します。 表 2-2 GNS を使用したクラスタ内の IP アドレス設定 インタフェース タイプ 解決 パブリック 静的 %SystemRoot%\system32 \drivers\etc\hosts プライベート 静的 不要 ノードの仮想 IP DHCP GNS GNS の仮想 IP 静的 DNS SCAN の仮想 IP DHCP GNS DNS サーバーの設定 GNS を使用して DNS サーバーを設定するには、以下の手順を実行します。 1 DNS サーバーの GNS VIP アドレスを設定する — DNS で、前方参照 ゾーン内に GNS 仮想 IP アドレス用の名前解決エントリを作成します。 a
g New Host（新しいホスト）ウィンドウで Done（完了）をク リックします。 たとえば、次のとおりです。gns-server Host A 192.0.2.2 gns-server は、グリッドのインストール中に与えた GNS 仮想 IP アドレスです。与えるアドレスはルータブルで、パブリックレン ジ内にある必要があります。たとえば、192.0.2.
DNS を使用するクラスタの場合 Oracle DNS を使用して（GNS を使用せずに）Oracle 11g R2 RAC をセット アップするには、以下の手順を行う必要があります。 1 各ノードで少なくとも 2 つのインタフェース（プライベート IP アドレ ス用とパブリック IP アドレス用）を設定します。 2 ラウンドロビン解決を実行する DNS に対して SCAN 名を 3 つのアドレ ス（推奨）または少なくとも 1 つのアドレスに設定します。SCAN ア ドレスは、仮想 IP アドレスおよびパブリック IP アドレスと同じサブ ネット上に設定する必要があります。 メモ：可用性とスケーラビリティを高めるために、3 つの IP アドレスに対し てラウンドロビン解決を使用するように SCAN を設定することをお勧めします。 SCAN 用の名前は先頭を数字にすることができません。インストールを成功さ せるには、SCAN が少なくとも 1 つのアドレスを解決するように設定しておく 必要があります。 1 つのクラスタ内のさまざまなインタフェース、IP アドレスの設定、および 解決を 表 2-3 に示します。
DNS サーバーの設定 DNS を使用して（GNS を使用せずに）Oracle 11g R2 クラスタ用に DNS サーバーに変更を設定するには、次の手順を実行します。 1 DNS サーバー上で SCAN 名解決を設定します。 2 DNS 内で、前方参照ファイル内に GNS 仮想 IP アドレス用の名前解 決エントリを作成します。 3 DNS manager（DNS マネージャ）を開きます。 4 DNS server（DNS サーバー） Forward Lookup Zones（前方 参照ゾーン）DNS Domain（DNS ドメイン）の順にクリック します。 5 DNS domain（DNS ドメイン）を右クリックし、New Host (A or AAAA)（新しいホスト（A または AAAA））を選択します。 6 New Host（新しいホスト）ウィンドウに GNS 仮想 IP アドレス用の 名前と IP アドレスを入力します。 7 Add Host（ホストの追加）をクリックします。 8 OK をクリックします。 9 同じ SCAN 名で 3 つの 仮想 IP / ホストを追加します。 10 New
ホスト名解決の設定 名前解決のためにクラスタノード上で必要な変更を設定するには、以下の 手順を実行します。 1 %SystemRoot%\system32\drivers\etc\hosts ファイルにホスト エントリを追加します。 2 各ノードで、%SystemRoot%\system32\drivers\etc\hosts ファ イルに以下のように入力して各行を修正します。 127.0.0.
管理システムの設定 BMC 管理ユーティリティを使用する前に、BMC へのアクセスを有効にす るために、実行する機能に応じて、必要なシステム BIOS、ネットワーク、 IPMI 暗号化キー、シリアル接続設定など、特定の項目を設定します。 BMC 管理ユーティリティを活用するには、管理ステーションとターゲッ ト BMC のポートの間に有効な接続が必要です。本項では、BMC 管理 ユーティリティを使用して BMC へのアクセスと管理を行うための準備に 必要な基本手順を説明します。 ベースボード管理コントローラの設定 システムの起動中に Remote Access Configuration Utility（リモートアク セス設定ユーティリティ）を使用して BMC の基本的な設定を実行でき ます。 Remote Access Configuration Utility（リモートアクセス設定ユー ティリティ）の起動 1 システムの電源を入れるか、再起動します。 2 POST 後、画面の指示に従って を押します。 を押す前に OS のロードが開始された場合は、システムの起動
Remote Access Configuration Utility（リモートアクセス設定ユーティリティ） のオプション Remote Access Configuration Utility（リモートアクセス設定ユー ティリティ）のオプションと、管理システム上で BMC を設定する方法を 表 2-4 に示します。設定をすべて入力したら、 を押して以下のいず れかを選択してください。 • Save Changes and Exit（変更を保存して終了）— Remote Access Configuration Utility（リモートアクセス設定ユーティリ ティ）で入力したエントリをすべて保存します。 • Discard Changes and Exit（変更を破棄して終了）— Remote Access Configuration Utility（リモートアクセス設定ユーティリ ティ）で入力したエントリをすべて破棄します。 • Return to Setup（セットアップへ戻る）— Remote Access Configuration Utility（リモートアクセス設定ユーティリ
表 2-4 Remote Access Configuration Utility（リモートアクセス設定ユーティリ ティ）（続き） オプション 説明 LAN Parameters IP Address Source ネットワークコントローラに静的 IP アドレ スまたは DHCP アドレスが割り当てられ ます。 Ethernet IP Address BMC の静的 IP アドレス。このフィールドの 最大値は 255.255.255.255 に制限されて います。 次の IPv4 ルールが適用されます。 • IP アドレスに 127.xxx.xxx.xxx は設定できな い（xxx は 0 ～ 255 の数字）。 • 最初のオクテットは 1 ～ 223（たとえば、 143.xxx.xxx.xxx）の数字である必要があり ます。 メモ：BMC が DHCP サーバーに接続できない 場合、IP アドレス 169.254.0.2 サブネットマス ク 255.255.0.
メモ：最初のオンボード NIC（NIC 1）が Ether Channel チームまたはリンク アグリゲーションチームで使用されている場合、BMC 管理トラフィック は PowerEdge x8xx システムで動作しません。NIC のチーム化のオプション は、PowerEdge x9xx および xx0x システムでのみサポートされています。 ネットワークチーム化の詳細については、ネットワークインタフェースコ ントローラのマニュアルを参照してください。 • bmc info コマンドを使用して、クラスタ内のリモートノードから BMC がアクセスおよび制御可能なことを確認します。 たとえば、node2 用の BMC に割り当てられているネットワークホ スト名が node2-ipmi である場合、node1 から node2 上の BMC を 確認するには、node1 で次のコマンドを入力します。 $ ipmitool -H node2-ipmi -U bmcuser -P password bmc info root を Administrator アカウントとして、calvin をパスワードとし て使用し
3 Dell PowerVault ストレージエン クロージャ用の SAS クラスタの セットアップ 警告：本項の手順を開始する前に、システムに付属しているガイドの安 全にお使いいただくための注意事項をお読みください。ベストプラクティ スの詳細については、dell.
図 3-1 SAS（シリアル接続 SCSI）クラスタと Dell PowerVault MD32xx ストレー ジエンクロージャのケーブル接続 クライアントシステム プライベートネットワーク DNS/DHCP サーバー LAN/WAN PowerEdge システム PowerVault MD32xx ス トレージシステム PowerVault MD12xx 拡張エン クロージャ 2 台 CAT 5e/6（パブリック NIC） CAT 5e/6（銅線ギガビット NIC） SAS ケーブル 表 3-1 SAS クラスタハードウェアの相互接続 クラスタのコン ポーネント 接続 PowerEdge シス テムノード • CAT 5e/6 ケーブル 1 本をパブリック NIC から LAN に接続 • CAT 5e/6 ケーブル 1 本をプライベートギガビット NIC か らギガビットイーサネットスイッチに接続（プライベート ネットワーク） • CAT 5e/6 ケーブル 1 本を冗長プライベートギガビット NIC から冗長ギガビットイーサネットスイッチに接続（プライ ベートネットワーク） • 6
表 3-1 SAS クラスタハードウェアの相互接続 （続き） クラスタのコン ポーネント 接続 PowerVault • CAT 5e/6 ケーブル 2 本を LAN に接続（各ストレージプロ セッサモジュールから 1 本ずつ） MD32xx ストレー ジエンクロージャ • SAS 6/E ケーブルで各 PowerEdge システムノードに対し て 2 本の SAS 接続 メモ：PowerVault MD32xx ストレージエンクロージャの相互 接続の詳細については、259 ページの「ハードウェアのセッ トアップ」を参照してください。 PowerVault PowerVault MD12xx 拡張エンクロージャの必要に応じて MD12xx ストレー SAS ケーブルの接続を追加 ジエンクロージャ （オプション） ハードウェアのセットアップ SAS クラスタは直接接続クラスタ内にのみ取り付け可能で、2 ノードまで に限定されます。 ノードを直接接続構成に設定するには、以下の手順に従います。 1 ノード 1 の SAS コントローラのポートと PowerVault MD32xx スト レージエンクロージ
6 必要に応じて、PowerVault MD12xx ストレージエンクロージャの 2 個の出力ポートと 2 台目の PowerVault MD12xx 拡張エンクロー ジャの In-0 ポートを 2 本の SAS ケーブルで接続します。 メモ：PowerVault MD12xx 拡張エンクロージャの設定については、 support.dell.
ホストベースのストレージソフトウェアのイ ンストール PowerVault MD32xx ストレージエンクロージャに必要なホストベースの ストレージソフトウェアをインストールするには、システムに付属の Dell PowerVault Resource メディアを使用します。Modular Disk Storage Manager（MDSM）ソフトウェアをマスターノードに、マルチ パス入出力（MPIO）ソフトウェアを残りのノードにインストールするに は、PowerVault MD32xx ストレージエンクロージャのマニュアルに記載 されている手順に従います。 ファームウェアの確認とアップグレード ファームウェアの確認とアップグレードは、次の手順で行います。 1 ホストシステムにインストールされている MDSM ソフトウェアを使 用して、ホストシステムの直接接続ストレージを検知します。 2 次のストレージコンポーネント用のファームウェアが最低必要な バージョンであることを確認します。 • RAID コントローラファームウェア • PowerVault MD32xx ストレージシステムファームウェア •
ホストベースのストレージソフトウェアのイ ンストール ソフトウェアのインストール PowerVault MD32xx シリーズのリソースメディアには、ソフトウェアと ドライバが収録されています。 メディアのルートには、Windows に適用されるソフトウェアの変更、 アップデート、修正プログラム、パッチ、およびその他の重要なデータが 収録されている readme.txt ファイルが入っています。readme.txt ファイ ルにはまた、マニュアルを参照するための必要条件が指定されているほ か、メディアに収録されているソフトウェアのバージョンに関する情報、 ソフトウェアの実行に必要なシステム要件が記載されています。 Dell PowerVault システム用としてサポートされているハードウェアとソ フトウェアの詳細については、support.dell.com/manuals で『サポー トマトリックス』を参照してください。 メモ：support.dell.
PowerVault MD32xx シリーズのリソースメディアでは、次のインストー ルオプションが提供されています。 • GUI-based Installation（GUI ベースのインストール）（推奨）— イ ンストーラには、インストールするコンポーネントを選択できるグ ラフィカルウィザード方式のインタフェースが表示されます。 • Silent Installation（サイレントインストール）— スクリプトインス トールを作成するユーザーには、このオプションが有用です。 Graphical Installation（グラフィカルインストール）（推奨） グラフィカルインストールは、以下の手順で行います。 1 新しいソフトウェアをインストールする場合は必ず、事前に他のプ ログラムをすべて閉じてください。 2 リソースメディアをセットします。 3 Install MD32xx Storage Software（MD32xx ストレージソフト ウェアのインストール）を選択します。 メモ：ホストサーバーで Windows Server Core バージョンが実行され ている場合、または起動プログラムが自
Silent Installation（サイレントインストール） このオプションでは、ソフトウェアを無人モードでインストールできま す。Windows システムでサイレントインストールを実行するには、次の 手順に従います。 1 すべてのデフォルトオプションを使用してインストールを開始する には、リソースメディアの Windows のフォルダに移動して、次の コマンドを実行します。 md32xx_install -i silent 2 サイレントインストールでインストールする機能を指定するには、 同じディレクトリ内にある custom_silent.properties ファイルを 変更し、これをホストサーバー上の書き込み可能な場所にコピーし てください。このファイルには、サポートされる機能とその説明の リストが含まれています。変更した custom_silent.properties ファイルを利用するには、次のコマンドを実行します。 md32xx_install -f C:\path\to\custom_silent.
3 Enterprise Management Window（EMW）で、Setup（セット アップ） Add Storage Array（ストレージアレイの追加）の順 に進み、システムの自動検知を開始します。 メモ：管理ステーションと同じサブネット上の IP アドレスで設定さ れたストレージアレイのみが検知されます。 メモ：検知が完了するのに数分かかることがあります。完了する前 に Automatic Discovery Status（自動検知のステータス）ウィンドウを 閉じると、検知処理が停止します。 検知が完了すると、設定画面が表示されます。 4 Close（閉じる）をクリックして、画面を閉じます。 ストレージアレイ検知の検証 Automatic Discovery（自動検知）オプションにより、帯域内アレイと帯 域外アレイの両方が自動的に検知され、ストレージアレイが管理ドメイン に追加されます。サマリページに表示されている帯域外または帯域内の接 続が正確でない場合は、以下の手順を実行します。 ストレージアレイ検知の検証は、以下の手順で行います。 1 ハードウェアと接続に問題がないかチェックします
初期セットアップタスク 初期セットアップタスクは、以下の手順で行います。 1 検知された最初のストレージアレイの名前が、EMW のデバイスタブ に表示されます。ローカルネットワーク上で検知されたすべてのス トレージアレイのリストを表示するには、EMW のデバイスペインに ある検知済みストレージアレイタブを展開します。 2 新しく取り付けられた MD32xx シリーズのストレージアレイのデ フォルト名は、Unnamed（無題）です。MDSM 内に別の名前が表 示された場合は、名前の隣の下矢印をクリックし、ドロップダウン リスト内の Unnamed（無題）をクリックします。 3 検知されたアレイをダブルクリックしてアレイの管理ウィンドウを 開き、アレイの設定を変更します。 4 Perform Initial Setup Tasks（初期セットアップタスクの実行）を クリックして、残りのインストール後のタスクの概要とリンクを確 認します。アレイの設定準備ができました。 メモ：ストレージアレイを設定する前に、Device（デバイス）ペインのス テータスアイコンをチェックして、ストレージアレイ内のエンクロージャ が
4 Dell PowerVault ストレージエン クロージャ用の iSCSI クラスタ のセットアップ 警告：本項の手順を開始する前に、システムに付属しているガイドの安 全にお使いいただくための注意事項をお読みください。ベストプラクティ スの詳細については、dell.com/regulatory_compliance を参照してください。 本項では、Dell PowerEdge システムと PowerVault MD32xxi/MD12xx ス トレージエンクロージャが Oracle RAC（Real Application Cluster）環境 で機能するように設定するための情報と手順を示します。 support.dell.
表 4-1 iSCSI ハードウェアの相互接続 （続き） クラスタのコンポー 接続 ネント PowerVault • 管理インタフェース用に CAT 5e/6 ケーブル 2 本を LAN に接続（各ストレージプロセッサモジュールから 1 本） MD30xxi ストレージ システム • iSCSI 相互接続用として、CAT 5e/6 ケーブル 2 本を各ス トレージプロセッサに接続 メモ：PowerVault MD32xxi ストレージエンクロージャの 詳細については、support.dell.
ハードウェアのセットアップ 直接接続の iSCSI クラスタは 4 ノードまでに限定されています。 図 4-1 iSCSI 直接接続クラスタのケーブル接続 スタンドアロンホストシステム イーサネット 管理ポート PowerVault MD32xxi RAID エン クロージャ（デュアル）コン トローラ LAN/WAN CAT 5e/6 （パブリック NIC） CAT 5e/6（iSCSI NIC） iSCSI クラスタのセットアップ 269
ノードを直接接続構成に設定するには、図 4-1 を参照してください。 1 ノード 1 のポート（iSCSI HBA または NIC）と PowerVault MD32xxi ストレージエンクロージャ内の RAID コントローラ 0 の In-0 ポート を 1 本の CAT 5e/6 ケーブルで接続します。 2 ノード 1 のもう一方のポート（iSCSI HBA または NIC）と PowerVault MD32xxi ストレージエンクロージャ内の RAID コント ローラ 1 の In-0 ポートを 1 本の CAT 5e/6 ケーブルで接続します。 3 ノード 2 のポート（iSCSI HBA または NIC）と PowerVault MD32xxi ストレージエンクロージャ内の RAID コントローラ 0 の In-1 ポート を 1 本の CAT 5e/6 ケーブルで接続します。 4 ノード 2 のもう一方のポート（iSCSI HBA または NIC）と PowerVault MD32xxi ストレージエンクロージャ内の RAID コント ローラ 1 の In-1 ポートを 1 本の CAT 5e/6
図 4-2 iSCSI スイッチ式クラスタのケーブル接続 IP SAN（デュアル ギガビットイーサ ネットスイッチ） PowerVault MD30xxi RAID エン クロージャ （デュアルコント ローラ） イーサネット 管理ポート LAN/WAN CAT 5e/6 （パブリック NIC） CAT 5e/6（iSCSI） iSCSI クラスタのセットアップ 271
ノードをスイッチ式の構成に設定するには、図 4-2 を参照してください。 1 ノード 1 のポート（iSCSI HBA または NIC）とネットワークスイッチ 1 のポートを 1 本の CAT 5e/6 ケーブルで接続します。 2 ノード 1 のポート（iSCSI HBA または NIC）とネットワークスイッチ 2 のポートを 1 本の CAT 5e/6 ケーブルで接続します。 3 ノード 2 のポート（iSCSI HBA または NIC）とネットワークスイッチ 1 のポートを 1 本の CAT 5e/6 ケーブルで接続します。 4 ノード 2 のポート（iSCSI HBA または NIC）とネットワークスイッチ 2 のポートを 1 本の CAT 5e/6 ケーブルで接続します。 5 スイッチ 1 と PowerVault MD32xxi ストレージエンクロージャ内の RAID コントローラ 0 の In-0 ポートを 2 本の CAT 5e/6 ケーブルで接 続します。 6 スイッチ 1 の他の 2 個のポートと PowerVault MD32xxi ストレージ エンクロージャ内の RAID コントローラ
ストレージに必要なホストベースソフトウェ アのインストール PowerVault MD32xxi ストレージシステムに必要なホストベースのスト レージソフトウェアをインストールするには、PowerVault MD32xxi スト レージシステムに付属の Dell PowerVault の Resource メディアを使用し ます。PowerVault MD32xxi ストレージエンクロージャのマニュアル （support.dell.
Dell PowerVault MD32xxi /MD12xx ストレージ エンクロージャ用の iSCSI クラスタのセット アップ ハードウェアのセットアップ PowerVault MD32xxi/MD12xx 拡張エンクロージャのセットアップまたは インストールを行う場合は、PowerVault のマニュアルを参照してくださ い。マニュアルは support.dell.
PowerVault MD32xxi シリーズに付属のリソースメディアでは、次のイン ストールオプションが提供されています。 • GUI-based Installation（GUI ベースのインストール）（推奨）— イ ンストーラには、インストールするコンポーネントを選択できるグ ラフィカルウィザード方式のインタフェースが表示されます。 • Silent Installation（サイレントインストール）— スクリプトインス トールを作成するユーザーには、このオプションが有用です。 Graphical Installation（グラフィカルインストール）（推奨） グラフィカルインストールは、以下の手順で行います。 1 新しいソフトウェアをインストールする場合は必ず、事前に他のプ ログラムをすべて閉じてください。 2 リソースメディアをセットします。 3 Install MD32xxi Storage Software（MD32xxi ストレージソフトウェ アのインストール）を選択します。 メモ：ホストサーバーで Windows Server Core バージョンが実行され ている場合、または起動プ
Silent Installation（サイレントインストール） このオプションでは、ソフトウェアを無人モードでインストールできま す。Windows システムでサイレントインストールを実行するには、次の 手順に従います。 1 すべてのデフォルトオプションを使用してインストールを開始する には、リソースメディアの Windows のフォルダに移動して、次の コマンドを実行します。 md32xxi_install -i silent 2 サイレントインストールでインストールする機能を指定するには、 同じディレクトリ内にある custom_silent.properties ファイルを 変更し、これをホストサーバー上の書き込み可能な場所にコピーす る必要があります。このファイルには、サポートされる機能とその 説明のリストが含まれています。変更した custom_silent.properties ファイルを利用するには、次のコマン ドを実行します。 md32xxi_install -f < パス >/custom_silent.
5 Dell|EqualLogic PS シリーズのス トレージシステム用の iSCSI ク ラスタのセットアップ 警告：本項の手順を開始する前に、システムに付属しているガイドの安 全にお使いいただくための注意事項をお読みください。ベストプラクティ スの詳細については、dell.
EqualLogic iSCSI ストレージシステムのセッ トアップ ホストシステムは、IP SAN 業界標準 10 ギガビットイーサネットスイッチ を経由して EqualLogic PS6010XV iSCSI アレイに接続できます。図 5-1 は、デュアルコントロールモジュール EqualLogic PS6010XV アレイに推 奨されるネットワーク構成を示しています。Dell PowerConnect 10 ギガ ビットイーサネットスイッチ 2 台による構成で、ネットワークの可用性 と帯域幅が共に最大となります。詳細については、 support.equallogic.
図 5-1 推奨ネットワーク構成 高帯域幅インタースイッチリンク PowerConnect 8024 シリーズ 10 ギガビットイー サネットスイ ッチ iSCSI SAN Dell|EqualLogic PS6010XV iSCSI ストレージアレイ 管理インタ フェース 図 5-2 は、Dell|EqualLogic PS6010XV アレイ 3 つを使用した Oracle RAC （Real Application Cluster）構成例の概略図です。Dell|EqualLogic PS6010XV ストレージアレイは、RAC データベース用の物理的なスト レージ容量を提供します。oracle-group というグループには、 Dell|EqualLogic PS6010XV のメンバー 3 つ（oracle-member01、 oracle-member02、oracle-member03）が含まれています。初期化 済みのメンバーは、RAID 10、RAID 5、または RAID 50 のいずれかに構成 できます。 iSCSI クラスタのセットアップ 279
図 5-2 PS6010XV アレイ 3 つを使用した Oracle RAC 構成例 Dell Optiplex デスクトップ パブリックネットワーク RAC プライベート相互接続 DNS/DHCP サーバー iSCSI SAN 管理インタフェース LAN/WAN PowerConnect ギガビットイーサネットスイッチ リンクアグリゲー ショングループ PowerConnect 8024 シリー ズ 10 ギガビットイーサ ネットスイッチ 高帯域幅インター スイッチリンク Dell|EqualLogic PS6010XV ストレー ジアレイ ストレージメンバー ストレージメンバー oracle-member02 oracle-member01 ストレージメンバー oracle-member03 OCR および CSS 仮想 ディスクボリューム フラッシュリカバ リ領域ボリューム データボリューム RAID10 ストレージプール RAID5 ストレージ プール ストレージグループ : oracle-group メモ：EqualLogic アレイの初期化の詳細については、 suppor
EqualLogic PS シリーズのストレージグループは、複数の階層またはプー ルに分割できます。ストレージを階層化すると、ディスクリソースをより 自在に割り当てることができるようになります。メンバーを同時に複数の プールに割り当てることはできません。メンバーをプールに割り当てた り、別のプールに移動する操作は簡単に行うことができ、データの可用性 に何ら影響はありません。プールは、ディスクのタイプ、速度、RAID レ ベル、アプリケーションのタイプなど、さまざまな基準に従って組むこと ができます。 図 5-2 では、プールはメンバーの RAID レベルに従って組まれています。 • RAID 10 という名前のプールは、RAID 10 のメンバーで構成されて います。 • RAID 5 という名前のプールは、RAID 5 のメンバーで構成されて います。 ボリュームの作成 データを保存する前に、EqualLogic PS6010XV ストレージアレイの物理 ディスクを設定して、ボリュームと呼ばれる使用可能なコンポーネントに してください。ボリュームはストレージプールを構成する一部であり、特 定のサイズ
表 5-1 はボリューム構成の一例を示したものです。 表 5-1 Oracle RAC 用のボリュームの構成 ボリュー 最小サイズ ムの数 RAID パーティ 使用目的 ションの数 OS マッピング 3 1024 MB 10 1 OCR および投 票ディスク用の ASM ディスク グループ 1 データベース 10 よりも大きい こと 1 データ 1 5 第 2 領域ボ リュームのサ イズの 2 倍以 上 1 フラッシュリカ ASM ディスク バリ領域 グループ FLASHBACKDG 1 共有 DB ホーム 共有 DB ホーム 用の ASM ディ スクグループ 1（オプ 10 GB ション） 10 投票ディスク、 Oracle Cluster Registry （OCR） ASM ディスク グループ DATABASEDG Dell|EqualLogic PS6010XV アレイ内にボリュームを作成し、すべてのホ スト iSCSI ネットワークインタフェースがボリュームにアクセスできるよ うにアクセスリストを作成します。たとえば、次のようなボリュームが作 成されます。
フロー制御とジャンボフレームを設定するには、以下の手順を実行 します。 1 スタート Search programs and files（プログラムとファイルの 検索）の順にクリックし、View network connections と入力 します。 2 検索結果の中の View network connections をクリックします。 3 iSCSI network interface（iSCSI ネットワークインタフェース）を 選択し、Properties（プロパティ）を右クリックします。 4 Configure（設定）をクリックします。 5 Advanced（詳細）をクリックします。 6 Jumbo Packet（ジャンボパケット）を選択し、値を 9014 バイト に設定します。 7 Performance Options（パフォーマンスオプション）を選択し、 Properties（プロパティ）をクリックします。 Performance Options（パフォーマンスオプション）ウィンドウ が表示されます。 8 Flow Control（フロー制御）を選択し、値を Rx & Tx Enabled
5 Installation Type（インストールの種類）ウィンドウで Typical （標準）を選択し、Next（次へ）をクリックします。 メモ：Microsoft iSCSI Initiator service not running（Microsoft iSCSI Initiator サービスが実行されていません）ウィンドウが表示された場 合は、No（いいえ）をクリックします。 6 Ready to install the components（インストールの準備完了） ウィンドウで、Install（インストール）をクリックします。 Installation Status（インストール状況）ウィンドウと Software Update Installation Wizard（ソフトウェアの更新のインストール ウィザード）ウィンドウが表示されます。 メモ：Microsoft Multipath I/O feature not detected（Microsoft Multipath I/O の機能が検知されません）ウィンドウが表示された場合は、Yes （はい）をクリックします。MS Multipa
11 その他すべてのネットワークのサブネットを Subnets excluded from MPIO（MPIO から除外されたサブネット）の下に移動します。 メモ：表示されないサブネットがある場合は、Microsoft iSCSI Initiator Service が実行されていることを確認してください。場合によっては、 iSCSI イニシエータの起動後に EqualLogic Remote Setup Wizard （EqualLogic リモートセットアップウィザード）を再び起動する必要 があります。 12 Finish（完了）をクリックします。 メモ：Load Balancing（負荷バランシング）のデフォルト値を Least Queue Depth（最小のキューの深さ）に設定することをお勧めします。 13 クラスタ内の残りのすべてのホストで 手順 1 ～ 手順 9 を繰り返 します。 Microsoft iSCSI Initiator の設定 1 Start（スタート）をクリックし、検索ボックスに iSCSI Initiator と入力します。検索結果のリストで iSCSI Initiato
g User name（ユーザー名）ボックスに EqualLogic ストレージで 定義した CHAP ユーザー名を入力します。 h Target secret（ターゲットシークレット）ボックスに EqualLogic ストレージで定義した CHAP パスワードを入力 します。 メモ：CHAP のパスワードは 12 文字以上にする必要があります。 i OK をクリックします。 4 iSCSI Initiator Properties（iSCSI イニシエータのプロパティ） ウィンドウの Targets（ターゲット）タブで、Oracle データベース 用に作成された 1 つのボリュームをクリックし、Connect（接続） をクリックします。 5 Connect to Target（ターゲットに接続）ウィンドウで、Add this connection to the list of Favorite Targets（この接続をお気に 入りのターゲットに追加する）と Enable multi-path（マルチパス を有効にする）の両方を選択し、Advanced（詳細設定）をクリッ クします。 6 Adv
7 Connect to Target（ターゲットに接続）ウィンドウで、OK をク リックします。 8 iSCSI Initiator Properties（iSCSI イニシエータのプロパティ） ウィンドウの Targets（ターゲット）タブで、ログオンされている ボリュームのステータスは Connected（接続済み）になっ ています。 9 その他の各 iSCSI イニシエータ IP の IP アドレスについて 手順 3 ～ 手順 8 を繰り返して、同じボリュームにログオンします。 10 手順 3 ～ 手順 9 を繰り返して、データベース用に作成されたその他 すべてのボリュームにログオンします。 11 クラスタ内の残りのすべてのホストで 手順 1 ～ 手順 9 を繰り返 します。 iSCSI クラスタのセットアップ 287
iSCSI クラスタのセットアップ
6 ホストのデータベースストレー ジの設定 警告：本項の手順を開始する前に、システムに付属しているガイドの安 全にお使いいただくための注意事項をお読みください。ベストプラクティ スの詳細については、dell.
4 ディスクの管理 ウィンドウで、4 台のディスクが表示されているか どうか確認します。ディスクのサイズは互いに、また、ストレージ システム内のノードに割り当てられている仮想ディスクともほぼ同 一であるはずです。 5 手順 1 ～ 手順 4 を残りのノードで繰り返します。 Oracle Clusterware、データベース、バック アップ用のディスクの準備 本項では、以下のディスク用に論理ドライブを作成するための情報を提供 します。 • Oracle Cluster Registry（OCR）ディスク — クラスタ設定情報が格 納されています。 • 投票ディスク — 1 つまたは複数のノードでプライベートネットワー クまたは接続ストレージが使用できない場合に、クラスタノード間 にアービトレーションを提供します。 • データディスクとバックアップディスク — データベースを作成し （データディスク）、バックアップとログデータを保存する（バック アップディスク）ためのストレージ領域を提供します。 本書で説明されているクラスタの設定中、共有ストレージにパーティショ ンを作成する際に、取り付けられている
4 DISKPART コマンドプロンプトで automount enable と入力し、 を押します。 次のメッセージが表示されます。Automatic mounting of new volumes enabled.
5 create partition extended と入力し、 を押します。 6 create partition logical size= と入力し、 を押します。 7 クラスタウェア用として識別されたすべてのディスク（OCR と投票 ディスク）、およびデータベースストレージ用として識別されたすべ てのディスク（データベースディスクとフラッシュリカバリ領域） に対して、手順 4 ～ 手順 6 を繰り返します。 割り当て済みのドライブ文字の削除 1 スタート 管理ツール サーバーマネージャ の順にクリック します。 2 記憶域 を展開し、ディスクの管理 をクリックします。 3 291 ページの「Windows 2008 R2 SP1 上で ASM を使用したデータ ベースストレージ用のクラスタウェア、データベースディスク、フ ラッシュリカバリ領域用の OCR と投票ディスクの準備」で作成した ドライブにドライブ文字が割り当てられている場合は、次の手順を 実行します。 292 a 論理ドライブを右クリック
索引 M S Modular Disk Storage Manager, 261 SAS クラスタのセットアップ , 257, 267, 277, 289 MPIO ソフトウェア , 261 N Z NIC ポートの割り当て , 241 ケーブル接続 iSCSI クラスタ , 269 P ヘルプ , 240 Oracle サポート , 240 デルサポート , 240 PowerConnect スイッチ , 278 ボリューム , 281 R 用語 グループ , 277 プール , 277 ボリューム , 277 メンバー , 277 Resource メディア PowerVault MD3000, 261 索引 293
索引
Sistemas Dell PowerEdge Base de datos Oracle en Microsoft Windows Server x64 Guía de almacenamiento y redes Versión 1.
Notas, precauciones y avisos NOTA: una NOTA proporciona información importante que le ayudará a utilizar mejor el equipo. PRECAUCIÓN: un mensaje de PRECAUCIÓN indica la posibilidad de daños en el hardware o la pérdida de datos si no se siguen las instrucciones. AVISO: un mensaje de AVISO indica el riesgo de daños materiales, lesiones personales o incluso la muerte. ____________________ La información contenida en esta publicación puede modificarse sin previo aviso. © 2011 Dell Inc.
Contenido 1 Información general 301 Documentación necesaria para implantar la base de datos Dell|Oracle 11g R2. . . . . . . . . . . 301 Terminología utilizada en este documento . . . . . . . 302 . . . . . . . . . . . . . . . . . . . 302 Obtención de ayuda Asistencia de Dell 302 . . . . . . . . . . . . . . . . . Asistencia de Oracle 2 . . . . . . . . . . . . . . . 302 . . . . . . . . . . . . . . . . Configuración de la red . . . . . . . . . . . . .
3 Configuración de un clúster SAS para almacenamientos Dell PowerVault . . . Configuración del hardware . . 319 . . . . . . . . . . . . . 321 Instalación del software de almacenamiento basado en host . . . . . . . . . . . . . . . . . . . . . 323 Verificación y actualización del firmware . . . . . . 323 Instalación del controlador del adaptador HBA SAS . . . . . . . . . . . . . . . . . . . . . . . . 323 Instalación del software de almacenamiento basado en host . . . . . . . . . . . . . . . . .
5 Configuración de un clúster iSCSI para los sistemas de almacenamiento Dell|EqualLogic serie PS . . . . . . . . . . Terminología de EqualLogic . . . . 340 . . . . . . . . . . . . . . 343 Configuración de redes iSCSI Verificación e identificación de los discos de almacenamiento . . . . . . . . . . . . . Verificación de la asignación de almacenamiento a los nodos . . . 345 . . . . . . . . . Configuración del almacenamiento de base de datos en el host . . . . . . 349 . . . . . . . . . 349 . . .
Contenido
1 Información general En este documento se proporcionan instrucciones sobre cómo configurar la red y los requisitos de almacenamiento para ejecutar la base de datos Dell|Oracle en un equipo con el sistema operativo Microsoft Windows Server 2008 R2 SP1 instalado. Los procedimientos incluidos en este documento son aplicables a la base de datos Oracle 11g R2 con Microsoft Windows Server x64 instalado. Para ver una lista de las configuraciones de red y de almacenamiento admitidas por su sistema, vaya a dell.
Terminología utilizada en este documento En este documento se emplean los términos volumen y disco virtual. Dichos términos son sinónimos y pueden utilizarse indistintamente.
Configuración de la red 2 En esta sección se proporciona información sobre cómo configurar la red de clúster pública y privada. NOTA: Cada nodo requiere una dirección de protocolo Internet (IP) pública y privada exclusivas, así como otra dirección IP pública que se utilizará como dirección IP virtual en las conexiones de cliente y en caso de sustitución tras error de las conexiones. La dirección IP virtual debe pertenecer a la misma subred que la dirección IP pública.
3 Haga clic en Device Manager (Administrador de dispositivos)View (Ver)Show hidden devices (Mostrar dispositivos ocultos). El adaptador del clúster de sustitución tras error de Microsoft y todos los adaptadores de túnel (Microsoft ISATAP, 6to4, Teredo) deben deshabilitarse. 4 Abra Regedit y el Registro de copia de seguridad. 5 Vaya a HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcp ip6\Parameters\. 6 Haga doble clic en DisabledComponents para modificarlo.
e Haga clic en la ficha Teaming (Agrupación). f Seleccione Team with other Adapters (Agrupar con otros adaptadores) y, a continuación, seleccione New Team (Grupo nuevo). g Especifique un nombre para el grupo de NIC y haga clic en Next (Siguiente). h En la casilla Select the adapters to include in this team box (Seleccionar los adaptadores que se incluirán en este grupo), seleccione los demás adaptadores de red que ha identificado para la agrupación de NIC y haga clic en Next (Siguiente).
e En el campo Team Type (Tipo de grupo), seleccione Smart Load Balancing (TM) and Failover (SLB) (Equilibrio de carga y sustitución tras error inteligentes) y haga clic en Next (Siguiente). f En la casilla Available Adapters (Adaptadores disponibles) de la ventana Assigning Team Members (Asignación de miembros del grupo), seleccione los adaptadores de red que ha identificado para la agrupación de NIC y añádalos a la casilla Team Members (Miembros del grupo).
Configuración de las direcciones IP para los adaptadores de red pública y privada 1 Actualice el nombre de interfaz de red del adaptador, si es necesario. De lo contrario, vaya al paso 2. a En el nodo 1, haga clic en InicioHerramientas administrativas Administrador de servidoresVer conexiones de red. b En la ventana Conexiones de red, haga clic con el botón derecho del ratón en el adaptador de red pública cuyo nombre desea cambiar y seleccione Cambiar nombre.
3 Asegúrese de que los adaptadores de red pública y privada aparecen en el orden adecuado para el acceso mediante servicios de red. a En Windows Server, haga clic en InicioBuscar programas y archivos, escriba View network connections (Ver conexiones de red). Haga clic en Ver conexiones de red en los resultados de la búsqueda. b En la ventana Conexiones de red, haga clic en Organizar Diseño Barra de menús, Avanzado y seleccione Configuración avanzada. c Seleccione la ficha Adaptadores y enlaces.
Si los adaptadores de red del nodo no responden a los comandos ping, revise la configuración de la red y luego repita este paso. NOTA: El servidor de seguridad de Windows Firewall está activado de forma predeterminada en Windows Server 2008 R2 SP1, lo que provoca que el comando ping falle con IP estáticas. Deshabilite el servidor de seguridad de Windows para poder ejecutar el comando ping en otros nodos.
Tabla 2-2. Valores de dirección IP en un clúster que utiliza GNS (continuación) Interfaz Tipo Resolución IP virtual del nodo DHCP GNS IP virtual de GNS Estática DNS IP virtual de SCAN DHCP GNS Configuración de un servidor DNS Para configurar un servidor DNS mediante GNS: 1 Configure la dirección VIP de GNS en el servidor DNS: en el DNS, cree una entrada de resolución de nombre para la dirección IP virtual de GNS en las zonas de búsqueda directa. a Abra Administrador de DNS.
c En la ventana Nuevos reenviadores condicionales, introduzca el subdominio de GNS y la dirección VIP de GNS (lo que debe proporcionar durante la instalación de Grid). Ejemplo: clusterdomain.subdomain.com (GNS Sub-domain) 192.0.2.2 (VIP de GNS configurada en el paso 1) d Haga clic en Aceptar. e Reinicie el servicio DNS. Configuración de la resolución de nombres de host Añada entradas de host en el nombre de dominio del archivo %SystemRoot%\system32\drivers\etc\hosts.
En la tabla 2-3 se describen las interfaces, los valores de dirección IP y las resoluciones de un clúster. Tabla 2-3.
10 En la ventana Host nuevo, haga clic en Listo. Por ejemplo: scancluster Host A 192.0.2.1 scancluster Host A 192.0.2.2 scancluster Host A 192.0.2.3 Donde scancluster es el NOMBRE SCAN proporcionado durante la instalación de Grid. NOTA: La dirección IP de SCAN debe ser enrutable y debe encontrarse dentro del rango público.
Habilitación de IPMI Intelligent Platform Management Interface (IPMI) proporciona un conjunto de interfaces comunes para el hardware y el firmware que los administradores del sistema pueden utilizar para gestionar el sistema y supervisar su estado. Con Oracle 11g R2, el software de clúster Oracle puede integrar IPMI para proporcionar compatibilidad con aislamiento de fallos y para garantizar la integridad del clúster.
Acceso a la utilidad de configuración de acceso remoto 1 Encienda o reinicie el sistema. 2 Presione cuando se le solicite tras la POST. Si el sistema operativo empieza a cargarse antes de presionar , espere a que el sistema termine de iniciarse, reinicie el sistema e inténtelo de nuevo. Opciones de la utilidad de configuración de acceso remoto La tabla 2-4 enumera las opciones de la utilidad de configuración de acceso remoto y muestra cómo configurar el BMC en un sistema administrado.
Tabla 2-4. Opciones de la utilidad de configuración de acceso remoto Opción Descripción IPMI en la LAN Activar. Selección de NIC Dedicado. Activa el dispositivo de acceso remoto para utilizar la interfaz dedicada de red que está disponible en la Controladora de acceso remoto. Esta interfaz no se comparte con el sistema operativo del host y enruta el tráfico de administración de sistemas a una red física separada, lo cual le permite quedar separado del tráfico de la aplicación.
Tabla 2-4. Opciones de la utilidad de configuración de acceso remoto (continuación) Opción Descripción Configuración de usuario de LAN Permite configurar el nombre, la contraseña y los privilegios del usuario, y permite el acceso de usuario para Identificación de usuario=2. Acceso a la cuenta Habilitada. Privilegio de la cuenta Defina la cuenta como: Admin. Nombre de usuario de la cuenta Asigne el nombre de usuario de la cuenta.
Configuración de la red
Configuración de un clúster SAS para almacenamientos Dell PowerVault 3 AVISO: Antes de iniciar cualquiera de los procedimientos descritos en esta sección, lea la información de seguridad suministrada con el sistema. Para obtener información adicional sobre prácticas recomendadas, visite dell.com/regulatory_compliance.
Ilustración 3-1. Cableado del clúster SCSI de conexión serie (SAS) y el alojamiento para almacenamiento Dell PowerVault MD32xx Sistemas cliente Red privada Servidor DNS y DHCP LAN/WAN Sistemas PowerEdge Sistema de almacenamiento PowerVault MD32xx Dos alojamientos de expansión PowerVault MD12xx CAT 5e/6 (NIC pública) CAT 5e/6 (NIC Gigabit de cobre) Cables SAS Tabla 3-1.
Tabla 3-1. Interconexiones de hardware del clúster SAS (continuación) Componente del clúster Conexiones Alojamiento para almacenamiento PowerVault MD32xx • Dos cables CAT 5e/6 conectados a la LAN (uno desde cada módulo del procesador de almacenamiento) • Dos conexiones SAS a cada nodo del sistema PowerEdge mediante cables SAS 6/E NOTA: Para obtener más información sobre la interconexión de alojamientos para almacenamiento PowerVault MD32xx, consulte "Configuración del hardware" en la página 321.
6 Si procede, conecte dos cables SAS de los dos puertos de salida de los alojamientos para almacenamiento PowerVault MD12xx a los puertos In-0 del segundo alojamiento de expansión PowerVault MD12xx. NOTA: Para obtener información sobre cómo configurar el alojamiento de expansión PowerVault MD12xx, consulte la documentación del sistema de almacenamiento PowerVault MD12xx en support.dell.com/manuals. Ilustración 3-2.
Instalación del software de almacenamiento basado en host Para instalar el software de almacenamiento basado en host necesario para el alojamiento para almacenamiento PowerVault MD32xx, utilice el soporte multimedia de recursos de Dell PowerVault que se incluye con el sistema.
Para obtener ayuda para instalar controladores en ambos nodos del clúster, consulte la documentación que se suministra con el alojamiento para almacenamiento PowerVault MD32xx y los HBA SAS. Instalación del software de almacenamiento basado en host Instalación del software El soporte multimedia de recursos de PowerVault serie MD32xx contiene software y controladores. En la raíz del soporte multimedia hay un archivo readme.
El soporte multimedia de recursos de PowerVault serie MD32xx ofrece los métodos de instalación siguientes: • Instalación basada en interfaz gráfica de usuario(recomendada): el programa de instalación presenta una interfaz gráfica guiada por un asistente que permite personalizar los componentes a instalar. • Instalación silenciosa: este procedimiento de instalación resulta útil para los usuarios que prefieren crear instalaciones con secuencias de comandos.
Instalación silenciosa Esta opción permite instalar el software en modo desatendido. Para ejecutar la instalación silenciosa en un sistema Windows, realice los pasos que se indican a continuación: 1 Para empezar la instalación con todas las opciones predeterminadas, vaya a la carpeta de Windows del soporte multimedia de recursos y ejecute el comando siguiente: md32xx_install -i silent 2 Para especificar qué funciones se instalarán de forma silenciosa, modifique el archivo custom_silent.
NOTA: Sólo se detectarán las matrices de almacenamiento configuradas con la dirección IP en la misma subred que las estaciones de administración. NOTA: El proceso de detección puede tardar varios minutos en completarse. Si cierra la ventana de estado de la detección automática antes de que finalice el proceso de detección, éste se detendrá. Una vez finalizado el proceso de detección, aparece una pantalla de confirmación. 4 Haga clic en Close (Cerrar) para cerrar la pantalla.
Tareas de configuración inicial Para realizar las tareas de configuración inicial: 1 El nombre de la primera matriz de almacenamiento encontrada se muestra en la ficha Devices (Dispositivos) de la ventana EMW. Para ver una lista de todas las matrices de almacenamiento encontradas en la red local, expanda la ficha Discovered Storage Arrays (Matrices de almacenamiento encontradas) en el panel Device (Dispositivo) de la ventana EMW.
4 Configuración de un clúster iSCSI para alojamientos para almacenamiento Dell PowerVault AVISO: Antes de iniciar cualquiera de los procedimientos descritos en esta sección, lea la información de seguridad suministrada con el sistema. Para obtener información adicional sobre prácticas recomendadas, visite dell.com/regulatory_compliance.
Tabla 4-1.
Configuración del hardware Los clústeres iSCSI de conexión directa están limitados a dos nodos únicamente. Ilustración 4-1.
Para configurar los nodos en una configuración de conexión directa, vea la ilustración 4-1. 1 Conecte un cable CAT 5e/6 de un puerto (NIC o HBA iSCSI) del nodo 1 al puerto In-0 de la controladora RAID 0 en el alojamiento para almacenamiento PowerVault MD32xxi. 2 Conecte un cable CAT 5e/6 del otro puerto (NIC o HBA iSCSI) del nodo 1 al puerto In-0 de la controladora RAID 1 en el alojamiento para almacenamiento PowerVault MD32xxi.
Ilustración 4-2.
Para configurar los nodos en una configuración conmutada, vea la ilustración 4-2. 1 Conecte un cable CAT 5e/6 de un puerto (NIC o HBA iSCSI) del nodo 1 al puerto del conmutador de red 1. 2 Conecte un cable CAT 5e/6 de un puerto (NIC o HBA iSCSI) del nodo 1 al puerto del conmutador de red 2. 3 Conecte un cable CAT 5e/6 de un puerto (NIC o HBA iSCSI) del nodo 2 al puerto del conmutador de red 1. 4 Conecte un cable CAT 5e/6 de un puerto (NIC o HBA iSCSI) del nodo 2 al puerto del conmutador de red 2.
Instalación del software basado en host necesario para el almacenamiento Para instalar el software de almacenamiento basado en host necesario para el sistema de almacenamiento PowerVault MD32xxi, utilice el soporte multimedia de recursos de Dell PowerVault entregado con el sistema de almacenamiento PowerVault MD32xxi. Siga los procedimientos descritos en la documentación del alojamiento para almacenamiento PowerVault MD32xxi, disponible en support.dell.
Configuración de un clúster iSCSI para los alojamientos para almacenamiento Dell PowerVault MD32xxi y MD12xx Configuración del hardware Para obtener ayuda sobre cómo configurar o instalar el alojamiento de expansión PowerVault MD32xxi y PowerVault MD12xx, consulte la documentación de PowerVault disponible en support.dell.com/manuals.
El soporte multimedia de recursos de PowerVault serie MD32xxi proporcionado ofrece los métodos de instalación siguientes: • Instalación basada en interfaz gráfica de usuario (recomendada): el programa de instalación presenta una interfaz gráfica guiada por un asistente que permite personalizar los componentes a instalar. • Instalación silenciosa: este procedimiento de instalación resulta útil para los usuarios que prefieren crear instalaciones con secuencias de comandos.
Instalación silenciosa Esta opción permite instalar el software en modo desatendido. Para ejecutar la instalación silenciosa en un sistema Windows, realice los pasos siguientes: 1 Para empezar la instalación con todas las opciones predeterminadas, vaya a la carpeta de Windows del soporte multimedia de recursos y ejecute el comando siguiente: md32xxi_install -i silent 2 Para especificar qué funciones se van a instalar de forma silenciosa, debe modificar el archivo custom_silent.
5 Configuración de un clúster iSCSI para los sistemas de almacenamiento Dell|EqualLogic serie PS AVISO: Antes de iniciar cualquiera de los procedimientos descritos en esta sección, lea la información de seguridad suministrada con el sistema. Para obtener información adicional sobre prácticas recomendadas, visite dell.com/regulatory_compliance. Terminología de EqualLogic Las matrices de almacenamiento EqualLogic serie PS incluyen tecnología de virtualización de almacenamiento.
Configuración de un sistema de almacenamiento iSCSI EqualLogic Los sistemas host se pueden conectar a la matriz iSCSI EqualLogic PS6010XV a través de un conmutador Ethernet Gigabit estándar de SAN IP. En la ilustración 5-1 se muestra la configuración de red recomendada para una matriz EqualLogic PS6010XV de módulo de control dual. Esta configuración incluye dos conmutadores Ethernet Gigabit 10 Dell PowerConnect, que ofrecen la mayor disponibilidad de red y la máxima amplitud de banda de red.
Ilustración 5-1. Configuración de red recomendada Enlace entre conmutadores de gran amplitud de banda Conmutadores Gigabit Ethernet 10 PowerConnect 8024 Matriz de almacenamiento iSCSI Dell|EqualLogic PS6010XV SAN iSCSI Interfaz de administración En la ilustración 5-2 se ofrece una visión general de la arquitectura de una configuración de Oracle Real Application Cluster (RAC) de muestra con tres matrices Dell|EqualLogic PS6010XV.
Ilustración 5-2.
Un grupo de almacenamiento EqualLogic serie PS se puede segregar en varios niveles en cascada o bloques. El almacenamiento en cascada proporciona a los administradores un mayor control sobre la asignación de recursos de disco. Un miembro sólo se puede asignar a un bloque cada vez. Es fácil asignar un miembro a un bloque y mover un miembro entre bloques sin influir en la disponibilidad de los datos.
En la tabla 5-1 se presenta una configuración de volúmenes de muestra. Tabla 5-1.
Configuración de redes iSCSI NOTA: Se recomienda configurar las interfaces de red del host para el tráfico iSCSI de modo que utilicen el control de flujo y la trama gigante para obtener un rendimiento óptimo. Para definir el control de flujo y la trama gigante, realice los pasos siguientes: 1 Haga clic en InicioBuscar programas y archivos, escriba Ver conexiones de red. 2 Haga clic en Ver conexiones de red en los resultados de la búsqueda.
5 En la ventana Installation Type (Tipo de instalación), seleccione Typical (Típica) y haga clic en Next (Siguiente). NOTA: Si se muestra la ventana El servicio de iniciador iSCSI de Microsoft no se está ejecutando, haga clic en No. 6 En la ventana Ready to install the components (Preparado para instalar los componentes), haga clic en Install (Instalar).
12 Haga clic en Finish (Finalizar). NOTA: Se recomienda establecer el valor predeterminado de Load Balancing (Equilibrio de carga) en Least Queue Depth (Menor profundidad de cola). 13 Repita del paso 1 al paso 9 en los demás hosts del clúster. Configuración de Microsoft iSCSI Initiator 1 Haga clic en Inicio y escriba Iniciador iSCSI en el cuadro de búsqueda. Haga clic en Iniciador iSCSI en la lista de resultados.
5 En la ventana Conectarse al destino, seleccione tanto Agregar esta conexión a la lista de destinos favoritos como Habilitar múltiples rutas y haga clic en Opciones avanzadas. 6 En la ficha General de la ventana Opciones avanzadas, realice las configuraciones siguientes: a Seleccione Iniciador iSCSI de Microsof en el menú desplegable Adaptador local. b Seleccione una dirección IP del iniciador iSCSI en el menú desplegable IP de origen.
6 Configuración del almacenamiento de base de datos en el host AVISO: Antes de iniciar cualquiera de los procedimientos descritos en esta sección, lea la información de seguridad suministrada con el sistema. Para obtener información adicional sobre prácticas recomendadas, visite dell.com/regulatory_compliance. Oracle Real Application Clusters (RAC) requiere una lista ordenada de procedimientos.
3 Expanda Almacenamiento y haga clic en Administración de discos. a Haga clic con el botón derecho del ratón en el volumen y haga clic en En línea. b Haga clic con el botón derecho del ratón en el volumen, seleccione Inicializar y en la ventana Inicializar disco, haga clic en Aceptar. c Repita del paso a al paso b para todos los volúmenes. NOTA: Este procedimiento garantiza que los discos se configuren como básicos. 4 En la ventana Administración de discos, compruebe que aparezcan cuatro discos.
Habilitación de la opción de montaje automático para los discos compartidos 1 En el nodo 1, haga clic en Inicio Ejecutar. 2 Escriba cmd y haga clic en Aceptar. 3 En el indicador de comandos, escriba diskpart y pulse . 4 En el indicador de comandos de DISKPART, escriba automount enable y pulse . Aparece el mensaje siguiente: Automatic mounting of new volumes enabled (Montaje automático de nuevos volúmenes habilitado). 5 En el indicador de comandos de DISKPART, escriba exit y pulse .
3 Escriba list disk y se mostrará la siguiente tabla: Disk ### Disk Disk Disk Disk 0 1 2 3 Estado Tamaño Free Dyn GPT En En En En 37 GB 2048 MB 100 GB 200 GB 0 MB 2048 MB 100 GB 200 GB - - - - - - - - línea línea línea línea 4 Escriba select disk [disk #] para el disco de destino. NOTA: En los pasos siguientes se explica cómo crear particiones y discos lógicos para el disco MBR. 5 Escriba create partition extended y pulse .
Índice A S ayuda asistencia de Dell, 302 asistencia de Oracle, 302 SAS configuración del clúster, 319, 329, 339, 349 software MPIO, 323 C soporte multimedia de recursos PowerVault MD3000, 323 cableado clúster iSCSI, 331 conmutador PowerConnect, 340 T H término bloque, 339 grupo, 339 miembro, 339 volumen, 339 help, 302 M Modular Disk Storage Manager, 323 V volúmenes, 343 N NIC asignaciones de puerto, 303 Índice 353
Índice
