AIX 11204 root.sh 无法启动haip

最新推荐文章于 2022-04-05 14:11:52 发布
最新推荐文章于 2022-04-05 14:11:52 发布
阅读量1.3k 收藏 3
点赞数 2
分类专栏： RAC
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lixora/article/details/51726642
版权

os：AIX 5100-12-09

RAC DB：  11204  


在gi 安装最后一步 ，在节点一运行 root.sh 时 发现节点1的haip 无法启动；

检查 orarootagent_root.log  日志 

[1] + Stopped (SIGTSTP)        vi /oracle/gi/11.2.4/log/server7/agent/ohasd/orarootagent_root/orarootagent_root.log


2016-06-14 14:51:50.692: [ USRTHRD][3086]{0:0:77} Waiting for HAIP work thread to cleanup ARP

2016-06-14 14:51:52.692: [ USRTHRD][3086]{0:0:77} timeout to wait thread to cleanup ARP
2016-06-14 14:51:52.692: [ USRTHRD][3086]{0:0:77} Thread:[NetHAWork]start {
2016-06-14 14:51:52.692: [ USRTHRD][3086]{0:0:77} Thread:[NetHAWork]start }
2016-06-14 14:51:52.692: [ USRTHRD][3857]{0:0:77} [NetHAWork] thread started
2016-06-14 14:51:52.693: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:52.693: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:52.693: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err bpf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:52.693: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:52.694: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:52.694: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:52.697: [ USRTHRD][3086]{0:0:77} use all detected INF
2016-06-14 14:51:52.793: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:52.794: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:52.794: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:52.894: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:52.895: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:52.895: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:52.994: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:52.994: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:52.994: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.094: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.094: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.094: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.193: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.194: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.194: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.294: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.295: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.295: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.394: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.394: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.394: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.493: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.494: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.494: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.593: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.594: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.594: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.694: [ USRTHRD][3857]{0:0:77}  Arp::sCreateSocket {
2016-06-14 14:51:53.694: [ USRTHRD][3857]{0:0:77} failed to create arp
2016-06-14 14:51:53.695: [ USRTHRD][3857]{0:0:77} (null) category: -2, operation: pcap_open_live, loc: bpfopen:0,os, OS error: 9, other: err b
pf_load: can't stat /dev/bpf0: Socket is not connected, ifname en2
2016-06-14 14:51:53.695: [ USRTHRD][3857]{0:0:77} (:CLSN00130:) category: 1, operation: ^R^羐? loc: ^蜡? OS error: 0, other: ^P
2016-06-14 14:51:53.695: [ USRTHRD][3857]{0:0:77} [NetHAWork] thread hit exception Agent failed to initialize which is required for HAIP proce
ssing
2016-06-14 14:51:53.695: [ USRTHRD][3857]{0:0:77} [NetHAWork] thread stopping
2016-06-14 14:51:53.695: [ USRTHRD][3857]{0:0:77} Thread:[NetHAWork]isRunning is reset to false here
2016-06-14 14:51:54.697: [ USRTHRD][3086]{0:0:77} use all detected INF
2016-06-14 14:51:54.698: [ USRTHRD][3086]{0:0:77} HAIP:  Moving ip '' from inf 'en2' to inf 'en2'
 

关于bpf：

6.过滤数据包
我们抓到的数据包往往很多，如何过滤掉我们不感兴趣的数据包呢?
几乎所有的操作系统(BSD, AIX, Mac OS, Linux等)都会在内核中提供过滤数据包的方法，主要都是基于BSD Packet Filter(BPF)结构的。libpcap利用BPF来过滤数据包。


MOS 信息查找：

Bug 16445624 - AIX: HAIP fails to start

Issue: HAIP fails to start if rootscript (root.sh or rootupgrade.sh) is executed via sudo (not as root userdirectly) or if bpf device is not functionin properly


Symptom:

  • Output of root script:

CRS-2672: Attempting to start'ora.cluster_interconnect.haip' on 'racnode1'
CRS-5017: The resource action "ora.cluster_interconnect.haip start"encountered the following error:
Start action for HAIP aborted
CRS-2674: Start of 'ora.cluster_interconnect.haip' on 'racnode1' failed

  • $GRID_HOME/log/<hostname>/agent/ohasd/orarootagent_root/orarootagent_root.log

2010-12-04 17:19:54.893: [ USRTHRD][2084] {0:3:37} failedto create arp
2010-12-04 17:19:54.893: [ USRTHRD][2084] {0:3:37} (null) category: -2,operation: ioctl, loc: bpfopen:2,os, OS error: 14, other:

OR

2011-09-29 16:44:46.771: [ USRTHRD][3600] {0:3:14} (null) category: -2, operation:open, loc: bpfopen:1,os, OS error: 2, other: 

OR

2011-09-29 16:44:46.771: [ USRTHRD][3600] {0:3:14} (null) category: -2,operation: open, loc: bpfopen:1,os, OS error: 22, other: 

OR

2011-09-29 16:44:46.771: [ USRTHRD][3600] {0:3:14} (null) category: -2,operation: open, loc: bpfopen:1,os, OS error: 22, other: 

OR

 

2012-04-21 12:36:43.951: [ USRTHRD][2572] {0:0:2} (null)category: -2, operation: SETIF, loc: bpfopen:21,o, OS error: 6, other: dev/dev/bpf0, ifr en2  

OR 


Various other OSerror code can be seen as well

Solution/Workaround:

It's known on AIX and Solaris that command executed via sudo etc may not have full rootenvironment, which could cause HAIP startup failure. 

The solution is to obtain and apply patch 16445624 on AIX.

The workaround is to execute rootscript (root.sh or rootupgrade.sh) as real root user directly.

If root script already failed, try oneor all of the following:

 - reboot the node

 - execute"/usr/sbin/tcpdump -D" as root user, if the timestamp of the bpfdevice didn't get updated, delete the device and re-run the same "tcpdump-D" command

Before re-running root script, verifywhether the following exists and the timestamp is updated

l

s -ltr /dev/bpf*
cr--------   1 root    system       42,  0 Oct 03 10:32 /dev/bpf0


但是root.sh 脚本却是运行为成功，但是发现节点1私网网卡上没有 生成169.254.XX.XX 网段的IP地址；

使用 tcpdump 命令可以在系统上 /dev/目录下生成 bpf* 设备。

虽然节点1，root.sh 运行有一个失败的问题点；但是最重要的脚本rootcrs.pl  的运行日志了全部都是成功的为唯独无法启动haip 资源这个命令没有执行成功；

但是这个不碍事：

/oracle/gi/11.2.4/bin/crsctl modify res ora.cluster_interconnect.haip -attr "ENABLED=1" -init
/oracle/gi/11.2.4/bin/crsctl start resource ora.cluster_interconnect.haip -init                                                                 


处理方法：

节点1，2上去分别执行 usr/sbin/tcpdump -D 命令；

节点一手动启动 haip 资源；

然后再在节点2运行root.sh 脚本；


其实还有另外一个办法，这个问题其实是oracle haip的一个bug 导致，那就禁用haip不就没这个问题了么；

就算节点2root.sh脚本执行失败，手动修改节点1,2 的haip 启用属性：

/oracle/gi/11.2.4/bin/crsctl modify res ora.cluster_interconnect.haip -attr "ENABLED=0" -init

然后在运行root.sh脚本，gi 各个节点间的通信还是可以不通过haip来完成；gi 任然可以正常运行；




lixora
关注
专栏目录
Oracle 11gR2(11.2.0.4.0)搭建RAC时root.sh执行脚本分析
a743044559的专栏
10-12 2180
在搭建RAC的时候，最后通常会执行两个脚本，第二个脚本比较重要也是最容易出错的地方。 先了解oracle11g r2集群各个组件： /u01/app/oraInventory/orainstRoot.sh /u01/app/11.2.0/grid/root.sh 先看看root.sh脚本内容：[root@node2 app]# more /u01/app/11.2.0/grid
[Oracle 11g r2(11.2.0.4.0)]集群HAIP介绍
a743044559的专栏
10-26 5841
首先看一下11g rac集群各服务依赖关系： 对于Oracle集群，私网通信是非常重要的，因为节点和节点之间的通信绝大部分都是要通过私网来实现的。 私网通信基本上可以分为两种： 第一种是集群层面之间的通信； 第二种是数据库实例之间的通信。 第一种通信（例如： 节点间的网络心跳） 的主要特点是持续存在、实时性要求高，但是数据量比较小，所以通过TCP/IP协议传递就可以了。 而
root.sh Fails to Start HAIP as Default Gateway is Configured for Private Network VLAN (文档 ID 1366211
wonderful041的专栏
05-31 1320
Applies to: Oracle Server - Enterprise Edition - Version 11.2.0.2 and later Information in this document applies to any platform. Symptoms Installing 11.2.0.2 Grid Infrastructure on 2 node RAC cl
oracle如何启用和禁用haip
wgz7747147820的博客
04-05 366
https://www.modb.pro/db/14200
oracle gi 禁用 haip
一名数据库爱好者的专栏
05-30 2100
os: centos 7.6 db: oracle 19.3 安装 gi 时 会创建 169.254.x.x 的 haip,云环境下无法 ping 通另一个节点的169.254.x.x,所以要禁用 haip. 最简单的方法是在运行 root.sh 前,设置个变量 # export HAIP_UNSUPPORTED=YES 常规设置 # su - grid $ oifcfg getif eth0...
11.2.0.4 aix下运行第二个节点root.sh报错处理
10-19 460
第二个节点运行root.sh报错如下 Entries will be added to the /etc/oratab file as needed by Database Configuration Assistant when a database is created Finished running generic part of root script. Now p...
11gR2私有ip修改错误导致crs无法启动解决方法
cuanhuai4935的博客
06-01 545
--oifcfg使用帮助 [root@rac1 grid]# oifcfg -help Name: oifcfg - Oracle Interface Configu...
oracle 11.2 rac 更改子网掩码引起的haip无法启动的处理过程
ylqiu1028的博客
07-21 2536
今天在公司的微信群里hc-edu tech-support里边一个老学员说他们的rac数据库不能启动，下边是处理的过程 1.使用crsctl stat res -t -init如下        看上边haip没有起来，haip是oracle11.2rac专门为私有网络配置的一个高可用，就是私有网络卡可以2个，oracle会出现一个169的ip，然后，如果一个网卡出现问题，这个
Oracle RAC技术随笔2
a743044559的专栏
09-25 548
资源管理方式1 . 10g对于10r2版本，资源管理工作由CRS(Cluster Ready Service)管理，通过crsd守护进程来启动。 可以通过crs_stat-t -v 来查看管理的资源列表：VIP 资源Cora. ＜ 节点名＞.vip） ONS资源（ora. ＜ 节点名＞.ons） GSD资源（ora. ＜节点名＞.gsd） ASM实例资游、（ora.. ASM＜ 节点编号＞.asm
11R2 RAC新功能之HAIP
我的Oracle DBA之路
06-09 5276
11R2 RAC新功能之HAIP  --11gR2起Grid infrastructure引入资源ora.cluster_interconnect.haip，不需要第三方技术便可实现redundant interconnect，最多支持4个private network，提供load balance & failover功能； --Gird会自动选取169.254.*.*作为HAIP ad
oracle 11gR2组件 OHAS介绍
icetea的博客
11-09 1041
集群启动方式 资源管理方式 ohasd管理的资源
RAC11gR2Grid启动顺序及启动故障诊断思路
babymouse1212的博客
05-06 5680
【Oracle】RAC11gR2Grid启动顺序及启动故障诊断思路 转自：http://www.2cto.com/database/201605/507269.html 从11gR2开始，Oracle RAC的架构有了比较大的变化，集群层面相交于之前的版本有了比较大的变动，原来的rac架构基本上属于cssd、c
oracle12C要求aix系统版本,oracle 12c rac 在aix 7.1 上安装需要注意的IOCP问题
weixin_35986494的博客
04-04 413
安装环境oracle 12.1.0.2 + aix 7.1在做安装检查时，提示以下报错ERROR:PRVE-10167 : I/O Completion Ports (IOCP) device status did not match therequired value on node "tst12cdb2". [Expected = "Available"; Found ="Defined"]P...
Linux 双网卡绑定（Linux Bonding）总结
Robin's Home
04-06 6360
1 介绍 Linux bonding将多个物理网卡绑定为一个逻辑网卡。逻辑网卡成为Master，绑定的物理网卡成为Slave。 需要bonding内核模块和 ifenslave工具，有些Linux发行版本默认并不编译bonding，需要重新编译内核。可喜的是，SUSE10 SP2版本默认自带了bonding模块和ifenslave工具，SUSE10 SP2的bonding版本为V3.0.3. ...
Linux及AIX下的抓包工具及使用注意事项
wswokao的博客
04-16 1792
最近工作遇到非Web、CS端的系统，无从下手，后查阅资料使用后在此记录： Linux（RedHat,Centos） 一般系统自带tcpdump ，若未安装使用 yum install tcpdump 进行安装。 常用用法如下： tcpdump -i lo 抓取本地数据 tcpdump -i eth1 host 192.168.0.1 抓取指定经过eth0网卡,IP为192.168....
AIX iptrace linux tcpdump抓包
Here I Am
10-23 1246
1.抓包 iptrace -d 22.188.20.137 -p 51017 -b trace.log 2.杀掉抓包进程 kill -9 进程号 3.解析抓包日志 ipreport trace.log > t.log 4.查看日志 vi t.log ----------------------------- linux下可使用tcpdump抓包 tcp...
HAIP异常，导致RAC节点无法启动的解决方案
m0_38048955的博客
03-31 1444
一个网友咨询一个问题，他的11.2.0.2 RAC(for Aix),没有安装任何patch或PSU。其中一个节点重启之后无法正常启动，查看ocssd日志如下： 1 -08-09 14:21:46.094: [ CSSD][5414]clssnmSendingThread: sent 4 join msgs to all nodes-08-09 14:21:46.421: [ CSSD][4900]clssgmWaitOnEventValue: after CmInfo State val
Oracle 11g RAC私有网络haIP配置与注意事项
当GI（Grid Infrastructure）集群启动时，会根据活跃的私有网络适配器数量动态分配haIP地址，即使有多余的适配器，haIP的数量也不会超过4个。 在配置过程中，需要特别注意以下几点： 1. haIP地址通常采用169.254.*....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值