OuYangYuXi的博客

惠州石湾一个朋友反馈一台DELL PowerEdge T130 塔式服务器故障为 通电后无法开机，前面同时亮3个故障灯。闪电灯，电压灯，高温灯。3：断电拔掉电源线，长按开机按钮1分钟，再通电开机故障依旧，1：这种情况建议大家更换一个同型号的电源进行故障排除。4：隔天更换一个同型号的T130电源，测试开机正常。2：朋友把该服务器硬件最小化测试故障依旧。

佛山大旺老客户一台Lenovo Storwize v3500存储前段时间更换了一个node1，过了大概一个来月不到发现有一个硬盘亮黄灯，但是有一个奇怪的现象，在存储的web管理界面中看到该槽位的硬盘状态为联机，但是右键该硬盘属性查看状态为脱机。6：不出意外的话马上就要有意外了，硬盘指示灯和闪烁都正常，但是在web界面中始终没有识别到这个槽位的盘，12个盘始终都是11块。7：由于存储在使用，不太好安排做停机操作，也没有多余的位置用于测试硬盘是否有故障。1：硬盘邮寄到客户现场，协助用户进行更换该故障硬盘。

1：河南用户一台DELL R740 3块2.4T硬盘组的RAID5，早期坏了一个盘没有及时更换，这次又坏了一个，导致整组RAID5处于数据丢失的状态，9：服务器遇到这种多个硬盘故障的情况下，建议大家硬盘都标号，保留故障现场，尽量不要动故障硬盘。2：该服务器装的是VMware ESXI 6.7，用户把3块硬盘寄过来进行数据恢复，7：经过对数据分析和重组，成功将该VMFS卷中的5个虚拟机文件全部恢复，5：发现3号盘硬盘有坏道，时而能读时而无法访问到该盘，6：经过工程师对硬盘的处理，将硬盘全部做镜像出来，

大概故障现象是 插上电源线 按卡机按钮无响应，无法开机，无显示输出，工程师到现场检修，经过idrac中日志分析，发现为因为硬盘背板短路导致的无法开机，经过更换该配件后，服务器通电按开机按钮供电正常，显示屏正常画面输出，这款机器也是一款非常强劲的服务器，最大支持4颗CPU，但是只有2U的高度，跟联想的SR850属于同级别对手。最近接修到一台东莞用户的DELL PowerEdge R840 服务器因为意外断电后，无法正常开机的问题，当然更重要的是各位兄弟有啥服务器相关的问题 请随时来信。

故障情况是该学校it管理员这一天看到这台SR850服务器前面板亮了一个黄灯，但是目前系统运行正常，出于安全考虑，工程师跟用户协商先通过远程的方式进服务器的XCC管理口中查看和确认故障日志报错信息。经it跟领导反馈后，领导意思趁这次处理硬盘故障安排关机的时间，顺便把CPU和内存都扩展一下，这款SR850服务器单机最大支持4颗物理CPU，经过协商增加一块3-4号CPU的扩展板，和2颗5118处理器，每颗处理器配128G内存，升级完CPU和内存后 使用效果确实是有很大的优化。加强服务器的计算性能；

这类企业级的服务器产品故障问题 涉及到重要数据的服务器，不建议大家自己动手折腾，折腾好了无功，折腾不好有过。专业的事交给专业的人和团队。6：虽然故障比较明显了，但是因为这台机器上安装了五六个PCI设备，以及安装了4个处理器和8条内存，建议大家还是进行硬件最小化测试排除一下多余的部件可能引起的故障；7：最后最小化测试故障依旧，经过沟通，领导同意现在直接更换配件处理，大概1小时左右的配件更换和bios调试设置，成功进入到cnetos7操作系统。2：故障：能通电，开机按钮快闪，随后叹号警告灯常亮。

一位山东潍坊做数据恢复的同行朋友从网络找到我们，反馈说是他的客户送修一台DELL MD3800F的存储给他做数据恢复，起因是用户自己给这个存储除尘，然后存储开机通电后发现有2个硬盘没插好，然后开机状态下又把硬盘都重新拔插了一遍。经过收集存储日志分析，决定对gz这个磁盘组入手恢复，大约1小时左右，成功将该存储磁盘组和虚拟卷恢复完成，各位如果遇到戴尔系列存储问题，随时联系我们协助排查和处理。故障问题：存储除尘后通电开机，发现有物理硬盘没有插到位，用户带电拔插了多块物理盘，导致关连的磁盘阵列掉线，卷失败；

经过双方友好协商，更换1个控制器加恢复异常的控制器，合同搞定后由工程师远程通过技术手段将有异常的控制器进行恢复操作，经过大概半小时左右，单控正常拉起业务。这款存储在政府，医疗，教育，制造行业占有率还比较高，所以时常会有来自全国各地的朋友找到我们咨询和解决类似V3500 V3700 V5000 V7000存储的故障问题。经过工程师对存储日志的分析，有一个控制器已经无法识别（确认故障），另外一个控制器也存在异常，但是因为这台存储是该单位PACS业务，比较着急临时恢复业务。报修单位：黑龙江佳木斯某某医院。

早上接到客户反馈说公司一台DELL R730服务器一大早就挂了，导致整个产线停产，易飞ERP系统无法使用，经过工程师跟用户了解服务器故障前后的情况，和服务器目前故障的大致情况后，工程师带上公司R730服务器备用配件到用户现场进行现场检修，经过20来分钟的主板更换时间，见证奇迹的时刻又要来了，通电后开机正常点亮，但是新的问题又出现了，开机卡在自检左上角出现F2 F10 F11的界面卡住不能继续往下自检了，4：调换单U，单内存，背板断开，最小化测试，故障依旧。1：服务器通电正常，开机按钮通电，主板通电，

看了一下网上关于DELL MD系列存储故障处理的文档还是比较少的，最近处理了一些关于MD系列存储的问题，稍微整理整理就分享一下，各位喜欢摸索的朋友可以稍稍做些参考，当然如果想寻求外援的也可以快速的找到合适的人。周六早上带控制器到客户现场，不停机更换控制器 ，更换控制器后可以观察控制器上的LED灯和控制器上的指示灯以及通过管理软件中查看更换的控制器的状态是否恢复。工程师通过远程到存储管理软件上检查后，基本确定这个0号控制器坏了需要更换，故障的硬盘也需要更换。2：0号控制器中的电池故障不可用。

佛山禅城一同行客户通过CSDN找到我们，经过对接，确认好服务器型号，和服务器大致故障，跟客户仔细的分析了引起故障大致的原因和解决的方式方法后，经过商务沟通，该同行考虑由我们安排工程师带配件到佛山禅城电脑城同行那里现场维修。6：客户带回去后工程师再通过微信视频的方式协助用户导入源raid信息，并测试bios中正确的启动模式和启动文件，Zui后调试固定好启动引导文件。由于用户送修过来的服务器没有带硬盘过来，服务器正常开机后，面板警告灯自动消除，BIOS和UEFI固件升级到新版本，RAID卡信息识别正常。

接到一台来自广东清远市清城区某水利大坝国企单位报修一台IBM System x3650 M4服务器无法开机的故障，分享给大家，同时也方便有需要的朋友能及时找到我们快速解决服务器问题。增值服务：由于该用户机房有多台IBM X3650 M4服务器，所以用户经过商议考虑把坏板由工程师带回进行芯片级故障检修，修好后备用。维修结果：更换该服务器主板，调试好bios和raid，手动添加UEFI启动项，测试进系统成功。服务器故障现象：机器能通电，开机按钮慢闪，无法正常开机，叹号灯亮黄灯，Board黄灯告警。

广州南沙 番禺 天河 越秀 白云 新塘联想服务器故障24H技术服务，联想服务器无法开机，BOARD传感器故障问题，服务器黄灯问题，

有几处我要说明下，vSAN的磁盘组设计是每台服务器2个磁盘组，每个磁盘组使用一块800G 三星PM1645做缓存，7块1.8TB SAShdd, 服务器最多可以支持3个这样的磁盘组，需要的时候可以在线升级.客户的需求是新建一个vSAN集群，替代多年前建设的旧环境，旧环境是用Dell R720, 版本是6.5，项目对预算有限制，希望在预算内完成，有比较好的性价比。可以看到4台服务器组成的集群，在较低的延迟下跑出了近13万IPOS的性能，应该算是比较理想的得分了。致敬前辈vExpert。

现在混合，全闪存储已经不少见，大大缓解了IOPS的瓶颈，但很多业务对存储的性能仍然十分饥渴，还不时可以看到存储性能导致的虚拟机变慢，做好存储的基准测试，是这些分析的基础。这就是为什么在系统交付前，应该提供存储的基准测试，弄清楚存储的能力范围，这样当出现性能问题的时候，可以准确地判断是否和存储资源相关。这是个很棒的工具，适合任何场景，可惜的是Broadcom似乎不再提供这个fling的支持，已经有段时间不更新，软件存在BUG，我做了调试，重新封装了虚拟机，稍微增加些手工操作，还是可以得到完成测试；

经过硬件升级和系统重做，联想SR588服务器的性能得到了显著提升。整体而言，服务器的升级满足了公司的业务需求，为未来的业务扩展提供了坚实的硬件基础。通过对联想SR588服务器的固态硬盘和内存的升级，以及RAID阵列的重新配置，我们成功地提升了服务器的性能和可靠性。这一案例展示了硬件升级对于提升企业IT基础设施的重要性，同时也证明了合理规划和执行硬件升级项目能够有效地支持企业的业务发展。升级后，服务器性能得到显著提升，同时通过重新配置RAID阵列和操作系统的重新安装，确保了系统的稳定性和数据的安全性。

处理过程：工程师通过PERCCLI64导出并查看分析RAID日志，确认故障物理盘的故障顺序，经过技术处理，RAID6阵列状态从开始的offline状态恢复到Degraded，此时可以暂时看到丢失的数据，通过检测剩下的其他盘中还有1个盘也是有坏道，经过跟用户商务层面的沟通协商，先把其中一个故障的盘换新盘去同步数据。经过1天的等待这个盘同步完成，raid恢复到正常状态，接下来的示器就是继续替换剩余的故障盘进行同步修复，，，，，，如下图所示。如果运气好能修复原RAID的话那是方便又快捷重要的是省钱省力省时间。

当我们发现服务器出现黄灯后，我们就可以通过登录idrac9管理口进去排查和确认具体故障问题，从而对症下药，但是往往不是所有的朋友都懂这些排查操作，有一句话这么说的，专业的事一定要找专业的人来处理，这样往往能事半功倍和更具保障，对于服务器这类承载着核心数据的设备来说，如果是自行处理或者不专业的人处理往往会出现不可预料的灾难性问题，例如我们就碰到很多用户自行处理硬盘RAID问题，导致一不小心把RAID信息删除了。这都是非常致命的问题。图二：是DELL R740服务器后视图（以及各种接口）

这个机器同行卖给用户说是保修5年的，应该是买了2年续保服务，这个指示灯其实看起来也没有多大问题，只是仔细看的话就会看到上方有点黄灯，之所以戴尔售后通过TSR日志查不出来问题，是因为这种 i 灯变色根本不会记录到TSR日志中，经过我们到现场检测，IDRAC日志正常，系统状态正常，这个面板与主板接触的触脚也都正常，最近处理了一个比较奇葩的故障问题，据说是客户报修了戴尔厂家都没有找到问题和解决方法。因为对接这个用户的原厂销售跟我们很熟，所以向用户推荐了我们协助看能不能处理。不明白的朋友可以同我们进行沟通。

从上图中可以看到，主板，网络子卡，用于安装RAID卡的PCI扩展板都有烧焦的痕迹，这种情况下经过跟用户的商务协调，最终更换主板，网卡，PCI板，配件换好后开机测试，检测RAID卡是否正常，以及物理硬盘和阵列磁盘的状态是否正常，因为客户最在意的是硬盘中的数据和硬盘是否是好的，还好经过检查硬盘和阵列以及系统数据都正常，好的 接下来就交给我了，打开盖子看到的画面我都吓了一跳，在服务器主板后面网络子卡的位置一团烧的乌漆嘛黑的焦炭，上图上图。

这个机器用户是自行送修过来的，因为他们工厂离我们售后服务中心也就20来公里，后来听用户说他们是先拿到了东莞虎门电子城去检修了，人家跟他说电源坏了没有配件搞不了（经过检测不是电源问题），后面才又送修到我们这。送到后经过工程师检测，定位到为背板问题，现场更换相关配件后机器可正常点亮，但是无法进系统，经过检测为机器意外断电后导致BIOS复原了，调整bios相关设置后 重启可正常进入Windows 2012R2.如果刚好你也是因为服务器问题看到这篇文章，恭喜你找对人了。

首先就是有一款板没有板载网口，是需要单独插PCI网卡使用，有板载网口和没板载网口的2款主板上的PCI槽位也是有区别的，而另一款呢有板载2个Emulex万兆的网口，但是如果你的系统是2008-2012R2的， 那么安装这个万兆网口的驱动也是挺折腾的一件事，你在官网下载好驱动后还不能直接安装，安装时候会提示你需要KB2846340这个补丁，但是这个补丁呢微软补丁库已经搜不到了，并且能提供技术支持。值得注意的是，很多人应该不知道这款3750 M4服务器有两款不同款式的主板吧，而且这两款板买错的话会比较的麻烦，

远程问题诊断：接到报告后，冠峰技术支持团队与佛山分厂的IT管理员进行了远程会话，以了解更多细节并尝试进行初步诊断。在确认问题已得到解决之后，他与佛山分厂的IT管理员进行了总结和培训，提供了一些维护建议和预防措施，以减少类似故障的再次发生。故障报告与联系：当服务器发生故障时，佛山分厂的IT管理员立即报告了问题，并联系了冠峰售后支持团队。服务结束：在服务器故障得到解决且经过一段时间的稳定运行之后，冠峰技术支持团队进行了后续跟进，以确保服务器正常运行，并进一步提供任何必要的支持和服务。

经过这么一操作，RAID5成功导入，测试进入系统正常，业务复原。服务器故障问题：无法开机 面板叹号黄灯，小面板board故障亮灯。响应时效：当天工程师带配件到现场检修并恢复操作系统和业务系统。故障服务器型号：ibm system x3550 m4。

位于以 RAID 模式访问的驱动器上的数据与从非 RAID 模式访问的数据不兼容。禁用 RAID 模式时找不到 HPE 动态智能阵列 B140i 驱动器。将驱动器移动到新服务器或 JBOD 后，智能阵列控制器不显示逻辑驱动器。HPE ProLiant Gen8 和 Gen9 服务器。Array Controllers 阵列控制器。Environment 环境。HPE 智能存储电池配置错误。HPE 智能存储电池故障。

这一天一位阳江的老师经其他学校老师介绍推荐对接我，说他们学校有一台ibm x3850 x6服务器出问题了，老师大致跟我描述了一下这台服务器发生故障的前后状态以及他在液晶屏上看到的报错信息，以及服务器前面板显示的叹号橘色警告灯⚠，跑仓库首先确认故障的配件是否有现货。果然啊，开机正常显示屏有显示，这基本上已经完工了一大半，接下来无非就是确认硬盘，确认RAID信息，测试进系统，测试业务是否正常，结果当然是以最快的速度恢复了学校的业务连续性，尽所能的减少服务器宕机给学校带来的风险。

河源市源城区某财政单位2台IBM System x3650 M4 服务器黄灯故障无法开机，面板报错BOARD黄灯警告，如上图所示，这位客户通过单位朋友介绍，报修2台单位的IBM服务器，冠峰工程师接到客户报修信息后，售后小哥随即联系客户，通过双方沟通中了解到，这次2台3650 M4服务器发生故障的原因是因为该片区域计划停电几个小时，但是由于单位的UPS上线年限已有三五年，单位管理人员以防UPS无法支撑到市电来电，所以是正常关闭了局里的十来台服务器，包括IBM，戴尔，联想各品牌的业务应用系统服务器。

用户诉求：经双方商务协商，工程师安排带该型号服务器配件当日下午出发到客户现场进行检修；用户反馈：在未与冠峰取得联系之前，用户自行联系了该服务器厂商售后，用户表示厂商上门按2800/小时算，还不包含配件的费用，用户说着实被天价吓到了，倒是像冠峰公司这类第三方服务中心，物美价廉，配件齐全，专ye灵活更符合大部分企业的需求。本次故障处理中，冠峰售前工程师迅速响应客户需求，及时到达现场，快速定位故障，对服务器进行拆装调试，最终解决了客户的问题。以上是工程师现场处理故障实拍图，以供大家参考。

由于工程师出发前跟用户进行了故障排查沟通，所以也是有带相关配件到现场，最后通过更换该服务器的IO模块后恢复正常，工程师的快速响应赢得客户的极力认可！冠峰工程师到现场后首先是查看上图中液晶屏上的报错信息，可以看到的是第一个报错为：Power fault 02h这个故障，第二个为Sensor Planar VRD has transitioned to non-recoverable，从服务器液晶屏中暂且看到2个报错，服务器维修级别：经双方协商沟通 当天安排工程师带配件到现场进行修复。

处理结果：通过分析IDRAC故障信息后更换相关部件可以正常点亮，检查硬盘以及RAID正常，进Win2012R2系统正常。DELL PowerEdge R540服务器故障维修案例：（看到文章就是缘分）既然看到这篇文章了，如果你也遇到这类问题的话不妨交流一下。故障机型：DELL R540服务器。维修方式：用户送修到冠峰售后中心。客户名称：东莞市某街道管理中心。

一般来说控制器最后处理，先把前面的7号硬盘给换了先同步完成，换硬盘稍微比较简单一些，正常情况下可以直接热拔插更换就完事，下图就是更换完7号盘后 RAID卷在同步中，到此DELL MD3600F存储硬盘故障，控制器电池故障，控制器故障均全部解除，看到这篇文章的你是不是刚好也遇到类似问题呢。我们期待为您排除万难。电池更换完毕，接下来处理控制器问题，本次由于业务无法安排时间停机，所以经过跟用户商量后决定在线更换控制器，关闭卷缓存，确认卷最优路径分配，MD3600f 系列存储阵列介绍。2：控制器电池fail。

IBM Storwize v3000 v5000 v7000 关机重启后出现故障代码578，T3存储底层系统恢复

IBM 联想 Storwize v系列存储常见的节点故障587代码，一般是设备意外关机或者重启后会出现该问题。说明：启动时，节点无法读取其状态数据。如果发生这种情况，它应该会自动重新添加到集群系统中。但是，如果它在 60 秒内未加入集群系统，就会产生此节点错误。此错误是严重的节点错误，需要用户执行操作，然后节点才能变为可加入集群系统的候选节点。.........

今天给大家分享的是深圳.福田区一个电商客户公司一台IBM Storwize v3500存储控制器故障从远程诊断 收集日志 分析结果的实际案例，如图所示通过存储管理口登陆进去后直接看到少了一个控制器，经过工程师分析日志后判定为该控制器损坏，接下来更换控制器配件，标准套件的控制器不带子卡和电池，所以需要把故障控制器上的子卡和电池拆下来装到新控制器上，这个电池拆还需要点技巧，接着把新的控制器插回V3500主机，等待大约十分钟后，新控制器指示灯全绿，管理界面看到节点已联机；冠峰科技-爱科技爱分享。

冠峰科技-爱科技爱分享：首先介绍一下客户描述的问题：存储型号 MD3800F 6块1TB SAS 7.2K Ent HDD，0-1-2-3-4配置成了RAID5，5号盘为热备盘，故障的硬盘数量为3块，分别是1号 3号 5号盘，这种情况RAID5是失败offline的状态，下面2个卷也是无法正常访问的，下图5号盘没有出现故障的原因是数据恢复的人已经换了个新盘重新镜像回去了。最近碰到好几个省外的客户DELL MD系列存储硬盘故障损坏的RAID以及卷恢复的操作，总的来说恢复的效果都很理想。

服务器故障：经客户描述，这台IBM SYSTEM X3650 M4 服务器公路站人员反馈业务系统无法使用后，维护人员到机房查看，发现服务器显示器处于黑屏状态，开机按钮处于慢闪状态，开机按钮的右侧有亮起一个橘黄色的叹号警示灯，按一下诊断面板右侧蓝色小按钮，可以把诊断面板整块扯出来，如上图所示，看到BOARD故障灯亮起。该用户也是跟您一样在此对接上我们工程师协助处理完毕，以上情况常见于服务器意外关机，断电，运行很长一段时间偶尔关机，以及环境恶劣，灰尘多且潮湿都容易导致主板受损。

2023-04-19忙碌的一天又结束，最近比较忙也很久没有写类似的文章了，个人喜好通过文字来记录和分享一些工作中遇到的服务器问题也是挺好的，一方面可以加强理一遍解白天遇到的问题，同时也可以通过这种方式分享给一些刚好遇到这款服务器有类似问题或者需要解决服务器故障问题的朋友们。我相信，能搜到我这边文章的朋友基本上应该是遇到此类服务器故障问题了，针对以上3850 X6 3950 X6这几款服务器上述提到的几个问题点，我们都是真实在维修环境中碰到的真实案例也是真实有解决经验的，永远相信专人解决专事就对了。

确实很奇妙，012345配的RAID5，有5个盘都是好的，但是这组阵列却offline了，玄乎吧，经过分析 认为问题还是在人为拔插了的5号盘上，5号盘我们实际看到的应该是假在线，那只能拿这个5号盘来开刀，接下来不出问题的情况下马上就要出问题了，嘿 …还真是5号盘的问题，（上图中看到3号盘是明显故障，但是5号盘状态正常的，按理说RAID5目前只有3号盘坏的应该是可以正常识别使用，只是会降级而已。今天一个不知道哪儿的兄弟通过网络找到我，当然我也没问他公司是在哪里，主要还是奔着给他解决问题去了，

服务器前面板液晶屏报错信息为：Sys Voltage faultCompute Book 2 当然根据设备安装的模块数量不同，你的报错也许是Sys Voltage faultCompute Book 1也许是Sys Voltage faultCompute Book 3 又或许是Sys Voltage faultCompute Book 4，经过工程师远程协助客户查看 分析故障到定位故障到解决故障，客户对我们的服务都是非常满意的。

由于客户反馈无法登陆到GUI管理界面，那么只能进服务助手界面收集日志，查看节点的状态和错误代码才能定位到故障问题点；673根据描述33%是电源，33%是电池，33%是电源线，1%是机箱机柜。广东佛山工厂报修一台IBM Storwize V7000存储【2076-124】，反馈说无法访问也无法进入管理界面了；前面板和后面2个节点容器都有亮系统警告灯。由于设备使用年限比较久了，为求保险，按客户要求工程师带配件上门直接更换2个电池和电源，然后把节点恢复活动状态，GUI正常登陆，数据正常！