服务器物理内存利用率,物理内存占用率过高

我还使用Apache的风暴与JavaCV(OpenCV的)获取更多的信息。我有两个拓扑，第二个拓扑上有两个螺栓，一个用于将视频分成几个框架，另一个用于探测面孔。

我有同样的问题：

2017-08-02 11:19:18.578 o.a.s.util Thread-5-OpenCVBolt-executor[3 3] [ERROR]

Async loop died!

java.lang.OutOfMemoryError: Physical memory usage is too high: physicalBytes = 1G > maxPhysicalBytes = 1G

at org.bytedeco.javacpp.Pointer.deallocator(Pointer.java:562) ~[stormjar.jar:?]

at org.bytedeco.javacpp.helper.opencv_core$AbstractCvMemStorage.create(opencv_core.java:1649) ~[stormjar.jar:?]

at org.bytedeco.javacpp.helper.opencv_core$AbstractCvMemStorage.create(opencv_core.java:1658) ~[stormjar.jar:?]

at OpenCVBolt.detect(OpenCVBolt.java:30) ~[stormjar.jar:?]

at OpenCVBolt.execute(OpenCVBolt.java:104) ~[stormjar.jar:?]

at org.apache.storm.daemon.executor$fn__4973$tuple_action_fn__4975.invoke(executor.clj:727) ~[storm-core-1.0.3.jar:1.0.3]

at org.apache.storm.daemon.executor$mk_task_receiver$fn__4894.invoke(executor.clj:459) ~[storm-core-1.0.3.jar:1.0.3]

at org.apache.storm.disruptor$clojure_handler$reify__4409.onEvent(disruptor.clj:40) ~[storm-core-1.0.3.jar:1.0.3]

at org.apache.storm.utils.DisruptorQueue.consumeBatchToCursor(DisruptorQueue.java:453) ~[storm-core-1.0.3.jar:1.0.3]

我能解决这个问题。我不知道你是否在使用JavaCV来处理视频和图像。如果是这样，你正在使用Maven，确保你在你的pom.xml与JavaCV版本1.3.2工作：

org.bytedeco

javacv

1.3.2

然后，你需要在你博尔特适用于prepare()方法如下行更改maxPhysicalBytes的属性。

System.setProperty("org.bytedeco.javacpp.maxphysicalbytes", "0");

System.setProperty("org.bytedeco.javacpp.maxbytes", "0");

对我来说这是工作。错误消失了。我希望这可以帮助你。

UPDATE

@Override

public void prepare(Map conf, TopologyContext context, OutputCollector collector) {

System.setProperty("org.bytedeco.javacpp.maxphysicalbytes", "0");

System.setProperty("org.bytedeco.javacpp.maxbytes", "0");

_collector = collector;

}