標簽[directmemory] - 堆棧內存溢出

[英]spark shuffle memory error: failed to allocate direct memory

在火花數據幀（4x）上執行幾個連接時，我收到以下錯誤：即使設置：它沒有解決。 ...

[英]What is io.netty.allocator.maxOrder in Netty?

請解釋一下Netty中的io.netty.allocator.maxOrder是什么！默認情況下，它的值為 11，因此我得到 8192 << 11 = 16MiB 每塊對於 Java 11 上的 2 個內核，我得到 4 個直接競技場，每個競技場有 6 個 DirectByteBuff ...

[英]Why it is recommended to use only Heap Buffers with [byte] operations in ChannelOutboundHandler.?

我們正在努力開放api網關的外包，並使用Netty作為基礎框架。我碰到了諾曼·莫雷（Norman Maurer）的幻燈片。在其中一張幻燈片中，他提到僅在需要對ChannelOutboundHandler中的byte []進行操作時才使用堆緩沖區！默認情況下，直接Byt ...

[英]PooledUnsafeDirectByteBuf not found in DirectMemory

我正在使用Netty 4.1.17-Final。我編寫了發送和接收100 MB隨機ASCII的代碼。直到ByteBuf變為100 MB，解碼器才會讀取。因此，Netty會緩沖100 MB，但即使通過監視直接內存也找不到它。 Netty使用PooledUnsafeDi ...

[英]Netty PooledDirect ByteBuf and ArrayList unexpected behaviour

這似乎是一個愚蠢的錯誤，因為我找不到為什么未刪除所有條目的原因。我正在運行JAVA_OPTS： -XX：MaxDirectMemorySize = 67108864 -Dio.netty.leakDetectionLevel =高級-D-Dio.netty.allocator.ty ...

[英]Setting MaxDirectMemory and MaxHeapMemory for Java Applications

對於我的Java應用程序，我試圖使用命令行選項限制堆內存和直接內存使用。當我試圖了解有關Java應用程序內存布局的更多信息時，我遇到了以下VMware 文章。從文章中，我假設-Xmx設置可用於限制堆使用，而MaxDirectMemory設置可用於限制堆外的本機內存（圖中的Gue ...

[英]Buffer vs Unsafe - Outside JVM

我要求在可用RAM中使用GC無法控制的空間。我讀了幾篇關於同一方法的文章，為我介紹了兩種方法。它們在以下代碼中指定。導入java.lang.reflect.Field; 導入java.nio.ByteBuffer; 導入sun.misc.Unsafe; 公共類Di ...

[英]Using DMA to access High Speed Serial Port

我在c＃中使用serialport組件，效果很好！但問題是如何更快地處理高速（例如2 Mbps）數據傳輸。正如我研究過的那樣，我發現可以直接訪問內存（使用像這個鏈接的 DMA）。誰能告訴我如何在我的應用程序中定義和使用它？ ...

[英]How to free memory using Java Unsafe, using a Java reference?

Java Unsafe類允許您按如下方式為對象分配內存，但是使用此方法，如何在完成時釋放分配的內存，因為它不提供內存地址... 有沒有辦法從對象引用訪問內存地址，也許默認的hashCode實現返回的整數可以工作，所以你可以做... 似乎沒有一些如何...... ...

[英]How would I invoke a Java method using a long memory address?

可以說我有一個在Java中很長的內存地址，如果我知道該內存地址是一個函數指針，那么如何在該地址處調用函數？我對此感興趣的原因是用於處理堆外對象。我要在直接字節緩沖區中創建對象，而這些對象不會受到GC的限制。這將使我可以取消GC暫停時間，因為如果我不在堆上創建任何對象，GC將永遠不 ...

[英]Using huge pages and DirectByteBuffer in java hotspot jvm on Linux

我想做什么我需要使用直接內存來避免GC移動。我想為那些人啟用大頁面。至今標志-XX：+ UseLargePages在使用堆緩沖區（非直接ByteBuffers）時工作正常，但在使用DirectByteBuffers時不再起作用。我也嘗試過使用MappedByteB ...

[英]GetByteArrayElements uses direct memory?

我的程序中有一個Direct Memory OOM。該程序在java中使用ByteBuffer.allocateDirect() ，而C ++端將數據寫入該緩沖區。但是當我嘗試將ByteBuffer.allocateDirect()更改為ByteBuffer.allocate()並使 ...

[英]How much data is too much for on-heap java cache? When should I start to think about off-heap cache?

像ehcache這樣的堆棧緩存有多少數據？我得到一個24GB的RAM服務器。我可能會開始使用2-4 GB進行緩存，但最終可能會投入20GB左右來緩存。在什么時候我應該擔心堆上緩存的GC需要太長時間？那么，DirectMemory是唯一可用的開源堆外緩存嗎？黃金時間准備 ...

[英]Is off-heap cache DirectMemory ready for production? Is it active?

DirectMemory似乎是Java唯一的開源堆外緩存。它准備好生產嗎？這是一個積極可行的項目嗎？我查看了它的郵件列表存檔，它的數量非常少。 ...