如何確保shdfs集中式緩存正常工作
[英]How to make sure shdfs Centralized Cache is working
問題描述
我只是想知道hdfs dfs copyToLocal <file1> <file2>是否是測試hdfs讀取緩存是否配置正確的好方法。
在我的實驗，我沒有看到復制了一個1GB的合理的改進<file1>到本地目錄中，該目錄之后<file1>添加到HDFS緩存。 在<file1>添加到高速緩存之前和之后，完成復制的時間約為17秒。
已驗證<file1>是否已通過listDirective -stats命令添加到緩存中。
感謝任何幫助。
1 個解決方案
解決方案1
0 2015-04-25 06:52:36
包括hdfs dfsadmin -report的輸出將很有用。
增加ulimit並設置dfs.datanode.max.locked.memory
http://hadoop.apache.org/docs/r2.3.0/hadoop-project-dist/hadoop-hdfs/CentralizedCacheManagement.html
ETag 標頭是否會使 Cache-Control 標頭過時？ 那么如何確保 Cache-Control 無害呢？
[英]Does the ETag header make the Cache-Control header obsolete? How to make sure Cache-Control is not harmful then?
如何確保寫入緩存的數據與原始阿波羅緩存的格式相同？
[英]How to make sure data written to the cache is in the same format as the orignal apollo-cache?
使用membase的Rails應用程序中的緩存策略，如何確保不刪除所有內容？
[英]Cache strategy in a rails application using membase, how do I make sure I don't delete everything?
如何將網站設置為緩存，但仍要確保用戶使用最新版本？
[英]How do I set my web site to cache but still make sure the user has the most recent version?
如何確保在將數據寫入緩存時沒有人從Ehcache對象讀取？
[英]How to make sure that no one reads from Ehcache Object, while data is being written into the cache?
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.