memcached安裝及.NET中的Memcached.ClientLibrary使用詳解

張龍豪發表於2015-11-11

序言

吹吹牛逼先,借我你的20分鐘,保證你在.net中使用memcached快取資料,暢通無阻,提升資料讀取效率,分擔資料庫壓力,便不在話下。

本篇主要說下:memcached分散式快取的負載均衡配置比例,資料壓縮,socket的詳細配置等,以及在.net中的常用方法。

memcached是什麼,做什麼的,為什麼要使用它,本篇不做介紹,建議百度百科,我看拉下,那裡比我還能吹牛逼,哈哈,上料。

memcached在windows下的下載與安裝

下載地址:http://pan.baidu.com/s/1yVILw       提取密碼:5gx9

官方網站:http://memcached.org/

下載完成後

1、開啟SetupFile安裝資料夾。

     

2、開啟cmd命令介面。           不要忘啦去windows服務中把服務啟動了。

3、 以上的安裝和啟動都是在預設環境下進行的,在安裝時可設定如下引數: 

-p 監聽的埠 
-l 連線的IP地址, 預設是本機 
-d start 啟動memcached服務 
-d restart 重起memcached服務 
-d stop|shutdown 關閉正在執行的memcached服務 
-d install 安裝memcached服務 
-d uninstall 解除安裝memcached服務 
-u 以的身份執行 (僅在以root執行的時候有效) 
-m 最大記憶體使用,單位MB。預設64MB 
-M 記憶體耗盡時返回錯誤,而不是刪除項 
-c 最大同時連線數,預設是1024 
-f 塊大小增長因子,預設是1.25 
-n 最小分配空間,key+value+flags預設是48 
-h 顯示幫助

4、對這樣你就安裝好啦。下面看我們怎麼用c#語言操作memcached啦。

5、telnet   add 0 1 zlh  0:時間(秒,0代表永遠),1:位元組數 ,zlh:value ,flush_all 清空所有資料。

先把memcached用起來

1、下載客戶端的3個dll,ICSharpCode.SharpZipLib.dll,log4net.dll,Memcached.ClientLibrary.dll

2、跟著我新建一個簡單控制檯應用程式

 class AMemcached
    {
        public static MemcachedClient cache;
        static AMemcached()
        {
            string[] servers = { "172.18.5.66:11211" };
            //初始化池
            SockIOPool pool = SockIOPool.GetInstance();
            //設定伺服器列表
            pool.SetServers(servers);
            //各伺服器之間負載均衡的設定比例
            pool.SetWeights(new int[] { 1 });
            //初始化時建立連線數
            pool.InitConnections = 3;
            //最小連線數
            pool.MinConnections = 3;
            //最大連線數
            pool.MaxConnections = 5;
            //連線的最大空閒時間,下面設定為6個小時(單位ms),超過這個設定時間,連線會被釋放掉
            pool.MaxIdle = 1000 * 60 * 60 * 6;
            //socket連線的超時時間,下面設定表示不超時(單位ms),即一直保持連結狀態
            pool.SocketConnectTimeout = 0;
            //通訊的超市時間,下面設定為3秒(單位ms),.Net版本沒有實現
            pool.SocketTimeout = 1000 * 3;
            //維護執行緒的間隔啟用時間,下面設定為30秒(單位s),設定為0時表示不啟用維護執行緒
            pool.MaintenanceSleep = 30;
            //設定SocktIO池的故障標誌
            pool.Failover = true;
            //是否對TCP/IP通訊使用nalgle演算法,.net版本沒有實現
            pool.Nagle = false;
            //socket單次任務的最大時間(單位ms),超過這個時間socket會被強行中端掉,當前任務失敗。
            pool.MaxBusy = 1000 * 10;
            pool.Initialize();
            cache = new MemcachedClient();
            //是否啟用壓縮資料:如果啟用了壓縮,資料壓縮長於門檻的資料將被儲存在壓縮的形式
            cache.EnableCompression = false;
            //壓縮設定,超過指定大小的都壓縮 
            //cache.CompressionThreshold = 1024 * 1024;           
        }
    }
    class Program
    {
        static void Main(string[] args)
        {
            //存入key為a,value為123的一個快取
            AMemcached.cache.Add("a", "123");
            //讀出key為a的快取值
            var s = AMemcached.cache.Get("a");
            //輸出
            Console.WriteLine(s);
            Console.ReadKey();           
        }
    }

Note:首先告訴你一個好的訊息,memcached就這麼簡單,你已經能夠使用啦,如果感興趣,那麼在AMemcached.cache的後面加點,看看這個類庫裡面還有那些關於增刪改查過載的好方法。如果你還想再進一步瞭解,那麼繼續往下看。

細品 .NET Memcached.ClientLibrary 

1、說說memcached分散式快取的設定與應用

            string[] servers = { "172.18.5.66:11211", "192.168.10.121:11211" };
            //初始化池
            SockIOPool pool = SockIOPool.GetInstance();
            //設定伺服器列表
            pool.SetServers(servers);
            //各伺服器之間負載均衡的設定比例
            pool.SetWeights(new int[] { 1, 10 });

Note:

1、在172.18.5.66,與192.168.10.121兩臺機器上裝memcached服務端。

2、 pool.SetWeights這裡的1跟10意思是,負載均衡比例,假如11000條資料,大致資料分佈為:172.18.5.66分佈1000條資料左右。另外一臺為10000條左右。

3、memcached服務端並不具備負載均衡的能力,而是memcachedClient實現的,具體存取資料實現的核心是採用一致性Hash演算法,把key-value分佈到某一臺伺服器中裡邊。

2、說說memcached的資料壓縮機制

            //是否啟用壓縮資料:如果啟用了壓縮,資料壓縮長於門檻的資料將被儲存在壓縮的形式
            cache.EnableCompression = false;
            //壓縮設定,超過指定大小的都壓縮 
            //cache.CompressionThreshold = 1024 * 1024; 

Note:

1、這個處理是在MemcachedClient物件中,設定這個EnableCompression屬性,是否使用壓縮的意思,如果啟用啦壓縮功能 ,則ICSharpCode.SharpZipLib類庫會在資料超過預設大小時,進行資料壓縮處理。

2、CompressionThreshold這個屬性是壓縮的閥值,預設是15K,如果超過設定的閥值則使用memcached的通訊協議,存資料時給每個資料項分配一個16為的flag表示,用作記錄是否有壓縮,如果有壓縮則提取資料是進行解壓。如果沒有超過閥值則不壓縮,直接儲存。

3、說說怎麼使用客戶端多個SocketIO池 

class AMemcached
    {
        public MemcachedClient cache;
        public  AMemcached(string poolName)
        {
            string[] servers = { "172.18.5.66:11211", "192.168.10.121:11211" };
            //初始化池
            SockIOPool pool = SockIOPool.GetInstance(poolName);
            //設定伺服器列表
            pool.SetServers(servers);
            //各伺服器之間負載均衡的設定比例
            pool.SetWeights(new int[] { 1, 10 });
            //初始化時建立連線數
            pool.InitConnections = 3;
            //最小連線數
            pool.MinConnections = 3;
            //最大連線數
            pool.MaxConnections = 5;
            //連線的最大空閒時間,下面設定為6個小時(單位ms),超過這個設定時間,連線會被釋放掉
            pool.MaxIdle = 1000 * 60 * 60 * 6;
            //socket連線的超時時間,下面設定表示不超時(單位ms),即一直保持連結狀態
            pool.SocketConnectTimeout = 0;
            //通訊的超時時間,下面設定為3秒(單位ms),.Net版本沒有實現
            pool.SocketTimeout = 1000 * 3;
            //維護執行緒的間隔啟用時間,下面設定為30秒(單位s),設定為0時表示不啟用維護執行緒
            pool.MaintenanceSleep = 30;
            //設定SocktIO池的故障標誌
            pool.Failover = true;
            //是否對TCP/IP通訊使用nalgle演算法,.net版本沒有實現
            pool.Nagle = false;
            //socket單次任務的最大時間(單位ms),超過這個時間socket會被強行中端掉,當前任務失敗。
            pool.MaxBusy = 1000 * 10;
            // 初始化一些值並與MemcachedServer段建立連線
            pool.Initialize();
            cache = new MemcachedClient();
            //是否啟用壓縮資料:如果啟用了壓縮,資料壓縮長於門檻的資料將被儲存在壓縮的形式
            cache.EnableCompression = false;
            //壓縮設定,超過指定大小的都壓縮 
            //cache.CompressionThreshold = 1024 * 1024;   
            //指定客戶端訪問的SockIO池
            cache.PoolName = poolName;
        }


    }
    class Program
    {
        static void Main(string[] args)
        {
            //存入key為a,value為123的一個快取
            new AMemcached("me").cache.Add("b", 123);
            //讀出key為a的快取值
            var s = new AMemcached("me").cache.Get("b");
            //輸出
            Console.WriteLine(s);
            Console.ReadKey();           
        }
    }
View Code

Note:使用SocketIoPool的場景,假如你的系統中用到A,B兩臺機器memcached的快取資料,而A,B是不相關的,沒有資料互通共享,那麼這個時候你就可以根據設定poolName來處理讀寫那臺機器。而不用多處,重複配置客戶端的各種引數。

4、說說memcached的故障轉移處理 

           //設定SocktIO池的故障標誌
            pool.Failover = true;

Note:memcached的鼓掌轉移是一套正常節點發生故障變為死節點時的處理機制。

1、開啟故障轉移:如果發生socket異常,則該節點被新增到存放死節點屬性的_hostDead中,新請求被對映到dead server,檢測嘗試連線死節點的時間間隔屬性_hostDeadDuration(預設設定為100ms),如果沒有達到設定的間隔時間則key會被對映到可用的server處理,如果達到了時間間隔,則嘗試重新連結,連線成功將此節點從_hostDead中去除,連線失敗則間隔時間翻倍存放,下次重新連線時間會被拉長。

2、不開啟故障轉移:新的請求都會被對映到dead server上,嘗試重新建立socket連結,如果連線失敗,返回null或者操作失敗。

5、說說key-value中的key與value

1、key在服務端的長度限制為250個字元,建議使用較短的key但不要重複。

2、value的大小限制為1mb,如果大拉,可以使用壓縮,如果還大,那可能拆分到多個key中。

相關文章