浅谈 Redis 与 MySQL 的耦合性以及利用管道完成 MySQL 到 Redis 的高效迁移

http://blog.csdn.net/dba_waterbin/article/details/8996872

   ㈠ Redis 与 MySQL 的耦合性
    
    
    在业务架构早期、我们便该"吃着碗里的看着锅里的"、切莫让MySQL 有梦、而Redis 无心
    毕竟、有些关系型的结构不适合放到Redis跑、"男女搭配、干活不累"嘛、推荐让MySQL与Redis喜结连理
    
    其次、这 2 人、一般是在不同场景做选择、而不会在性能上选择、
    只有在 2 者都可用的情况下、综合性能、硬件成本、运维成本等选择
    比如、网页游戏启用 Redis+MySQL:
    游戏中的:好友关系、排行榜、计数器、队列、cache都很适合通过 Redis来实现
    
    再举个例子是新浪微博的架构、比如用户关注关系:

    在 MySQL中是 <粉丝,关注的人>这样一行一行存储的。而在 Redis中你可以存成一个set,或者zset等

 

          技术分享

 

 

    大体流程是由 MySQL 复制到 Redis 的
    基本结构应该是:
    1. 发微博-- > 进入消息队列-- > 存入MySQL-- > 复制到Redis
    2. 查询 -- > 查询缓存-- > 查询Redis -- > 查询MySQL
    
    
    
    ㈡ 快速迁移 MySQL →→ Redis 


    
       ① MySQL 要导出的表 david_lin

 

 

  1. mysql> desc david_lin;  
  2. +---------+-------------+------+-----+---------+-------+  
  3. | Field   | Type        | Null | Key | Default | Extra |  
  4. +---------+-------------+------+-----+---------+-------+  
  5. | id      | int(11)     | NO   | PRI | NULL    |       |  
  6. | myname  | varchar(25) | NO   | UNI | NULL    |       |  
  7. | mymoney | int(11)     | NO   |     | 0       |       |  
  8. +---------+-------------+------+-----+---------+-------+  
  9.   
  10. mysql> select * from david_lin;  
  11. +----+--------+---------+  
  12. | id | myname | mymoney |  
  13. +----+--------+---------+  
  14. |  1 | david  |  100000 |  
  15. |  2 | rocky  |  200000 |  
  16. +----+--------+---------+  

 

 

       ② 编写导出脚本
          
            每行数据中执行的 Redis命令如下:
            HSET david_lin [myname] [mymoney]

 

  1. [root@odd ~]# cat mysql_to_redis.sql   
  2. SELECT CONCAT(  
  3.   "*4\r\n",  
  4.   ‘$‘, LENGTH(redis_cmd), ‘\r\n‘,  
  5.   redis_cmd, ‘\r\n‘,  
  6.   ‘$‘, LENGTH(redis_key), ‘\r\n‘,  
  7.   redis_key, ‘\r\n‘,  
  8.   ‘$‘, LENGTH(hkey), ‘\r\n‘,  
  9.   hkey, ‘\r\n‘,  
  10.   ‘$‘, LENGTH(hval), ‘\r\n‘,  
  11.   hval, ‘\r‘  
  12. )  
  13. FROM (  
  14.   SELECT  
  15.   ‘HSET‘ AS redis_cmd,  
  16.   ‘david‘ AS redis_key,  
  17.   myname AS hkey,  
  18.   mymoney AS hval  
  19.   FROM david_lin  
  20. ) AS t  



       ③ 开始导入

 

 

  1. [root@odd ~]# mysql -uroot -poracle test --skip-column-names --raw < mysql_to_redis.sql | redis-cli --pipe  
  2. All data transferred. Waiting for the last reply...  
  3. Last reply received from server.  
  4. errors: 0, replies: 0  



       ④ 在Redis 里查询

 

 

  1. redis 127.0.0.1:6379> hgetall david  
  2. 1) "david"  
  3. 2) "100000"  
  4. 3) "rocky"  
  5. 4) "200000"  



    这里仅是个 demo、数据量小、不过、看这结果、有些类似行转列哈、列运算了、有木有 :)

郑重声明:本站内容如果来自互联网及其他传播媒体,其版权均属原媒体及文章作者所有。转载目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。