| 共 46 篇文章 |
|
静态文件上传cdn，cdn节点缓存静态文件，减少服务器压力：对于更新频繁度不高，并且数据允许短时间内的延迟，可以通过数据静态化成JSON，XML,HTML等数据文件上传CDN，在拉取数据的时候优先到CDN拉取，如果没有获取到数据再从缓存，数据库中获取，当管理人员操作后台编辑数据再重新生成静态文件上传同步到CDN，这样在高并发的时候可以使数据的获... 阅56 转0 评0 公众公开 18-02-25 14:40 |
insert ignore会忽略数据库中已经存在的数据(根据主键或者唯一索引判断)，如果数据库没有数据，就插入新的数据，如果有数据的话就跳过这条数据.Case：+----+------+------+------+| id | c1 | c2 | c3 |+----+------+------+------+| 1 | 1 | a | 1 || 2 | 2 | a | 1 || 8 | NULL | NULL | 1 || 14 | 4 | bb | NULL || 17 | 5 | cc | 4 || 18 |... 阅203 转1 评0 公众公开 18-02-25 14:39 |
分布式系统开发里必须要解决的3个技术问题。利用数据库或者其他有并发控制的程序来做一个锁的逻辑 利用数据库的话，有一个小技巧提供给大家 伪代码如下： [php] view plaincopy//字段A里存储的是计数器数字，控制最多奖品数量,1个奖品和多个奖品的逻辑有点不一样，注意下面的伪代码 // 如果是1个奖品 select A from 字... 阅33 转1 评0 公众公开 18-02-25 14:39 |
＃更新redis location /set_redis { internal; set_unescape_uri$key $arg_key; set_unescape_uri$val $arg_val; redis2_queryset $key $val; redis2_pass127.0.0.1:6379; }#读取redis location /get_redis { internal; set_unescape_uri$key $arg_key; ... 阅1252 转2 评0 公众公开 18-02-25 14:26 |
语法：zrevrank key member.a)每秒单独建一个key(String的数据结构即可)，设置生效时间5秒，入sorted set队列只是当前时间5秒前的数据，已经完成统计。1 HINCRBY Hash队列key 当前时间到秒 1 2 HGET 从Hash队列key获得小于当前时间N秒的数据 3 if 存在 4 ZADD 放到sorted set 5 ZREVRANK sorted set排序 6 ZREMRANGEBYSCORE 对s... 阅462 转1 评0 公众公开 18-02-25 14:15 |
被神化的海量数据处理和高并发处理。另一方面，在海里数据面前，通用的数据处理方式会很困难，高效的方法基本都是有业务针对性和数据针对性的。2012-1-11：补充数据划分，按特定属性划分，用得最多的是按数据归属来划分，比如原来的帐套，现在云计算下的多租赁用户ID（企业用户ID)，这种方式可以在三种级别上（表级，数据库（Oracle分用户）级... 阅70 转0 评0 公众公开 18-02-25 14:14 |
目前主流的静态化主要有两种：一种是通过程序将动态页面抓取并保存为静态页面，这样的页面的实际存在于服务器的硬盘中，另外一种是通过WEB服务器的 URL Rewrite的方式，他的原理是通过web服务器内部模块按一定规则将外部的URL请求转化为内部的文件地址，一句话来说就是把外部请求的静态地址转化 为实际的动态页面地址，而静态页面实际是不存在... 阅224 转0 评0 公众公开 18-02-25 14:09 |
OSCache和Enhence可以使用JGroups进行缓存数据的广播，实现自动同步多个应用的缓存数据，在一个应用更新缓存之后该应用自动广播该缓存信息到其它应用的缓存，其它应用不需要再次访问数据库来再次加载数据更型缓存。当一个应用更新了缓存的时候，该缓存实例通知集群中的其他缓存服务器，由缓存集群自动完成各个缓存服务器中缓存数据的同步。 阅17 转0 评0 公众公开 18-02-25 14:09 |
数据库集群方式能承担的负载是比较大的，数据库物理介质为一个磁盘阵列，多个数据库实例以虚拟IP方式向外部应用服务器提供数据库连接服务。我们可以将User_ID的范围进行分区，比如1-100000范围为一个分区数据库，100001-200000范围为一个分区数据库，该算法在分区数据库个数有变动的时候，系统非常有利于扩展，但是容易导致不同分区之间的压力... 阅21 转0 评0 公众公开 18-02-25 14:08 |
海量数据的解决方案：使用缓存；使用缓存的时候还要考虑到缓存服务器发生故障时候如何进行容错处理，是使用N多台服务器缓存相同的数据，通过分布式部署的方式对缓存数据进行控制，当一台发生故障的时候自动切换到其他的机器上去；延迟修改是对于一些高并发的并且修改频繁修改的数据，在每次修改的时候首先将数据保存到缓存中，然后定时将缓存中... 阅21 转0 评0 公众公开 18-02-25 14:05 |
