共 6 篇文章 |
|
如何建立完整可用的安全大数据平台“ 要建立一个大数据系统,我们需要从数据流的源头跟踪到最后有价值的输出,并在现有的Hadoop和大数据生态圈内根据实际需求挑选并整合各部分合适的组件来构建一个能够支撑多种查询和分析功能的系统平台。Yarn的出现使得集群资源管理和数据处理流水线分离,大大革新并推动了大数据应用层面各种框架的发展(SQL ... 阅2021 转23 评1 公众公开 16-06-05 23:22 |
座位是一个物理概念,一个用户成功购买了一张票后,座位就会少一个,一张票唯一对应一个座位,但是一个座位有可能会对应多张票;当得到一个可用座位后,就可以生成一张票了,然后保存这个票到车次聚合根内部即可。票1:ab,1.这样的好处是,因为一个车次能够真正出售的票是有限的,因为座位就那么几个,比如就1000个座位,估计一般正常情况也就... 阅32 转0 评0 公众公开 16-06-05 23:19 |
支付宝红包的高并发挑战及解决思路。本次分享系统地介绍红包对于2015年双11的准备工作,从容量评估、性能优化、稳定性保证方面解答上述问题的应对。容量评估:基于全链路的压测手段、数据分布的模拟方法、关键场景调用量预估方法;性能:拆分vs合并、读写分离、异步化、DB操作优化;2013年加入支付宝,在成都分公司负责红包等支付工具的性能与... 阅56 转0 评0 公众公开 16-05-12 19:50 |
还是按照第一部分根据uid计算数据库编号和表编号的算法,当uid=9527时,分库信息=1,分表信息=7,将他们进行组合,两位的分库分表信息即为''17''。上述使用表编号作为分表信息没有任何问题,但使用数据库编号作为分库信息却存在隐患,考虑未来的扩容需求,我们需要将8库扩容到16库,这时取值范围1到8的分库信息将无法支撑1... 阅258 转2 评0 公众公开 16-05-09 14:31 |
为了让你更高效 我们拿到了伦敦一家培训公司的效率指南。其实,工作效率的提升不仅仅是要求你工作更努力,而是要求你掌握一些技巧,实现“巧工作”。伦敦人力资源培训公司BestSTL认为,提升工作效率固然需要你有更强的自制力——比如每天必须罗列今日任务清单并且严格执行——但也包括将一些零散时间化整归零,充分利用,以及更加科学地将身体... 阅2 转0 评0 公众公开 16-05-02 22:53 |
支付宝红包的高并发挑战及解决思路。本次分享系统地介绍红包对于2015年双11的准备工作,从容量评估、性能优化、稳定性保证方面解答上述问题的应对。容量评估:基于全链路的压测手段、数据分布的模拟方法、关键场景调用量预估方法;性能:拆分vs合并、读写分离、异步化、DB操作优化;2013年加入支付宝,在成都分公司负责红包等支付工具的性能与... 阅77 转0 评0 公众公开 16-05-01 10:07 |