s24199735041

这家伙很懒，什么也没写

资源：163 粉丝：0

DRDS分库分表RDS关系数据库云服务的水平扩容技术

DTCC2014(2014中国数据库技术大会):DRDS分库分表-RDS关系数据库云服务的水平扩容技术。大数据学习资料。

2020-12-11 21:12

mysql参数及其优化

query_cache_size、query_cache_type、innodb_buffer_pool_size、innodb_log_file_size、innodb_log_buffer_size、innodb_flush_logs_at_trx_commit、transaction_isolation、innodb_file_per_table、innodb_open_files、innodb_flush_method、innodb_max_dirty_pages_pct、innodb_data_file_path

2020-09-17 12:34

如何实施异构服务器的负载均衡及过载保护

1)service的负载均衡、故障转移、超时处理通常是RPC-client连接池层面来实施的 2)异构服务器负载均衡,最简单的方式是静态权重法,缺点是无法自适应动态调整 3)动态权重法,可以动态的根据service的处理能力来分配负载,需要有连接池层面的微小改动 4)过载保护,是在负载过高时,service为了保护自己,保证一定处理能力的一种自救方法 5)动态权重法,还可以用做service的过载保护

2020-09-17 04:00

从0开始做垂直O2O个性化推荐

品类多种多样,要做统一的宝贝画像比较难,而分类别做宝贝画像成本又非常高,所以更多的是进行用户画像、分类预测推荐、协同过滤推荐等个性化推荐。

2020-09-15 02:00

跨公网调用的大坑与架构优化方案

跨公网调用第三方,可能存在的问题: • 公网抖动,第三方服务不稳定,影响自身服务 • 一个接口超时,占住工作线程,影响其他接口降低影响的优化方案: • 增大工作线程数 • 降低超时时间 • 服务垂直拆分业务需求决定技术方案,结合业务的解决方案: • 业务能接受旧数据:读取本地数据,异步代理定期更新数据 • 有多个第三方服务提供商:多个第三方互备 • 向第三方同步数据:本地写成功就算成功,异步向第三方同步数据

2020-09-02 22:51

Google MapReduce一

• 并行计算 • 数据分发 • 错误处理 • 集群通讯 • ... 这些综合到一起,就成为了一个困难的问题,这也是Google MapReduce工程架构要解决的问题

2020-08-21 07:13

群消息设计实现

群消息还是非常有意思的,做个简单总结: (1)不管是群在线消息,还是群离线消息,应用层的ACK是可达性的保障; (2)群消息只存一份,不用为每个用户存储离线群msg_id,只需存储一个最近ack的群消息id/time; (3)为了减少消息风暴,可以批量ACK; (4)如果收到重复消息,需要msg_id去重,让用户无感知; (5)离线消息过多,可以分页拉取(按需拉取)优化;

2020-08-18 07:44

集合合并与查找并查集

分离集合(disjoint set)是一种经典的数据结构，它有三类操作： Make-set(a)：生成包含一个元素a的集合S； Union(X, Y)：合并两个集合X和Y； Find-set(a)：查找元素a所在集合S，即通过元素找集合句柄；

2020-07-27 04:38

100行伪代码搞定日志监控框架

• 日志成体系，日志有监控，有后台不需要grep • 运维提供工具统一规范切分 • 日志监控框架，分散式

2020-07-23 09:32

高并发的常见应对方案

【数据库缓存】【数据库缓存】【服务器的集群化，以及负载均衡】

2020-07-21 19:16