分布式系统 Redis前言 传统关系型数据库比如Mysql,正常情况下能支持几千左右的QPS。如果负载变高,就需要考虑缓存 Read more… By matthewliu, 3 年2022-05-01 ago
大数据 Flink学习Flink架构 Flink不仅提供实时流计算,也支持批处理,所谓流批一体。对外提供DataStrea Read more… By matthewliu, 3 年2022-02-27 ago
大数据 Spark学习前言 Hive在传统数据仓库场景工作的很好,为什么后面被Spark抢尽风头呢?主要是因为机器学习太火 Read more… By matthewliu, 3 年2022-02-15 ago
大数据 Hive学习-Hive SQL基本语法 Hive的详细语法见官方文档。 https://cwiki.apache.org/conf Read more… By matthewliu, 3 年2022-02-07 ago
大数据 Hive学习-源码阅读Hive架构 Hive是基于Hadoop的,直接使用了HDFS和YARN。在MapReduce的基础 Read more… By matthewliu, 3 年2022-02-05 ago
大数据 Hadoop学习-YarnYarn架构 一般的分布式计算都是调度中心(这里的ResourceManager)直接负责管理计算任 Read more… By matthewliu, 3 年2022-02-02 ago
大数据 Hadoop学习-MapReduce前言 HDFS已经解决了海量数据的存储问题。MapReduce框架则是用来解决基于HDFS存储的分布 Read more… By matthewliu, 3 年2022-01-30 ago
大数据 Hadoop学习-HDFS简介 Hadoop三大模块,HDFS、MapReduce、Yarn。HDFS是Hadoop Dist Read more… By matthewliu, 3 年2022-01-25 ago
分布式系统 消息队列AMQP AMQP(Advanced Message Queuing Protocol,高级消息队列 Read more… By matthewliu, 4 年2020-08-31 ago
分布式系统 一致性协议Raft和Paxos的关系 Paxos是一种强一致性协议,在分布式系统容错处理上有广泛使用。Paxos协议使 Read more… By matthewliu, 5 年2019-08-31 ago