一、前言 Canal 是阿里的一款开源项目，纯 Java 开发。基于数据库增量日志解析，提供增量数据订阅&消费，目前主要支持了 MySQL(也支持 mariaDB)。 Canal 除了支持 binlog 实时 增量同步 数据…

  简介 AJAX 是一种在无需重新加载整个网页的情况下，能够更新部分网页的技术 应用场景： 无刷新分页 短信无刷新获取 无刷新搜索 … 不用刷新整个页面便可以与服务器通讯的方法 1. Flash 2. …

  一、前言 分布式系统中我们会对一些数据量大的业务进行分拆，如：用户表，订单表。因为数据量巨大一张表无法承接，就会对其进行分库分表。 但一旦涉及到分库分表，就会引申出分布式系统中唯一…

  数据缓存由来 在实际的业务场景中，一定有很多需要做数据缓存的场景，比如售卖商品页面，包括了许多并发访问量很大的数据，它们可以称作是是”热点”数据，这些数据有一个特点，就是更新频率低…

  概述 国家统计局的公开数据真实性强，宏观且与我们的生活息息相关。 因此，采集此数据作为数据分析实验的数据再好不过。 采集过程 采集各种公开数据的第一步就是分析网页。 上面的图是国家统…