关于项目

该项目是一个开源的无后端的待办事项应用,数据用 LeanCloud 进行同步,已经开发完毕。 项目链接

思路来源

该同步思路来源于以下两篇回答,并根据项目需求总结而来。 服务端和各种客户端(手机端,平板端,web 端)怎样进行数据同步? Evernote 的同步方式是怎样的?

同步方式

每一批次两个并行队列,每次最多同步 X 条数据,超过 X 条下次进行同步。 每批同步分上传和下载(与队列不对应),若上传或下载数超过上限,则下一批次同步。

同步类型

  1. 若本地没有同步记录,则将本地所有数据进行上传,并将服务器上所有的数据进行下载(Incremental Sync)
  2. lastSyncTimeOnServer = lastSyncTimeOnClient,表明服务器数据没有变化,则仅需要上传本地修改过的数据和新增的数据(Send Changes)
  3. lastSyncTimeOnServer > lastSyncTimeOnClient,则进行全量同步,先对比同步所有已有数据,再将其他数据从服务器上下载(Full Sync)
  4. 其他情况进行(Incremental Sync)

注意事项

  1. 所有同步时间戳均以服务器时间为准,每次同步之前先获取服务器的时间戳
  2. 对比同步规则:1.大版本同步小版本 2.版本相同的话,以线上数据为准进行覆盖(另一种做法是建立冲突副本,根据本项目的实际情况不采用这种方式)

异常情况

以下几种情况会影响同步时数据的原子性:

  1. 云函数返回之前挂掉:下次同步则为 full sync,同时在对比时会将 objectId 赋值给本地对应的待办事项。
  2. 若在批次之间挂掉的话(上一批成功,下一批挂掉),这时需要在判断同步类型时,判断上一次同步成功的记录次数,若次数超限,此次同步为 full sync。

同步难点

  1. 处理各种异常情况,保证数据的一致性和原子性
  2. 同步效率
  3. 分批同步

同步流程