Rxjava实现三级缓存的两种方式

本文正如标题所说的用rxjava实现数据的三级缓存分别为内存,磁盘,网络,刚好最近在看Android源码设计模式解析与实战(受里面的ImageLoader的设计启发)。
我把代码放到了我的hot项目中,Hot是关于微信头条分享的app
github地址
1.使用concat()和first()的操作符。
2.使用BehaviorSubject。
先说BehaviorSubject的实现方法,废话不多说直接上代码,

/**
 * Created by wukewei on 16/6/20.
 */
public class BehaviorSubjectFragment extends BaseFragment {

    public static BehaviorSubjectFragment newInstance() {
        BehaviorSubjectFragment fragment = new BehaviorSubjectFragment();
        return fragment;
    }

    String diskData = null;
    String networkData = "从服务器获取的数据";
    BehaviorSubject<String> cache;

    View mView;

    @Nullable
    @Override
    public View onCreateView(LayoutInflater inflater, @Nullable ViewGroup container, @Nullable Bundle savedInstanceState) {
        mView = inflater.inflate(R.layout.fragment_content, container, false);
        init();
        return mView;
    }

    private void init() {
        mView.findViewById(R.id.get).setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View v) {
                subscriptionData(new Observer<String>() {
                    @Override
                    public void onCompleted() {

                    }

                    @Override
                    public void onError(Throwable e) {

                    }

                    @Override
                    public void onNext(String s) {
                        Log.d("onNext", s);
                    }
                });
            }
        });

        mView.findViewById(R.id.memory).setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View v) {
                BehaviorSubjectFragment.this.cache = null;
            }
        });

        mView.findViewById(R.id.memory_disk).setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View v) {
                BehaviorSubjectFragment.this.cache = null;
                BehaviorSubjectFragment.this.diskData = null;
            }
        });

    }

    private void loadNewWork() {
        Observable<String> o = Observable.just(networkData)
                .doOnNext(new Action1<String>() {
                    @Override
                    public void call(String s) {
                        BehaviorSubjectFragment.this.diskData = s;
                        Log.d("写入磁盘", "写入磁盘");
                    }
                });
        o.subscribe(new Action1<String>() {
            @Override
            public void call(String s) {
                cache.onNext(s);
            }
        }, new Action1<Throwable>() {
            @Override
            public void call(Throwable throwable) {

            }
        });
    }

    private Subscription subscriptionData(@NonNull Observer<String> observer) {
        if (cache == null) {
            cache = BehaviorSubject.create();
            Observable.create(new Observable.OnSubscribe<String>() {
                @Override
                public void call(Subscriber<? super String> subscriber) {
                    String data = diskData;
                    if (data == null) {
                        Log.d("来自网络", "来自网络");
                        loadNewWork();
                    } else {
                        Log.d("来自磁盘", "来自磁盘");
                        subscriber.onNext(data);
                    }
                }
            })
                    .subscribeOn(Schedulers.io())
                    .subscribe(cache);

        } else {
            Log.d("来自内存", "来自内存");
        }

        return cache.observeOn(AndroidSchedulers.mainThread()).subscribe(observer);
    }


}

其中最主要的是subscriptionData()这个方法,就是先判断 cache是否存在要是存在的话就返回内存中数据,再去判断磁盘数据是否存在,如果存在就返回,要是前面两种都不存在的时候,再去网络中获取数据。还有最重要的是当你从网络获取数据的时候要记得保存在内存中和保存在磁盘中,在磁盘获取数据的时候把它赋值给内存。
接下来就说说用concat()和first()的操作符来实现,这是我在看Android源码设计模式解析与实战,作者在第一章的时候就介绍ImageLoader的设计。
在内存中存储的方式LruCache来实现的,磁盘存储的方式就是序列化存储。
1.定义一个接口:

/**
* Created by wukewei on 16/6/19.
*/
public interface ICache {
   <T> Observable<T> get(String key, Class<T> cls);

   <T> void put(String key, T t);
}

2.内存存储的实现

/**
 * Created by wukewei on 16/6/19.
 */
public class MemoryCache implements ICache{

    private LruCache<String, String> mCache;

    public MemoryCache() {
        final int maxMemory = (int) Runtime.getRuntime().maxMemory();
        final int cacheSize = maxMemory / 8;
        mCache = new LruCache<String, String>(cacheSize) {
            @Override
            protected int sizeOf(String key, String value) {
                try {
                    return value.getBytes("UTF-8").length;
                } catch (UnsupportedEncodingException e) {
                    e.printStackTrace();
                    return value.getBytes().length;
                }
            }
        };
    }

    @Override
    public <T> Observable<T> get(final String key, final Class<T> cls) {
        return Observable.create(new Observable.OnSubscribe<T>() {
            @Override
            public void call(Subscriber<? super T> subscriber) {

                String result = mCache.get(key);

                if (subscriber.isUnsubscribed()) {
                    return;
                }

                if (TextUtils.isEmpty(result)) {
                    subscriber.onNext(null);
                } else {
                    T t = new Gson().fromJson(result, cls);
                    subscriber.onNext(t);
                }

                subscriber.onCompleted();
            }
        });
    }

    @Override
    public <T> void put(String key, T t) {
        if (null != t) {
            mCache.put(key, new Gson().toJson(t));
        }
    }

    public void clearMemory(String key) {
        mCache.remove(key);
    }
}

3.磁盘存储的实现

/**
* Created by wukewei on 16/6/19.
*/
public class DiskCache implements ICache{

   private static final String NAME = ".db";
   public static long OTHER_CACHE_TIME = 10 * 60 * 1000;
   public static long WIFI_CACHE_TIME = 30 * 60 * 1000;
   File fileDir;
   public DiskCache() {
       fileDir = CacheLoader.getApplication().getCacheDir();
   }

   @Override
   public <T> Observable<T> get(final String key, final Class<T> cls) {
       return Observable.create(new Observable.OnSubscribe<T>() {
           @Override
           public void call(Subscriber<? super T> subscriber) {

               T t = (T) getDiskData1(key + NAME);

               if (subscriber.isUnsubscribed()) {
                   return;
               }

               if (t == null) {
                   subscriber.onNext(null);
               } else {
                   subscriber.onNext(t);
               }

               subscriber.onCompleted();
           }
       })
               .subscribeOn(Schedulers.io())
               .observeOn(AndroidSchedulers.mainThread());

   }

   @Override
   public <T> void put(final String key, final T t) {
       Observable.create(new Observable.OnSubscribe<T>() {
           @Override
           public void call(Subscriber<? super T> subscriber) {

               boolean isSuccess = isSave(key + NAME, t);

               if (!subscriber.isUnsubscribed() && isSuccess) {

                   subscriber.onNext(t);
                   subscriber.onCompleted();
               }
           }
       })
               .subscribeOn(Schedulers.io())
               .observeOn(AndroidSchedulers.mainThread())
               .subscribe();
   }

   /**
    * 保存数据
    */
   private <T> boolean isSave(String fileName, T t) {
       File file = new File(fileDir, fileName);

       ObjectOutputStream objectOut = null;
       boolean isSuccess = false;
       try {
           FileOutputStream out = new FileOutputStream(file);
                   objectOut = new ObjectOutputStream(out);
           objectOut.writeObject(t);
           objectOut.flush();
           isSuccess=true;
       } catch (IOException e) {
           Log.e("写入缓存错误",e.getMessage());
       } catch (Exception e) {
           Log.e("写入缓存错误",e.getMessage());
       } finally {
           closeSilently(objectOut);
       }
       return isSuccess;
   }

   /**
    * 获取保存的数据
    */
   private Object getDiskData1(String fileName) {
       File file = new File(fileDir, fileName);

       if (isCacheDataFailure(file)) {
           return null;
       }

       if (!file.exists()) {
           return null;
       }
       Object o = null;
       ObjectInputStream read = null;
       try {
           read = new ObjectInputStream(new FileInputStream(file));
           o = read.readObject();
       } catch (StreamCorruptedException e) {
           Log.e("读取错误", e.getMessage());
       } catch (IOException e) {
           Log.e("读取错误", e.getMessage());
       } catch (ClassNotFoundException e) {
           Log.e("错误", e.getMessage());
       } finally {
           closeSilently(read);
       }
       return o;
   }



   private void closeSilently(Closeable closeable) {
       if (closeable != null) {
           try {
               closeable.close();
           } catch (Exception ignored) {
           }
       }
   }



   /**
    * 判断缓存是否已经失效
    */
   private boolean isCacheDataFailure(File dataFile) {
       if (!dataFile.exists()) {
           return false;
       }
       long existTime = System.currentTimeMillis() - dataFile.lastModified();
       boolean failure = false;
       if (NetWorkUtil.getNetworkType(CacheLoader.getApplication()) == NetWorkUtil.NETTYPE_WIFI) {
           failure = existTime > WIFI_CACHE_TIME ? true : false;
       } else {
           failure = existTime > OTHER_CACHE_TIME ? true : false;
       }

       return failure;
   }

   public void clearDisk(String key) {
       File file = new File(fileDir, key + NAME);
       if (file.exists()) file.delete();
   }
}

isCacheDataFailure()方式中就是判断当前的数据是否失效,我是根据当前的网络状况来分wifi状况和非wifi状况,wifi状态下数据过期时间比较短,其他状态过期时间比较长。
4.CacheLoader的设计

**
 * Created by wukewei on 16/6/19.
 */
public class CacheLoader {
    private static Application application;

    public static Application getApplication() {
        return application;
    }

    private ICache mMemoryCache, mDiskCache;

    private CacheLoader() {

        mMemoryCache = new MemoryCache();
        mDiskCache = new DiskCache();
    }
    private static CacheLoader loader;

    public static CacheLoader getInstance(Context context) {
        application = (Application) context.getApplicationContext();
        if (loader == null) {
            synchronized (CacheLoader.class) {
                if (loader == null) {
                    loader = new CacheLoader();
                }
            }
        }
        return loader;
    }


    public <T> Observable<T> asDataObservable(String key, Class<T> cls, NetworkCache<T> networkCache) {

        Observable observable = Observable.concat(
                memory(key, cls),
                disk(key, cls),
                network(key, cls, networkCache))
                .first(new Func1<T, Boolean>() {
                    @Override
                    public Boolean call(T t) {
                        return t != null;
                    }
                });
        return observable;
    }

    private <T> Observable<T> memory(String key, Class<T> cls) {

        return mMemoryCache.get(key, cls).doOnNext(new Action1<T>() {
            @Override
            public void call(T t) {
                if (null != t) {
                    Log.d("我是来自内存","我是来自内存");
                }
            }
        });
    }

    private <T> Observable<T> disk(final String key, Class<T> cls) {

        return mDiskCache.get(key, cls)
                .doOnNext(new Action1<T>() {
                    @Override
                    public void call(T t) {
                        if (null != t) {
                            Log.d("我是来自磁盘","我是来自磁盘");
                            mMemoryCache.put(key, t);
                        }
                    }
                });
    }

    private <T> Observable<T> network(final String key, Class<T> cls
            , NetworkCache<T> networkCache) {

        return networkCache.get(key, cls)
                .doOnNext(new Action1<T>() {
                    @Override
                    public void call(T t) {
                        if (null != t) {
                            Log.d("我是来自网络","我是来自网络");
                            mDiskCache.put(key, t);
                            mMemoryCache.put(key, t);
                        }
                    }
                });
    }


    public void clearMemory(String key) {
        ((MemoryCache)mMemoryCache).clearMemory(key);
    }



    public void clearMemoryDisk(String key) {
        ((MemoryCache)mMemoryCache).clearMemory(key);
        ((DiskCache)mDiskCache).clearDisk(key);
    }
}

5.网络获取的NetworkCache:


/**
 * Created by wukewei on 16/6/19.
 */
public abstract class NetworkCache<T> {
    public abstract Observable<T> get(String key, final Class<T> cls);
}

6.接下来看怎么使用


/**
* Created by wukewei on 16/5/30.
*/
public class ItemPresenter extends BasePresenter<ItemContract.View> implements ItemContract.Presenter {

   private static final String key = "new_list";
   protected int pn = 1;

   protected void replacePn() {
       pn = 1;
   }

   private boolean isRefresh() {
       return pn == 1;
   }

   private NetworkCache<ListPopular> networkCache;


   public ItemPresenter(Activity activity, ItemContract.View view) {
       super(activity, view);

   }

   @Override
   public void getListData(String type) {
       if (isRefresh()) mView.showLoading();
       networkCache = new NetworkCache<ListPopular>() {
           @Override
           public Observable<ListPopular> get(String key, Class<ListPopular> cls) {
               return mHotApi.getPopular(ItemPresenter.this.pn, Constants.PAGE_SIZE, type)
                       .compose(SchedulersCompat.applyIoSchedulers())
                       .compose(RxResultHelper.handleResult())
                       .flatMap(populars -> {
                           ListPopular popular = new ListPopular(populars);
                           return Observable.just(popular);
                       });
           }
       };

       Subscription subscription  = CacheLoader.getInstance(mActivity)
               .asDataObservable(key + type + ItemPresenter.this.pn, ListPopular.class, networkCache)
               .map(listPopular -> listPopular.data)
               .subscribe(populars -> {
                   mView.showContent();
                   if (isRefresh()) {
                       if (populars.size() == 0) mView.showNotdata();
                       mView.addRefreshData(populars);
                   } else {
                       mView.addLoadMoreData(populars);
                   }
               }, throwable -> {
                   if (isRefresh())
                   mView.showError(ErrorHanding.handleError(throwable));
                   handleError(throwable);
               });

       addSubscrebe(subscription);

   }
}

一定要给个key,我是根据key来获取数据的,还要就是给个类型。
但是这个我设计的这个缓存还是不是很理想,接来下想要实现的就是在传入的时候类的class都不用给明,要是有好的实现的方式,欢迎告诉我。再次给上我的github地址。谢谢

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,117评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 66,963评论 1 290
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 107,897评论 0 240
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,805评论 0 203
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,208评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,535评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,797评论 2 311
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,493评论 0 197
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,215评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,477评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,988评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,325评论 2 252
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,971评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,807评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,544评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,455评论 2 266

推荐阅读更多精彩内容