Как сохранять состояние RecyclerView?

На данный момент приложение сохраняет состояние RecyclerView при выходе на рабочий стол через клавишу Home. Однако, если я уйду на другой фрагмент, или выйду на рабочий стол клавишей "Назад", и вернусь обратно во фрагмент- состояние RecyclerView не сохранится!

Как сохраняю сейчас:

@Nullable @BindView(R.id.feedList) RecyclerView recyclerView;
@Override
public void onSaveInstanceState(Bundle outState){
    super.onSaveInstanceState(outState);
    //If we catch an exception, it means that recyclerView is not yet created.
    try{
        outState.putParcelable(RECYCLER_VIEW_STATE, recyclerView.getLayoutManager().onSaveInstanceState());
    } catch(Exception ex){
        ex.printStackTrace();
    }
}
@Override
public void onViewStateRestored(@Nullable Bundle savedInstanceState){
    super.onViewStateRestored(savedInstanceState);
    //If we catch an exception, it means that recyclerView is not yet created.
    try{
        layoutManagerState = savedInstanceState.getParcelable(RECYCLER_VIEW_STATE);
    } catch(Exception ex){
        ex.printStackTrace();
    }
}

@Override
public void onResume(){
    super.onResume();
    if(layoutManagerState != null &&
            recyclerView != null &&
            recyclerView.getLayoutManager() != null){
        recyclerView.getLayoutManager().onRestoreInstanceState(layoutManagerState);
    }
}
@Override
public void onPause(){
    super.onPause();
    if(layoutManagerState != null && recyclerView != null){
        layoutManagerState = recyclerView.getLayoutManager().onSaveInstanceState();
    }
}