Место менеджера памяти в проекте

Подскажите пожалуйста, вот например есть некий проект (C++), достаточно серьёзный, чтобы необходимость использовать собственный менеджер памяти была очевидной. Тем не менее, мне не совсем ясно в какой именно момент я должен его реализовать и использовать. Например, я начал с чего-то не очень сложного, интуитивно понятного и нужного в рамках проекта - определение своих классов. При их определении и реализации я не использую никаких своих/сторонних менеджеров памяти кроме того, который предоставляется компилятором. Вопрос состоит в том, надо ли сначала реализовать менеджер памяти, и уже с его использованием определять и реализовывать основные составляющие части программы, либо допускается использование управления памятью на более высоком уровне с готовыми комплексными структурами данных?

Собственно, с какой точки стоит подходить к ответу на этот вопрос? Может есть какие-то общие рекомендации, или какой стандарт?