C# Конверсия индексов Jagged массива содержащего другой Jagged массив. Tilemap

Имеется объект Cell который необходимо достать из массива Maps[][] методом World.GetCell(uint x, uint y). Maps[][] в свою очередь содержит так же джаггед массивы. То есть метод должен позволять обращать к массиву как к одному целому, а не состоящему из множества. Боже упаси делать, что то вроде List<List<>> и т.д. Вопрос сложный, если что спрашиваете.

Пример как использовать данный метод для нахождения позиции тайла в пикселях:

Vector2(World.GetCell(uint x, uint y).X * размерТайла, 
         World.GetCell(uint x, uint y).Y * размерТайла,)

Небольшой график, что бы показать что я имею ввиду. Цветные цифры представляют мнимый массив индексы которого нужно получить:

Комментированный код для примера:

public static class Config
{
    public static byte MapSize = 64;
    public static ushort WorldSize = 128;
}
public enum CellType : uint
{
    SomeTypeOne,
    SomeTypeTwo
}
public struct Cell
{
    //public uint X; //Легкий вариант с сохраняемыми индексами, но жрет 
    //память ясное дело
    //public uint Y;
    public CellType CellType;
    public Cell(CellType cellType)
    {
        CellType = cellType;
    }
}
public struct Map
{
    public uint Id;
    //public uint X;
    //public uint Y;
    public Cell[][] Cells;
    public Map(uint id)
    {
        Id = id; 
        //Запихиваем прямо в конструкторе
        Cells = new Cell[Config.MapSize][];
        for (var i = 0; i < Config.MapSize; i++)
            Cells[i] = new Cell[Config.MapSize];
    }
}
public class World
{
    public Map[][] Maps = new Map[Config.WorldSize][];
    //public List<Map>; //более приемлемый вариант
    public void GetCell(uint x, uint y) =>
        throw new NotImplementedException(); //Вот сюда засунуть метод
    public World()
    {
        for (var i = 0; i < Config.WorldSize; i++)
            Maps[i] = new Map[Config.WorldSize];
    }
}

Думаю можно пробегаться через цикл, но это очень накладно особенно если массивы 64 на 64 и их много. Эпик вариант:

for(var i = 0; i < Config.WorldSize; i++)
{
    for (var j = 0; j < Config.WorldSize; j++)
    {
        for (var k = 0; k < Config.MapSize; k++)
        {
            for (var g = 0; g < Config.MapSize; g++)
            {
                var position = new Vector2(k * tileSize + i * tileSize * Config.MapSize,
                    g * tileSize + j * tileSize * Config.MapSize);
            }
        }
    }
}

///К вопросу не относиться

Кстати объект World будет весить около 2 гигов в памяти с данным кодом(Хотя со сжатием сохраняется по частям вполне норм через ZeroFormatter). Да, да знаю что грузить это надо динамически, а не все и сразу.