обработка больших

Задача заключается в импорте больших объемов данных в бд, во время импорта, или после, будет запускаться индексация полученных данных машиной elasticsearchВремя потраченное на обработку данных может быть от нескольких минут до нескольких часов

Опишу задачу, прошу подсказки куда смотретьНадо обработать большое количество данных как можно быстрее и эффективнее

Как грамотно использовать много-поточность что бы обрабатывать большие текстовые документыДопустим у меня есть документ

Есть база данных около 500000 записейЯ ее вывел, через jquery datatables, на вебморду