Sharding с разъемом Mongodb Hadoop
Привет У меня есть тот же случай, как упомянуто в этом вопросе Hadoop HDFS MapReduce вывод в MongoDb
Я просто хочу использовать Hadoop для выполнения Map Reduce (MR) из Mongodb, а затем выходные данные должны быть записаны обратно в MongoDB в виде коллекций. Хотя вышеупомянутый вопрос еще не решен, у меня больше проблем с этим сценарием. Здесь мне нужно, чтобы вывод MR был записан в осколки MongoDB и был правильно рассечен.
Мой вопрос, возможно ли сделать такой сценарий, так как даже когда я сделал это MR, используя MongoDB (не Hadoop), я получил вывод, не разделенный правильно на заштрихованные серверы, и получил дублированный вывод на результат. Если это возможно, как это сделать? Заранее спасибо.
1 ответ
Да. Ты пишешь в монго как обычно. Тот факт, что ваш dong монго настроен на работу с осколками, является деталью, которая скрыта от вас.