Настроить на сервере DOCKER, Apache Kafka для связки микросервисов
один передает в другой микросервис данные
на пути передачи разработать фильтр для удаления повторяющихся данных и уникальные сохранить в базу данных, а также направить в другой микросервис