Вопросы по теме 'mesos'

Не удалось запустить ведомое устройство Mesos в кластере с одним узлом
Насколько я знаю, я могу настроить Mesos master, slave, zookeeper, marathon на одном узле. Но как только я выполняю команду для запуска mesos-master, после этого я также пытаюсь запустить mesos-slave, но у меня нет возможности продолжить выполнение...
2344 просмотров
schedule 02.01.2024

Создание нового приложения Marathon App из веб-браузера
После настройки всех Mesos Master, Slave, ZooKeeper, Marathon. Я нажимаю зеленую кнопку «Создать приложение» После того, как оно запущено на Mesos-Master и завершено состояние задачи. > Где я могу получить файл json? Из какой папки??
1909 просмотров
schedule 15.12.2023

Chronos Force Run через API
В веб-интерфейсе Chronos я могу «принудительно запустить» задания и сразу же получить результаты. Можно ли выполнить «Force Run» через Chronos REST API? Спасибо.
752 просмотров
schedule 18.11.2023

Mesos+ZooKeeper не работает нормально
Я настроил кластер Mesos из 3 узлов (A, B, C) с процессами Mesos Master/Slave и ZooKeeper, работающими в каждом контейнере Docker. Поскольку настройка кластера, включая docker run , выполняется с использованием Ansible, не должно быть никакой...
959 просмотров
schedule 06.01.2024

Есть ли тайм-аут для исполнителя, чтобы зарегистрироваться в мастере Mesos?
У меня есть кластер mesos из 200 узлов, который может одновременно запускать около 2700 исполнителей. Около 10-20% моих исполнителей ПОТЕРЯНЫ в самом начале. Они идут только до извлечения tar-файла исполнителя. WARNING: Logging before...
993 просмотров

Проблемы с использованием ограничений Marathon
Я запускаю кластер мезос + марафон, и пока все работает нормально. Но я не могу понять, как использовать ограничения в марафоне. Я пометил своих рабов мезоса атрибутами $ cat /etc/mesos-slave/attributes/category SERVICE В описание...
2104 просмотров
schedule 24.06.2022

Не удалось найти /usr/local/Cellar/mesos/0.22.1/etc/mesos/masters
Я установил mesos на mac с помощью brew. После установки я зашел в папку mesos/0.22.1/sbin и попытался запустить mesos-start-master.sh. но это не удалось с error : Failed to find /usr/local/Cellar/mesos/0.22.1/etc/mesos/masters Мой вопрос в...
256 просмотров
schedule 06.10.2022

почему серверы apache mesos masters переключаются очень быстро
У меня есть кластерная среда mesos, в которой я соединил два мастера mesos. Оба хозяина мезоса упоминаются в зоопарке. Как и ожидалось, когда один мастер выходит из строя, зоопарк должен выбрать другого мастера из кластера, но в моем случае я вижу,...
124 просмотров
schedule 03.01.2024

Выпуск ПОРТ 53 | Месос-ДНС на марафоне
Я пытаюсь настроить кластер Apache mesos с помощью mesos-dns для разрешения имен. Я также мог бы настроить кластер, но у меня возникли проблемы с запуском mesos-dns на марафоне. Я выполнил это руководство для кластера и другой для mesos-dns....
653 просмотров
schedule 13.09.2022

Понимание распределения ресурсов для искровых заданий на мезо
Я работаю над проектом в Spark и недавно перешел с использования Spark Standalone на Mesos для управления кластером. Теперь я не понимаю, как распределять ресурсы при отправке работы в новой системе. В автономном режиме я использовал что-то вроде...
4682 просмотров
schedule 28.06.2022

Spark Streaming от Kafka имеет ошибку numRecords не должен быть отрицательным
Это какая-то странная ошибка, потому что я все еще отправляю данные в kafka и получаю сообщения от kafka, и Exception in thread "main" java.lang.IllegalArgumentException: requirement failed: numRecords must not be negative тоже немного...
12404 просмотров

Как добавить дополнительных агентов в кластер mesosphere dc/os?
У нас есть версия 1.7 Mesosphere DC/OS, работающая на 6 vmware vm с rhel7, и теперь мы хотели бы добавить больше агентов. Мы смогли увеличить количество агентов с наших первоначальных 2 (vms) до 6 агентов (vms), запустив dcos_generate_confg.sh...
2177 просмотров
schedule 15.11.2022

Несколько исполнителей искры с одним и тем же spark.local.dir
Я запускаю приложение Spark в контейнере Mesos Docker, устанавливая следующие свойства. --conf 'spark.local.dir=/var/lib/spark' --conf 'spark.mesos.executor.docker.image=my_spark_docker_image' --conf...
600 просмотров
schedule 12.12.2023

Несколько экземпляров SymmetricDS на одном хосте
Я рассматриваю запуск нескольких экземпляров SymmetricDS для независимой репликации между разными средами, например. Oracle Test -> Postgres Test, Oracle Dev -> Postgres Dev. Экземпляры будут работать в контейнерах Docker в кластере Mesos,...
536 просмотров
schedule 27.12.2023

Mesos Будущее отброшено
Я пытаюсь запустить искровую работу через Mesos это выдает исключение ПРЕДУПРЕЖДЕНИЕ MesosExternalShuffleClient: невозможно зарегистрировать приложение 6c1b7274-960f-47ef-9fa7-1dd06b05d4f1-0010 с внешним сервисом случайного...
512 просмотров
schedule 14.08.2022

Долгое и постоянное ожидание между задачами в искровой потоковой передаче
У меня есть работа по потоковой передаче искр на Mesos. Все его партии занимают одно и то же время, и на этот раз намного больше, чем ожидалось. Задания извлекают данные из kafka, обрабатывают данные и вставляют их в cassandra и снова обратно в...
1696 просмотров

Spark / Mesos / Задачи потеряны, рабы занесены в черный список, исполнители удалены
Я запускаю задание с отправкой искры на Spark 2.2.0 с Scala 2.11.11, SBT на Mesos 1.4.2. У меня проблема с потерей задач и отсутствием регистрации исполнителей. Вот симптомы: MesosCoarseGrainedSchedulerBackend запускает задачи до достижения...
1277 просмотров
schedule 25.04.2024

Использование ресурсов в Docker Swarm и Mesos
Я запускаю свое приложение в качестве контейнера докеров как в Docker Swarm UCP (с использованием файла compose.yml), так и в Mesos (с использованием файла marathon.json). Я добавил ограничения ресурсов в оба файла. compose.yml: resources:...
50 просмотров

mesos http api не работает должным образом
Я пытаюсь использовать HTTP API Mesos. Я попытался подписаться на уже работающую платформу с помощью следующей команды, но она создает другую структуру вместо подписки на существующую. Кроме того, ответ не включает идентификатор mesos-stream-id,...
268 просмотров
schedule 21.03.2024