Я пытаюсь запустить работу в облаке ML. Это первый, поэтому я не делаю ничего особенного (или я не знаю об этом). Я попробовал работу локально, и она работала нормально. Я представляю работу следующим образом:
gcloud ml-engine jobs submit training $JOB_NAME --job-dir $OUTPUT --module-name trainer.task --package-path trainer/ --runtime-version 1.2 -- --train-files $TRAIN_DATA --eval-files $EVAL_DATA --verbosity DEBUG
У меня есть файл setup.py, так как мне нужен tf 1.4.
Я получаю следующую ошибку в задании облачного мл:
17:37:18.590 master-replica-0 grpc epoll fd: 4
{
insertId: "3bz8czg6uycja0"
jsonPayload: {
created: 1511887038.59055
levelname: "ERROR"
lineno: 1051
message: " grpc epoll fd: 4"
pathname: "ev_epoll1_linux.c"
thread: 228
}
labels: {
compute.googleapis.com/resource_id: "56570433820965707"
compute.googleapis.com/resource_name: "cmle-training-master-93c1f629dc-0-1sbpv"
compute.googleapis.com/zone: "europe-west1-c"
ml.googleapis.com/job_id: "XXXXX"
ml.googleapis.com/job_id/log_area: "root"
ml.googleapis.com/task_name: "master-replica-0"
ml.googleapis.com/trial_id: ""
}
logName: "projects/fibi-tech/logs/master-replica-0"
receiveTimestamp: "2017-11-28T16:37:27.139888642Z"
resource: {
labels: {…}
type: "ml_job"
}
severity: "ERROR"
timestamp: "2017-11-28T16:37:18.590551137Z"
}
После ошибки больше ничего не происходит (по крайней мере, до десяти минут), и мне приходится вручную останавливать работу.
Благодарю вас!
grpc epoll fd: 3
- person rodrigo-silveira   schedule 18.12.2017google-cloud-ml-engine
. Попробуйте добавить этот тег к вашему вопросу. - person rodrigo-silveira   schedule 19.12.2017