Error when running a local experiment on Fuzzbench
blu3sh0rk opened this issue · comments
Hi~
I cant run the fuzzbench locally
Make presubmit was successful.Then I wanted to run the experiment,then run the command:
PYTHONPATH=. python3 experiment/run_experiment.py \
--experiment-config experiment-config.yaml \
--benchmarks bloaty_fuzz_target \
--experiment-name test-0832 \
--fuzzers afl libfuzzer
But
INFO:root:Starting experiment.
ERROR:root:Executed command: "make -j base-image worker" returned: 2. Extras: {'output': '0 --:--:-- 0:00:18 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:19 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:20 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:21 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:22 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:23 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:24 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:25 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:26 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:27 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:28 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:29 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:30 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:31 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:32 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:33 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:34 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:35 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:36 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:37 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:38 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:39 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:40 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:41 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:42 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:43 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:44 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:45 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:46 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:47 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:48 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:49 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:50 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:51 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:52 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:53 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:54 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:55 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:56 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:57 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:58 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:00:59 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:00 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:01 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:02 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:03 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:04 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:05 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:06 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:07 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:08 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:09 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:10 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:11 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:12 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:13 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:14 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:15 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:16 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:17 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:18 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:19 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:20 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:21 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:22 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:23 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:24 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:25 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:26 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:27 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:28 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:29 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:30 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:31 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:32 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:33 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:34 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:35 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:36 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:37 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:38 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:39 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:40 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:41 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:42 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:43 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:44 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:45 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:46 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:47 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:48 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:49 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:50 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:51 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:52 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:53 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:54 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:55 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:56 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:57 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:58 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:01:59 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:00 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:01 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:02 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:03 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:04 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:05 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:06 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:07 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:08 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:09 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:10 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:11 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:12 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:13 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:14 --:--:-- 0\r 0 0 0 0 0 0 0 0 --:--:-- 0:02:15 --:--:-- 0\n#12 completed: 2023-08-30 16:33:20.29366325 +0000 UTC\n#12 duration: 2m15.540300061s\n#12 error: "executor failed running [/bin/sh -c echo \\"deb https://packages.cloud.google.com/apt cloud-sdk main\\" | tee -a /etc/apt/sources.list.d/google-cloud-sdk.list && curl https://packages.cloud.google.com/apt/doc/apt-key.gpg | apt-key add - && apt-get update && apt-get install -y google-cloud-cli]: exit code: 2"\n#12 135.5 curl: (28) Failed to connect to packages.cloud.google.com port 443: Connection timed out\n#12 135.5 gpg: no valid OpenPGP data found.\n\nexecutor failed running [/bin/sh -c echo "deb https://packages.cloud.google.com/apt cloud-sdk main" | tee -a /etc/apt/sources.list.d/google-cloud-sdk.list && curl https://packages.cloud.google.com/apt/doc/apt-key.gpg | apt-key add - && apt-get update && apt-get install -y google-cloud-cli]: exit code: 2\nmake: *** [docker/generated.mk:61: base-image] Error 1\n'}
ERROR:root:Error conducting experiment. Extras: {'traceback': 'Traceback (most recent call last):\n File "/work/src/experiment/dispatcher.py", line 194, in main\n dispatcher_main()\n File "/work/src/experiment/dispatcher.py", line 148, in dispatcher_main\n trials = build_images_for_trials(experiment.fuzzers, experiment.benchmarks,\n File "/work/src/experiment/dispatcher.py", line 114, in build_images_for_trials\n builder.build_base_images()\n File "/work/src/experiment/build/builder.py", line 94, in build_base_images\n return buildlib.build_base_images()\n File "/work/src/experiment/build/local_build.py", line 38, in build_base_images\n return make([\'base-image\', \'worker\'])\n File "/work/src/experiment/build/local_build.py", line 33, in make\n return new_process.execute(command, cwd=utils.ROOT_DIR)\n File "/work/src/common/new_process.py", line 125, in execute\n raise subprocess.CalledProcessError(retcode, command)\nsubprocess.CalledProcessError: Command \'[\'make\', \'-j\', \'base-image\', \'worker\']\' returned non-zero exit status 2.\n'}
Traceback (most recent call last):
File "/work/src/experiment/dispatcher.py", line 212, in <module>
sys.exit(main())
File "/work/src/experiment/dispatcher.py", line 197, in main
raise error
File "/work/src/experiment/dispatcher.py", line 194, in main
dispatcher_main()
File "/work/src/experiment/dispatcher.py", line 148, in dispatcher_main
trials = build_images_for_trials(experiment.fuzzers, experiment.benchmarks,
File "/work/src/experiment/dispatcher.py", line 114, in build_images_for_trials
builder.build_base_images()
File "/work/src/experiment/build/builder.py", line 94, in build_base_images
return buildlib.build_base_images()
File "/work/src/experiment/build/local_build.py", line 38, in build_base_images
return make(['base-image', 'worker'])
File "/work/src/experiment/build/local_build.py", line 33, in make
return new_process.execute(command, cwd=utils.ROOT_DIR)
File "/work/src/common/new_process.py", line 125, in execute
raise subprocess.CalledProcessError(retcode, command)
subprocess.CalledProcessError: Command '['make', '-j', 'base-image', 'worker']' returned non-zero exit status 2.
I would try make -j base-image worker again. It should work, I think this was atemporary fail