+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101701/comm /proc/102/comm /proc/102353/comm /proc/102354/comm /proc/103/comm /proc/10326/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/108616/comm /proc/108639/comm /proc/1089/comm /proc/108951/comm /proc/108964/comm /proc/108965/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110175/comm /proc/110201/comm /proc/110258/comm /proc/110287/comm /proc/110458/comm /proc/110655/comm /proc/110664/comm /proc/110737/comm /proc/11085/comm /proc/11086/comm /proc/111/comm /proc/111790/comm /proc/112/comm /proc/112160/comm /proc/112184/comm /proc/112343/comm /proc/112360/comm /proc/112366/comm /proc/112413/comm /proc/112414/comm /proc/112424/comm /proc/112533/comm /proc/113/comm /proc/114/comm /proc/114010/comm /proc/114034/comm /proc/114050/comm /proc/114074/comm /proc/114342/comm /proc/114343/comm /proc/115/comm /proc/116/comm /proc/116206/comm /proc/116229/comm /proc/116246/comm /proc/117/comm /proc/117903/comm /proc/12/comm /proc/120445/comm /proc/121366/comm /proc/122286/comm /proc/122418/comm /proc/123532/comm /proc/124028/comm /proc/124041/comm /proc/124042/comm /proc/12475/comm /proc/12508/comm /proc/12544/comm /proc/125520/comm /proc/12588/comm /proc/12600/comm /proc/127007/comm /proc/127032/comm /proc/127098/comm /proc/127121/comm /proc/127681/comm /proc/128084/comm /proc/128389/comm /proc/12840/comm /proc/12868/comm /proc/129005/comm /proc/12925/comm /proc/12949/comm /proc/129564/comm /proc/129588/comm /proc/12968/comm /proc/129902/comm /proc/13/comm /proc/130002/comm /proc/130102/comm /proc/131992/comm /proc/132135/comm /proc/133477/comm /proc/133554/comm /proc/135331/comm /proc/135344/comm /proc/135345/comm /proc/136531/comm /proc/136532/comm /proc/136533/comm /proc/14/comm /proc/1420/comm /proc/143719/comm /proc/143720/comm /proc/143722/comm /proc/143723/comm /proc/144024/comm /proc/15/comm /proc/1538/comm /proc/1539/comm /proc/1540/comm /proc/1541/comm /proc/1545/comm /proc/156134/comm /proc/156162/comm /proc/156310/comm /proc/156573/comm /proc/156614/comm /proc/156627/comm /proc/156659/comm /proc/156660/comm /proc/156661/comm /proc/156662/comm /proc/157102/comm /proc/157129/comm /proc/157155/comm /proc/157848/comm /proc/158310/comm /proc/158333/comm /proc/158357/comm /proc/158382/comm /proc/158546/comm /proc/158548/comm /proc/158600/comm /proc/158625/comm /proc/158671/comm /proc/158694/comm /proc/158844/comm /proc/158866/comm /proc/158976/comm /proc/159003/comm /proc/159191/comm /proc/159376/comm /proc/159381/comm /proc/159494/comm /proc/16/comm /proc/160015/comm /proc/160039/comm /proc/160202/comm /proc/160219/comm /proc/160225/comm /proc/160292/comm /proc/160293/comm /proc/160303/comm /proc/160651/comm /proc/1612/comm /proc/1616/comm /proc/162275/comm /proc/162302/comm /proc/162371/comm /proc/162463/comm /proc/1625/comm /proc/162514/comm /proc/162534/comm /proc/162561/comm /proc/162591/comm /proc/162630/comm /proc/162944/comm /proc/162982/comm /proc/163166/comm /proc/163191/comm /proc/163217/comm /proc/163256/comm /proc/163280/comm /proc/163346/comm /proc/167/comm /proc/167955/comm /proc/167969/comm /proc/168/comm /proc/168311/comm /proc/168660/comm /proc/168729/comm /proc/169/comm /proc/169820/comm /proc/170/comm /proc/170396/comm /proc/171/comm /proc/171106/comm /proc/171451/comm /proc/172/comm /proc/172744/comm /proc/172798/comm /proc/173/comm /proc/173359/comm /proc/173364/comm /proc/173392/comm /proc/173393/comm /proc/173394/comm /proc/173395/comm /proc/173433/comm /proc/173434/comm /proc/173435/comm /proc/173726/comm /proc/174/comm /proc/174034/comm /proc/174039/comm /proc/174245/comm /proc/174257/comm /proc/174264/comm /proc/174379/comm /proc/174380/comm /proc/174439/comm /proc/174441/comm /proc/174919/comm /proc/175/comm /proc/175125/comm /proc/175149/comm /proc/175310/comm /proc/175326/comm /proc/175332/comm /proc/175410/comm /proc/175411/comm /proc/175421/comm /proc/175663/comm /proc/176819/comm /proc/176834/comm /proc/176835/comm /proc/176836/comm /proc/176837/comm /proc/176838/comm /proc/176839/comm /proc/176925/comm /proc/177/comm /proc/177049/comm /proc/177082/comm /proc/177130/comm /proc/177135/comm /proc/177163/comm /proc/177199/comm /proc/177322/comm /proc/177342/comm /proc/177415/comm /proc/177435/comm /proc/177459/comm /proc/177481/comm /proc/177506/comm /proc/177524/comm /proc/177594/comm /proc/178027/comm /proc/178041/comm /proc/178307/comm /proc/178330/comm /proc/178430/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/183292/comm /proc/183317/comm /proc/183877/comm /proc/183913/comm /proc/183998/comm /proc/184/comm /proc/184030/comm /proc/184098/comm /proc/184109/comm /proc/185/comm /proc/186/comm /proc/186961/comm /proc/187/comm /proc/187328/comm /proc/187375/comm /proc/187376/comm /proc/187377/comm /proc/187378/comm /proc/187379/comm /proc/187380/comm /proc/187381/comm /proc/187382/comm /proc/187383/comm /proc/187384/comm /proc/187385/comm /proc/187386/comm /proc/187387/comm /proc/187388/comm /proc/187389/comm /proc/187390/comm /proc/187391/comm /proc/187392/comm /proc/187393/comm /proc/187394/comm /proc/187395/comm /proc/187396/comm /proc/187397/comm /proc/187398/comm /proc/187399/comm /proc/187400/comm /proc/187401/comm /proc/187534/comm /proc/187778/comm /proc/187822/comm /proc/187883/comm /proc/187929/comm /proc/187956/comm /proc/188/comm /proc/18812/comm /proc/188169/comm /proc/188196/comm /proc/188201/comm /proc/188202/comm /proc/188203/comm /proc/18832/comm /proc/18871/comm /proc/189/comm /proc/18907/comm /proc/18922/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/213/comm /proc/21860/comm /proc/219/comm /proc/21926/comm /proc/21927/comm /proc/21943/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25166/comm /proc/25441/comm /proc/25459/comm /proc/25484/comm /proc/25496/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/287/comm /proc/288/comm /proc/290/comm /proc/29685/comm /proc/29952/comm /proc/29968/comm /proc/29997/comm /proc/3/comm /proc/30/comm /proc/30010/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34196/comm /proc/34470/comm /proc/34491/comm /proc/34516/comm /proc/34528/comm /proc/348/comm /proc/349/comm /proc/356/comm /proc/36/comm /proc/37/comm /proc/378/comm /proc/37885/comm /proc/37887/comm /proc/38/comm /proc/389/comm /proc/39/comm /proc/390/comm /proc/394/comm /proc/395/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40228/comm /proc/40266/comm /proc/40267/comm /proc/40269/comm /proc/40285/comm /proc/40343/comm /proc/40361/comm /proc/40386/comm /proc/40391/comm /proc/40400/comm /proc/40467/comm /proc/40486/comm /proc/40513/comm /proc/40525/comm /proc/40638/comm /proc/40691/comm /proc/40840/comm /proc/40872/comm /proc/40902/comm /proc/41598/comm /proc/41618/comm /proc/41646/comm /proc/41663/comm /proc/41871/comm /proc/42/comm /proc/42104/comm /proc/42482/comm /proc/42780/comm /proc/42965/comm /proc/42988/comm /proc/43/comm /proc/43027/comm /proc/43365/comm /proc/43396/comm /proc/43399/comm /proc/43428/comm /proc/43460/comm /proc/43478/comm /proc/43824/comm /proc/43847/comm /proc/44/comm /proc/44021/comm /proc/44294/comm /proc/44320/comm /proc/44346/comm /proc/44367/comm /proc/44384/comm /proc/44408/comm /proc/44521/comm /proc/44567/comm /proc/44617/comm /proc/449/comm /proc/45/comm /proc/451/comm /proc/46/comm /proc/46439/comm /proc/46478/comm /proc/46557/comm /proc/46580/comm /proc/46797/comm /proc/46809/comm /proc/46835/comm /proc/46954/comm /proc/47285/comm /proc/47310/comm /proc/47389/comm /proc/47413/comm /proc/47458/comm /proc/47581/comm /proc/47753/comm /proc/47774/comm /proc/48/comm /proc/48107/comm /proc/48254/comm /proc/48283/comm /proc/48646/comm /proc/48669/comm /proc/48781/comm /proc/48855/comm /proc/48952/comm /proc/48981/comm /proc/49/comm /proc/49049/comm /proc/49096/comm /proc/5/comm /proc/50/comm /proc/50006/comm /proc/50778/comm /proc/50818/comm /proc/50997/comm /proc/51/comm /proc/51020/comm /proc/51062/comm /proc/51178/comm /proc/51343/comm /proc/51432/comm /proc/52/comm /proc/520/comm /proc/54/comm /proc/55/comm /proc/55212/comm /proc/55236/comm /proc/55851/comm /proc/55877/comm /proc/55918/comm /proc/55942/comm /proc/55958/comm /proc/55982/comm /proc/56/comm /proc/56187/comm /proc/56210/comm /proc/56252/comm /proc/56306/comm /proc/56348/comm /proc/56445/comm /proc/57/comm /proc/573/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60130/comm /proc/60194/comm /proc/60260/comm /proc/60371/comm /proc/60395/comm /proc/60407/comm /proc/60439/comm /proc/60455/comm /proc/60484/comm /proc/60862/comm /proc/61/comm /proc/61238/comm /proc/61296/comm /proc/613/comm /proc/61316/comm /proc/61415/comm /proc/61588/comm /proc/61589/comm /proc/616/comm /proc/61608/comm /proc/61609/comm /proc/61647/comm /proc/61818/comm /proc/61858/comm /proc/619/comm /proc/61904/comm /proc/61939/comm /proc/62/comm /proc/622/comm /proc/62311/comm /proc/62337/comm /proc/62354/comm /proc/62382/comm /proc/62401/comm /proc/62425/comm /proc/625/comm /proc/62799/comm /proc/62846/comm /proc/62870/comm /proc/63/comm /proc/63174/comm /proc/63199/comm /proc/63391/comm /proc/63465/comm /proc/63508/comm /proc/63511/comm /proc/63512/comm /proc/63514/comm /proc/63515/comm /proc/63769/comm /proc/63792/comm /proc/63951/comm /proc/64/comm /proc/64034/comm /proc/64116/comm /proc/64156/comm /proc/643/comm /proc/64486/comm /proc/64529/comm /proc/64698/comm /proc/647/comm /proc/64905/comm /proc/64921/comm /proc/64958/comm /proc/65077/comm /proc/65129/comm /proc/65171/comm /proc/65211/comm /proc/65277/comm /proc/65315/comm /proc/65631/comm /proc/65679/comm /proc/65907/comm /proc/65942/comm /proc/66/comm /proc/66037/comm /proc/66139/comm /proc/66160/comm /proc/66285/comm /proc/66309/comm /proc/66478/comm /proc/66673/comm /proc/66689/comm /proc/66695/comm /proc/66744/comm /proc/66745/comm /proc/66755/comm /proc/67/comm /proc/67092/comm /proc/68/comm /proc/68335/comm /proc/68359/comm /proc/69/comm /proc/70/comm /proc/70123/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/71511/comm /proc/71551/comm /proc/71552/comm /proc/71553/comm /proc/71554/comm /proc/71555/comm /proc/71558/comm /proc/71559/comm /proc/71560/comm /proc/71562/comm /proc/71564/comm /proc/71567/comm /proc/71568/comm /proc/71569/comm /proc/71570/comm /proc/72/comm /proc/720/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77533/comm /proc/77647/comm /proc/77670/comm /proc/77879/comm /proc/77898/comm /proc/77904/comm /proc/77951/comm /proc/77952/comm /proc/77962/comm /proc/78/comm /proc/78026/comm /proc/79/comm /proc/79302/comm /proc/79326/comm /proc/8/comm /proc/80/comm /proc/80422/comm /proc/81/comm /proc/82/comm /proc/82051/comm /proc/84/comm /proc/84075/comm /proc/84321/comm /proc/84334/comm /proc/85/comm /proc/85131/comm /proc/85155/comm /proc/85894/comm /proc/86/comm /proc/865/comm /proc/86701/comm /proc/87/comm /proc/88/comm /proc/88464/comm /proc/88465/comm /proc/9/comm /proc/90/comm /proc/90071/comm /proc/91/comm /proc/91283/comm /proc/91307/comm /proc/91534/comm /proc/91553/comm /proc/91559/comm /proc/91669/comm /proc/91670/comm /proc/91681/comm /proc/91978/comm /proc/92/comm /proc/9222/comm /proc/9239/comm /proc/9255/comm /proc/93/comm /proc/9338/comm /proc/94/comm /proc/941/comm /proc/95230/comm /proc/95255/comm /proc/95278/comm /proc/95306/comm /proc/95501/comm /proc/95591/comm /proc/96/comm /proc/96647/comm /proc/97/comm /proc/97515/comm /proc/98/comm /proc/99/comm /proc/99493/comm /proc/9956/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.aaNM0IePzZ.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r7ee693761aa8459b8b1f6181ec51f209.scope; invocation ID: 6145e64c03294f168c48c6691caaaf68
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQA8xU1qexD+FBAAMdeaDEGLGeU2oklnvT/RAg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQA8xU1qexD+FBAAMdeaDEGLGeU2oklnvT/RAg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQA8xU1qexD+FBAAMdeaDEGLGeU2oklnvT/RAg==
+ cat
+ virsh secret-define --file /tmp/tmp.aaNM0IePzZ.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQA8xU1qexD+FBAAMdeaDEGLGeU2oklnvT/RAg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.aaNM0IePzZ.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188223
+ kill 188223
+ tail --pid=188223 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rbb1953a1f05046d6b3ca59f95f7fc15b.scope; invocation ID: 3881869f54a245db90282a0c79b3f9aa