+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100465/comm /proc/102/comm /proc/102566/comm /proc/103/comm /proc/10322/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10827/comm /proc/10828/comm /proc/108421/comm /proc/108445/comm /proc/108543/comm /proc/108772/comm /proc/108785/comm /proc/108786/comm /proc/109/comm /proc/109138/comm /proc/1096/comm /proc/109860/comm /proc/109884/comm /proc/109908/comm /proc/109962/comm /proc/11/comm /proc/110/comm /proc/110338/comm /proc/110578/comm /proc/110580/comm /proc/111/comm /proc/111215/comm /proc/111643/comm /proc/111780/comm /proc/111838/comm /proc/111862/comm /proc/112/comm /proc/112066/comm /proc/112083/comm /proc/112089/comm /proc/112136/comm /proc/112137/comm /proc/112147/comm /proc/112354/comm /proc/113/comm /proc/113695/comm /proc/113718/comm /proc/113769/comm /proc/113799/comm /proc/114/comm /proc/114297/comm /proc/115/comm /proc/115645/comm /proc/116/comm /proc/117/comm /proc/117527/comm /proc/118553/comm /proc/118600/comm /proc/118614/comm /proc/12/comm /proc/121102/comm /proc/121144/comm /proc/121940/comm /proc/121941/comm /proc/121942/comm /proc/122005/comm /proc/12267/comm /proc/12296/comm /proc/12352/comm /proc/123531/comm /proc/123544/comm /proc/123545/comm /proc/12376/comm /proc/12395/comm /proc/124948/comm /proc/12627/comm /proc/12657/comm /proc/126723/comm /proc/126748/comm /proc/126798/comm /proc/126831/comm /proc/12714/comm /proc/12738/comm /proc/127420/comm /proc/12757/comm /proc/127813/comm /proc/128056/comm /proc/128804/comm /proc/128940/comm /proc/129414/comm /proc/129479/comm /proc/13/comm /proc/131904/comm /proc/133352/comm /proc/133690/comm /proc/134203/comm /proc/134406/comm /proc/134741/comm /proc/134839/comm /proc/134840/comm /proc/136570/comm /proc/136571/comm /proc/14/comm /proc/1427/comm /proc/143901/comm /proc/143902/comm /proc/143904/comm /proc/143905/comm /proc/144065/comm /proc/15/comm /proc/1532/comm /proc/1533/comm /proc/1534/comm /proc/1535/comm /proc/1539/comm /proc/155928/comm /proc/155950/comm /proc/156316/comm /proc/156353/comm /proc/156365/comm /proc/156397/comm /proc/156398/comm /proc/156399/comm /proc/156400/comm /proc/156922/comm /proc/156948/comm /proc/157195/comm /proc/157574/comm /proc/157645/comm /proc/157949/comm /proc/157972/comm /proc/157995/comm /proc/158035/comm /proc/158254/comm /proc/158255/comm /proc/158311/comm /proc/158334/comm /proc/158377/comm /proc/158390/comm /proc/158513/comm /proc/158613/comm /proc/158753/comm /proc/158776/comm /proc/158877/comm /proc/159065/comm /proc/159070/comm /proc/159536/comm /proc/159846/comm /proc/159871/comm /proc/159955/comm /proc/159971/comm /proc/159977/comm /proc/16/comm /proc/160111/comm /proc/160112/comm /proc/160122/comm /proc/160307/comm /proc/1606/comm /proc/1610/comm /proc/1619/comm /proc/161930/comm /proc/162011/comm /proc/162063/comm /proc/162172/comm /proc/162199/comm /proc/162276/comm /proc/162301/comm /proc/162318/comm /proc/162368/comm /proc/162579/comm /proc/162624/comm /proc/162680/comm /proc/162732/comm /proc/162738/comm /proc/162959/comm /proc/162968/comm /proc/162992/comm /proc/163444/comm /proc/164/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167683/comm /proc/168/comm /proc/168018/comm /proc/168449/comm /proc/168490/comm /proc/169/comm /proc/169856/comm /proc/169866/comm /proc/170/comm /proc/170971/comm /proc/170972/comm /proc/171/comm /proc/172/comm /proc/172655/comm /proc/172658/comm /proc/172670/comm /proc/173090/comm /proc/173219/comm /proc/173241/comm /proc/173242/comm /proc/173276/comm /proc/173288/comm /proc/173289/comm /proc/173907/comm /proc/173925/comm /proc/174056/comm /proc/174176/comm /proc/174437/comm /proc/174444/comm /proc/174483/comm /proc/174485/comm /proc/174753/comm /proc/174921/comm /proc/174923/comm /proc/175/comm /proc/175117/comm /proc/175143/comm /proc/175363/comm /proc/175379/comm /proc/175385/comm /proc/175461/comm /proc/175462/comm /proc/175472/comm /proc/175597/comm /proc/176933/comm /proc/176964/comm /proc/177/comm /proc/177008/comm /proc/177040/comm /proc/177042/comm /proc/177080/comm /proc/177210/comm /proc/177254/comm /proc/177295/comm /proc/177346/comm /proc/177371/comm /proc/177391/comm /proc/177418/comm /proc/177903/comm /proc/177916/comm /proc/178/comm /proc/178065/comm /proc/178094/comm /proc/18/comm /proc/180943/comm /proc/181/comm /proc/181713/comm /proc/181734/comm /proc/181776/comm /proc/181876/comm /proc/182376/comm /proc/183/comm /proc/183070/comm /proc/183077/comm /proc/184077/comm /proc/184101/comm /proc/184613/comm /proc/184716/comm /proc/184730/comm /proc/184765/comm /proc/184848/comm /proc/184879/comm /proc/184946/comm /proc/184957/comm /proc/185/comm /proc/185946/comm /proc/186/comm /proc/186902/comm /proc/186903/comm /proc/186904/comm /proc/187/comm /proc/187126/comm /proc/187328/comm /proc/187357/comm /proc/187358/comm /proc/187372/comm /proc/187384/comm /proc/187385/comm /proc/188/comm /proc/188774/comm /proc/188873/comm /proc/188891/comm /proc/188975/comm /proc/189067/comm /proc/189376/comm /proc/189442/comm /proc/189469/comm /proc/189601/comm /proc/189612/comm /proc/189613/comm /proc/189689/comm /proc/189692/comm /proc/189696/comm /proc/189697/comm /proc/189698/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19534/comm /proc/19555/comm /proc/19578/comm /proc/196/comm /proc/19605/comm /proc/19623/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21711/comm /proc/21714/comm /proc/21715/comm /proc/21728/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24492/comm /proc/247/comm /proc/24757/comm /proc/24773/comm /proc/24798/comm /proc/24810/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29185/comm /proc/29450/comm /proc/29468/comm /proc/29493/comm /proc/29505/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/32/comm /proc/33/comm /proc/33844/comm /proc/34/comm /proc/34110/comm /proc/34127/comm /proc/34152/comm /proc/34165/comm /proc/34663/comm /proc/355/comm /proc/35748/comm /proc/35750/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/374/comm /proc/376/comm /proc/38/comm /proc/39/comm /proc/390/comm /proc/394/comm /proc/395/comm /proc/39517/comm /proc/39543/comm /proc/39569/comm /proc/39590/comm /proc/39591/comm /proc/396/comm /proc/39610/comm /proc/39635/comm /proc/39669/comm /proc/39679/comm /proc/39697/comm /proc/39767/comm /proc/39785/comm /proc/39814/comm /proc/39816/comm /proc/399/comm /proc/39938/comm /proc/39987/comm /proc/4/comm /proc/40/comm /proc/40125/comm /proc/40150/comm /proc/40182/comm /proc/40861/comm /proc/40879/comm /proc/40909/comm /proc/40924/comm /proc/41168/comm /proc/41382/comm /proc/41779/comm /proc/42/comm /proc/42125/comm /proc/42127/comm /proc/42220/comm /proc/42244/comm /proc/42283/comm /proc/42662/comm /proc/42686/comm /proc/42700/comm /proc/42724/comm /proc/42753/comm /proc/42782/comm /proc/43/comm /proc/43121/comm /proc/43145/comm /proc/43370/comm /proc/43402/comm /proc/43618/comm /proc/43641/comm /proc/43656/comm /proc/43682/comm /proc/43695/comm /proc/43725/comm /proc/43835/comm /proc/43879/comm /proc/43926/comm /proc/44/comm /proc/45/comm /proc/455/comm /proc/459/comm /proc/46/comm /proc/46024/comm /proc/46044/comm /proc/46064/comm /proc/46084/comm /proc/46152/comm /proc/46344/comm /proc/46357/comm /proc/46452/comm /proc/46800/comm /proc/46824/comm /proc/46900/comm /proc/46923/comm /proc/46972/comm /proc/47095/comm /proc/47470/comm /proc/47493/comm /proc/47617/comm /proc/47775/comm /proc/47803/comm /proc/479/comm /proc/48/comm /proc/48135/comm /proc/48159/comm /proc/48274/comm /proc/48325/comm /proc/48422/comm /proc/48462/comm /proc/48471/comm /proc/48571/comm /proc/49/comm /proc/49506/comm /proc/49643/comm /proc/5/comm /proc/50/comm /proc/50338/comm /proc/50361/comm /proc/50523/comm /proc/50547/comm /proc/50587/comm /proc/50682/comm /proc/50908/comm /proc/51/comm /proc/51000/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/54602/comm /proc/54859/comm /proc/54882/comm /proc/55/comm /proc/55503/comm /proc/55528/comm /proc/55546/comm /proc/55583/comm /proc/55601/comm /proc/55626/comm /proc/55739/comm /proc/55764/comm /proc/55837/comm /proc/55878/comm /proc/55911/comm /proc/56/comm /proc/56022/comm /proc/57/comm /proc/58/comm /proc/59792/comm /proc/59793/comm /proc/59873/comm /proc/59907/comm /proc/59977/comm /proc/6/comm /proc/60/comm /proc/60049/comm /proc/60092/comm /proc/60183/comm /proc/60207/comm /proc/60226/comm /proc/60252/comm /proc/60494/comm /proc/60768/comm /proc/61/comm /proc/61037/comm /proc/61062/comm /proc/61196/comm /proc/613/comm /proc/61314/comm /proc/61337/comm /proc/61338/comm /proc/61340/comm /proc/61341/comm /proc/61456/comm /proc/61479/comm /proc/61615/comm /proc/61640/comm /proc/617/comm /proc/619/comm /proc/61932/comm /proc/61959/comm /proc/62/comm /proc/62022/comm /proc/62057/comm /proc/62087/comm /proc/62116/comm /proc/62226/comm /proc/62227/comm /proc/62335/comm /proc/62451/comm /proc/62478/comm /proc/625/comm /proc/626/comm /proc/62849/comm /proc/62881/comm /proc/63/comm /proc/63040/comm /proc/63060/comm /proc/63061/comm /proc/63062/comm /proc/63063/comm /proc/63064/comm /proc/63155/comm /proc/63187/comm /proc/63339/comm /proc/63361/comm /proc/63438/comm /proc/63565/comm /proc/63942/comm /proc/63978/comm /proc/64/comm /proc/64130/comm /proc/64153/comm /proc/64225/comm /proc/64377/comm /proc/644/comm /proc/64411/comm /proc/64470/comm /proc/64520/comm /proc/64571/comm /proc/64614/comm /proc/64655/comm /proc/64929/comm /proc/650/comm /proc/65107/comm /proc/65323/comm /proc/65357/comm /proc/65453/comm /proc/65487/comm /proc/65520/comm /proc/65550/comm /proc/65676/comm /proc/65777/comm /proc/65803/comm /proc/66/comm /proc/66303/comm /proc/66320/comm /proc/66326/comm /proc/66506/comm /proc/66507/comm /proc/66517/comm /proc/66587/comm /proc/67/comm /proc/67825/comm /proc/67849/comm /proc/68/comm /proc/69/comm /proc/69286/comm /proc/70/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/71320/comm /proc/71335/comm /proc/71336/comm /proc/71337/comm /proc/71338/comm /proc/71339/comm /proc/71340/comm /proc/71341/comm /proc/71342/comm /proc/71343/comm /proc/71345/comm /proc/71347/comm /proc/71348/comm /proc/71349/comm /proc/71352/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77415/comm /proc/77438/comm /proc/77535/comm /proc/77552/comm /proc/77558/comm /proc/77608/comm /proc/77609/comm /proc/77619/comm /proc/77776/comm /proc/78/comm /proc/78918/comm /proc/78942/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80071/comm /proc/81/comm /proc/82/comm /proc/82592/comm /proc/83100/comm /proc/84/comm /proc/84235/comm /proc/84248/comm /proc/85/comm /proc/85024/comm /proc/85050/comm /proc/85802/comm /proc/86/comm /proc/868/comm /proc/87/comm /proc/88/comm /proc/88389/comm /proc/89783/comm /proc/90/comm /proc/91/comm /proc/91079/comm /proc/91102/comm /proc/91283/comm /proc/91299/comm /proc/91305/comm /proc/91490/comm /proc/91491/comm /proc/91501/comm /proc/91690/comm /proc/92/comm /proc/9217/comm /proc/9234/comm /proc/9250/comm /proc/93/comm /proc/9332/comm /proc/94/comm /proc/95116/comm /proc/95152/comm /proc/95182/comm /proc/95218/comm /proc/95550/comm /proc/95678/comm /proc/96/comm /proc/96335/comm /proc/97/comm /proc/98/comm /proc/99/comm /proc/9949/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.lzeyJOtmyq.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rb51775f506614faaaf24da356a8d7fc0.scope; invocation ID: d72d9d68f3944f0dbc40208cc6298437
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDV5wxqabDaNRAAAbH6Ll9HJRkiQy0dRQdLGQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDV5wxqabDaNRAAAbH6Ll9HJRkiQy0dRQdLGQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDV5wxqabDaNRAAAbH6Ll9HJRkiQy0dRQdLGQ==
+ cat
+ virsh secret-define --file /tmp/tmp.lzeyJOtmyq.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDV5wxqabDaNRAAAbH6Ll9HJRkiQy0dRQdLGQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.lzeyJOtmyq.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=189718
+ kill 189718
+ tail --pid=189718 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r98e499137620423ebc5884cd8d13915e.scope; invocation ID: e1751622fc094dbdb1e9dadb21bfc7f4