+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101699/comm /proc/101745/comm /proc/102/comm /proc/102374/comm /proc/103/comm /proc/10340/comm /proc/104/comm /proc/104487/comm /proc/104489/comm /proc/104706/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10849/comm /proc/10850/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1105/comm /proc/111/comm /proc/112/comm /proc/112161/comm /proc/112184/comm /proc/112288/comm /proc/112569/comm /proc/112581/comm /proc/112582/comm /proc/113/comm /proc/113702/comm /proc/113747/comm /proc/113767/comm /proc/113792/comm /proc/113986/comm /proc/114/comm /proc/114163/comm /proc/114244/comm /proc/114305/comm /proc/114308/comm /proc/114988/comm /proc/115/comm /proc/115395/comm /proc/116/comm /proc/116037/comm /proc/116060/comm /proc/116344/comm /proc/116362/comm /proc/116368/comm /proc/116470/comm /proc/116471/comm /proc/116481/comm /proc/116647/comm /proc/117/comm /proc/117860/comm /proc/117884/comm /proc/117901/comm /proc/117929/comm /proc/118459/comm /proc/12/comm /proc/122027/comm /proc/122038/comm /proc/12231/comm /proc/12260/comm /proc/12311/comm /proc/12342/comm /proc/123463/comm /proc/12354/comm /proc/124641/comm /proc/125806/comm /proc/12589/comm /proc/12618/comm /proc/12674/comm /proc/12698/comm /proc/12718/comm /proc/127988/comm /proc/128300/comm /proc/128396/comm /proc/128409/comm /proc/128410/comm /proc/129932/comm /proc/13/comm /proc/14/comm /proc/141271/comm /proc/141295/comm /proc/141317/comm /proc/141358/comm /proc/141983/comm /proc/142519/comm /proc/142712/comm /proc/1436/comm /proc/144188/comm /proc/144214/comm /proc/144762/comm /proc/145808/comm /proc/146978/comm /proc/148449/comm /proc/148909/comm /proc/15/comm /proc/150339/comm /proc/150373/comm /proc/150374/comm /proc/151646/comm /proc/151647/comm /proc/1554/comm /proc/1555/comm /proc/1556/comm /proc/1557/comm /proc/1561/comm /proc/158844/comm /proc/158849/comm /proc/158855/comm /proc/158856/comm /proc/159124/comm /proc/159133/comm /proc/159680/comm /proc/159703/comm /proc/16/comm /proc/160375/comm /proc/160376/comm /proc/160503/comm /proc/160536/comm /proc/160549/comm /proc/160581/comm /proc/160582/comm /proc/160583/comm /proc/160584/comm /proc/160912/comm /proc/161087/comm /proc/161111/comm /proc/161403/comm /proc/161936/comm /proc/161976/comm /proc/16211/comm /proc/162335/comm /proc/162366/comm /proc/162372/comm /proc/162398/comm /proc/162601/comm /proc/162610/comm /proc/162645/comm /proc/162669/comm /proc/162715/comm /proc/162730/comm /proc/1628/comm /proc/162815/comm /proc/162838/comm /proc/162917/comm /proc/163016/comm /proc/1632/comm /proc/163334/comm /proc/163520/comm /proc/163526/comm /proc/163921/comm /proc/164099/comm /proc/1641/comm /proc/164124/comm /proc/164251/comm /proc/164268/comm /proc/164274/comm /proc/164354/comm /proc/164355/comm /proc/164365/comm /proc/164627/comm /proc/166/comm /proc/166542/comm /proc/166570/comm /proc/166585/comm /proc/166616/comm /proc/166653/comm /proc/166700/comm /proc/166715/comm /proc/166756/comm /proc/166758/comm /proc/166791/comm /proc/166843/comm /proc/166883/comm /proc/166927/comm /proc/167/comm /proc/167003/comm /proc/167039/comm /proc/167379/comm /proc/167402/comm /proc/167899/comm /proc/167912/comm /proc/168/comm /proc/169/comm /proc/169251/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/173163/comm /proc/173170/comm /proc/173171/comm /proc/173177/comm /proc/173870/comm /proc/174/comm /proc/175444/comm /proc/175453/comm /proc/176803/comm /proc/177/comm /proc/179/comm /proc/179066/comm /proc/179129/comm /proc/179165/comm /proc/179166/comm /proc/179226/comm /proc/179272/comm /proc/179273/comm /proc/179296/comm /proc/179297/comm /proc/179298/comm /proc/179896/comm /proc/179902/comm /proc/18/comm /proc/180/comm /proc/180189/comm /proc/180194/comm /proc/180331/comm /proc/180335/comm /proc/180357/comm /proc/180359/comm /proc/180674/comm /proc/180927/comm /proc/180961/comm /proc/181156/comm /proc/181181/comm /proc/181261/comm /proc/181436/comm /proc/181452/comm /proc/181458/comm /proc/181537/comm /proc/181538/comm /proc/181548/comm /proc/181617/comm /proc/182/comm /proc/182434/comm /proc/182876/comm /proc/182891/comm /proc/182892/comm /proc/182893/comm /proc/182894/comm /proc/182895/comm /proc/182896/comm /proc/182966/comm /proc/183137/comm /proc/183158/comm /proc/183191/comm /proc/183220/comm /proc/183320/comm /proc/183439/comm /proc/183461/comm /proc/183483/comm /proc/183524/comm /proc/183576/comm /proc/183623/comm /proc/183675/comm /proc/183708/comm /proc/183733/comm /proc/184/comm /proc/184044/comm /proc/184058/comm /proc/184308/comm /proc/184338/comm /proc/184555/comm /proc/185/comm /proc/186/comm /proc/18695/comm /proc/187/comm /proc/18715/comm /proc/187172/comm /proc/187230/comm /proc/187256/comm /proc/187367/comm /proc/187368/comm /proc/187377/comm /proc/187378/comm /proc/18753/comm /proc/18782/comm /proc/187966/comm /proc/188/comm /proc/18800/comm /proc/188001/comm /proc/188084/comm /proc/188103/comm /proc/188184/comm /proc/188195/comm /proc/188307/comm /proc/188459/comm /proc/188472/comm /proc/189/comm /proc/189791/comm /proc/189793/comm /proc/19/comm /proc/191/comm /proc/191366/comm /proc/191390/comm /proc/191732/comm /proc/192/comm /proc/192438/comm /proc/192532/comm /proc/192684/comm /proc/192850/comm /proc/192992/comm /proc/193/comm /proc/193013/comm /proc/193092/comm /proc/193119/comm /proc/193296/comm /proc/193322/comm /proc/193336/comm /proc/193344/comm /proc/193345/comm /proc/193346/comm /proc/194/comm /proc/195/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/21391/comm /proc/217/comm /proc/21823/comm /proc/21862/comm /proc/21863/comm /proc/21876/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25105/comm /proc/25383/comm /proc/25399/comm /proc/25424/comm /proc/25436/comm /proc/26/comm /proc/26087/comm /proc/26207/comm /proc/264/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/290/comm /proc/291/comm /proc/293/comm /proc/294/comm /proc/29724/comm /proc/3/comm /proc/30/comm /proc/30003/comm /proc/30019/comm /proc/30046/comm /proc/30058/comm /proc/30819/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/326/comm /proc/33/comm /proc/34/comm /proc/34266/comm /proc/34543/comm /proc/34560/comm /proc/34585/comm /proc/34597/comm /proc/359/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/371/comm /proc/37872/comm /proc/37874/comm /proc/38/comm /proc/388/comm /proc/39/comm /proc/393/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/40228/comm /proc/40258/comm /proc/40272/comm /proc/40285/comm /proc/40300/comm /proc/40315/comm /proc/40360/comm /proc/40374/comm /proc/40391/comm /proc/40403/comm /proc/40471/comm /proc/40490/comm /proc/40515/comm /proc/40528/comm /proc/40641/comm /proc/40702/comm /proc/40851/comm /proc/40874/comm /proc/40899/comm /proc/41681/comm /proc/41704/comm /proc/41763/comm /proc/41786/comm /proc/41813/comm /proc/42/comm /proc/42077/comm /proc/42131/comm /proc/42207/comm /proc/42521/comm /proc/42984/comm /proc/43/comm /proc/43008/comm /proc/43036/comm /proc/43402/comm /proc/43425/comm /proc/43448/comm /proc/43472/comm /proc/43498/comm /proc/43548/comm /proc/43867/comm /proc/43893/comm /proc/43994/comm /proc/44/comm /proc/44174/comm /proc/44386/comm /proc/44410/comm /proc/44434/comm /proc/44442/comm /proc/44486/comm /proc/44487/comm /proc/44599/comm /proc/44646/comm /proc/44695/comm /proc/45/comm /proc/455/comm /proc/456/comm /proc/46/comm /proc/46592/comm /proc/46643/comm /proc/46670/comm /proc/46695/comm /proc/46929/comm /proc/46942/comm /proc/47067/comm /proc/47087/comm /proc/47440/comm /proc/47468/comm /proc/47510/comm /proc/47535/comm /proc/47588/comm /proc/47844/comm /proc/47867/comm /proc/47892/comm /proc/48/comm /proc/48029/comm /proc/48191/comm /proc/48214/comm /proc/48485/comm /proc/48730/comm /proc/48756/comm /proc/48886/comm /proc/48960/comm /proc/49/comm /proc/49056/comm /proc/49085/comm /proc/491/comm /proc/49152/comm /proc/49225/comm /proc/5/comm /proc/50/comm /proc/50915/comm /proc/50939/comm /proc/51/comm /proc/51137/comm /proc/51160/comm /proc/51200/comm /proc/51316/comm /proc/51493/comm /proc/51641/comm /proc/51702/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/55/comm /proc/55871/comm /proc/55895/comm /proc/56/comm /proc/56493/comm /proc/56517/comm /proc/56543/comm /proc/56568/comm /proc/56599/comm /proc/56623/comm /proc/56739/comm /proc/56762/comm /proc/56825/comm /proc/56863/comm /proc/56918/comm /proc/57/comm /proc/57013/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/61536/comm /proc/61560/comm /proc/61631/comm /proc/61650/comm /proc/61673/comm /proc/61693/comm /proc/61708/comm /proc/61732/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/62157/comm /proc/62210/comm /proc/62299/comm /proc/626/comm /proc/62678/comm /proc/629/comm /proc/62937/comm /proc/62964/comm /proc/62989/comm /proc/63/comm /proc/63219/comm /proc/63220/comm /proc/63225/comm /proc/63226/comm /proc/63431/comm /proc/63451/comm /proc/63516/comm /proc/63540/comm /proc/63569/comm /proc/63594/comm /proc/63614/comm /proc/63637/comm /proc/63729/comm /proc/63823/comm /proc/63847/comm /proc/63947/comm /proc/63948/comm /proc/64/comm /proc/64152/comm /proc/64180/comm /proc/64453/comm /proc/64477/comm /proc/645/comm /proc/64971/comm /proc/64996/comm /proc/650/comm /proc/65237/comm /proc/65262/comm /proc/65289/comm /proc/65884/comm /proc/66/comm /proc/66142/comm /proc/66166/comm /proc/66300/comm /proc/66314/comm /proc/66315/comm /proc/66316/comm /proc/66317/comm /proc/66318/comm /proc/66605/comm /proc/66646/comm /proc/67/comm /proc/67280/comm /proc/67314/comm /proc/67476/comm /proc/67500/comm /proc/67567/comm /proc/67754/comm /proc/67842/comm /proc/67976/comm /proc/68/comm /proc/68017/comm /proc/68060/comm /proc/68134/comm /proc/68163/comm /proc/68342/comm /proc/68388/comm /proc/68427/comm /proc/68920/comm /proc/68940/comm /proc/69/comm /proc/69096/comm /proc/69113/comm /proc/69131/comm /proc/69137/comm /proc/69218/comm /proc/69219/comm /proc/69229/comm /proc/69295/comm /proc/70/comm /proc/704/comm /proc/707/comm /proc/708/comm /proc/70840/comm /proc/70866/comm /proc/72/comm /proc/721/comm /proc/73/comm /proc/74/comm /proc/74016/comm /proc/74505/comm /proc/74528/comm /proc/74529/comm /proc/74530/comm /proc/74531/comm /proc/74533/comm /proc/74534/comm /proc/74538/comm /proc/74540/comm /proc/74541/comm /proc/74543/comm /proc/74544/comm /proc/74545/comm /proc/74546/comm /proc/74547/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80531/comm /proc/80556/comm /proc/80647/comm /proc/80665/comm /proc/80671/comm /proc/80838/comm /proc/80839/comm /proc/80860/comm /proc/80958/comm /proc/81/comm /proc/81962/comm /proc/81988/comm /proc/82/comm /proc/83698/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86186/comm /proc/866/comm /proc/87/comm /proc/87733/comm /proc/87769/comm /proc/88/comm /proc/88506/comm /proc/88531/comm /proc/89461/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9240/comm /proc/9257/comm /proc/9273/comm /proc/93/comm /proc/9355/comm /proc/94/comm /proc/94661/comm /proc/94956/comm /proc/94980/comm /proc/95376/comm /proc/95399/comm /proc/95405/comm /proc/95548/comm /proc/95549/comm /proc/95560/comm /proc/95691/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98987/comm /proc/99/comm /proc/99010/comm /proc/99044/comm /proc/99087/comm /proc/99413/comm /proc/99589/comm /proc/9972/comm /proc/99769/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.7aQDKkhYAz.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r361ca26295b74f9f8d9810b1779f0a43.scope; invocation ID: 5268c6c972d349fdacfb39a3cc947cb0
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCkDjVqCkQiChAA9xKV6/HNSPyAMTD71cTgFQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCkDjVqCkQiChAA9xKV6/HNSPyAMTD71cTgFQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCkDjVqCkQiChAA9xKV6/HNSPyAMTD71cTgFQ==
+ cat
+ virsh secret-define --file /tmp/tmp.7aQDKkhYAz.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCkDjVqCkQiChAA9xKV6/HNSPyAMTD71cTgFQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.7aQDKkhYAz.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193366
+ kill 193366
+ tail --pid=193366 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r5f5b7dd344f743f7b24686fba85d8637.scope; invocation ID: 2a0078e5b1d0446ba520802c44a3503b