+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10165/comm /proc/101747/comm /proc/101906/comm /proc/101929/comm /proc/101951/comm /proc/101973/comm /proc/102/comm /proc/102424/comm /proc/102549/comm /proc/102660/comm /proc/103/comm /proc/104/comm /proc/104130/comm /proc/105/comm /proc/106/comm /proc/10671/comm /proc/10672/comm /proc/107597/comm /proc/108/comm /proc/108250/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110356/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/115048/comm /proc/115073/comm /proc/115600/comm /proc/115619/comm /proc/115620/comm /proc/116/comm /proc/117/comm /proc/118056/comm /proc/118080/comm /proc/118256/comm /proc/118279/comm /proc/1185/comm /proc/119302/comm /proc/119814/comm /proc/12/comm /proc/120029/comm /proc/120031/comm /proc/120299/comm /proc/120458/comm /proc/120751/comm /proc/120852/comm /proc/120908/comm /proc/120931/comm /proc/12104/comm /proc/121124/comm /proc/121141/comm /proc/121147/comm /proc/121201/comm /proc/121202/comm /proc/121212/comm /proc/12131/comm /proc/121461/comm /proc/12181/comm /proc/12213/comm /proc/12224/comm /proc/122540/comm /proc/122786/comm /proc/122824/comm /proc/122889/comm /proc/122920/comm /proc/12460/comm /proc/124849/comm /proc/12487/comm /proc/125250/comm /proc/12545/comm /proc/125640/comm /proc/12570/comm /proc/12589/comm /proc/126212/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/13/comm /proc/1379/comm /proc/1383/comm /proc/138811/comm /proc/138872/comm /proc/138873/comm /proc/139807/comm /proc/14/comm /proc/142549/comm /proc/142564/comm /proc/142565/comm /proc/142975/comm /proc/1450/comm /proc/1454/comm /proc/146086/comm /proc/146109/comm /proc/146124/comm /proc/146154/comm /proc/1463/comm /proc/146623/comm /proc/146624/comm /proc/146718/comm /proc/147046/comm /proc/147271/comm /proc/147413/comm /proc/148041/comm /proc/148603/comm /proc/148633/comm /proc/149234/comm /proc/149241/comm /proc/15/comm /proc/150146/comm /proc/151115/comm /proc/151235/comm /proc/153450/comm /proc/153976/comm /proc/154011/comm /proc/154012/comm /proc/155190/comm /proc/155191/comm /proc/16/comm /proc/162336/comm /proc/162337/comm /proc/162339/comm /proc/162340/comm /proc/162459/comm /proc/162511/comm /proc/163224/comm /proc/163249/comm /proc/163702/comm /proc/163735/comm /proc/163748/comm /proc/163784/comm /proc/163785/comm /proc/163786/comm /proc/163787/comm /proc/164387/comm /proc/164410/comm /proc/165033/comm /proc/165287/comm /proc/165452/comm /proc/165643/comm /proc/165704/comm /proc/165804/comm /proc/165829/comm /proc/165861/comm /proc/165887/comm /proc/165945/comm /proc/165946/comm /proc/165947/comm /proc/165970/comm /proc/166131/comm /proc/166150/comm /proc/166210/comm /proc/166227/comm /proc/166291/comm /proc/166304/comm /proc/166452/comm /proc/166513/comm /proc/166922/comm /proc/167/comm /proc/167121/comm /proc/167126/comm /proc/167320/comm /proc/167344/comm /proc/167529/comm /proc/167546/comm /proc/167552/comm /proc/167634/comm /proc/167635/comm /proc/167646/comm /proc/167898/comm /proc/168/comm /proc/16886/comm /proc/169/comm /proc/169408/comm /proc/169443/comm /proc/169583/comm /proc/169700/comm /proc/169723/comm /proc/169766/comm /proc/169798/comm /proc/169831/comm /proc/169864/comm /proc/169980/comm /proc/169994/comm /proc/170/comm /proc/170033/comm /proc/170106/comm /proc/170149/comm /proc/170396/comm /proc/170421/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/174046/comm /proc/175/comm /proc/175735/comm /proc/175786/comm /proc/177127/comm /proc/177148/comm /proc/177182/comm /proc/177471/comm /proc/178/comm /proc/178085/comm /proc/178086/comm /proc/178175/comm /proc/178182/comm /proc/178187/comm /proc/179768/comm /proc/179796/comm /proc/179807/comm /proc/179809/comm /proc/18/comm /proc/180/comm /proc/180311/comm /proc/180342/comm /proc/180343/comm /proc/180392/comm /proc/180407/comm /proc/180408/comm /proc/180860/comm /proc/181/comm /proc/181001/comm /proc/181114/comm /proc/181119/comm /proc/181120/comm /proc/181212/comm /proc/181213/comm /proc/181250/comm /proc/181251/comm /proc/181830/comm /proc/181831/comm /proc/181832/comm /proc/182016/comm /proc/182110/comm /proc/182134/comm /proc/182217/comm /proc/182235/comm /proc/182241/comm /proc/182452/comm /proc/182453/comm /proc/182463/comm /proc/182789/comm /proc/183/comm /proc/183778/comm /proc/183817/comm /proc/183839/comm /proc/183880/comm /proc/183889/comm /proc/184076/comm /proc/184102/comm /proc/184418/comm /proc/184639/comm /proc/184653/comm /proc/185/comm /proc/187/comm /proc/187612/comm /proc/188/comm /proc/188467/comm /proc/189/comm /proc/189671/comm /proc/189829/comm /proc/189895/comm /proc/19/comm /proc/190/comm /proc/191661/comm /proc/191685/comm /proc/192/comm /proc/192250/comm /proc/192304/comm /proc/192367/comm /proc/192391/comm /proc/192460/comm /proc/192471/comm /proc/193/comm /proc/193148/comm /proc/193247/comm /proc/193248/comm /proc/193249/comm /proc/193629/comm /proc/193665/comm /proc/193677/comm /proc/193678/comm /proc/193887/comm /proc/193888/comm /proc/193890/comm /proc/193891/comm /proc/193892/comm /proc/193893/comm /proc/193894/comm /proc/194/comm /proc/19482/comm /proc/195/comm /proc/19502/comm /proc/19523/comm /proc/19552/comm /proc/195528/comm /proc/195542/comm /proc/19569/comm /proc/195818/comm /proc/195844/comm /proc/195991/comm /proc/196008/comm /proc/196014/comm /proc/196161/comm /proc/196162/comm /proc/196194/comm /proc/196760/comm /proc/196775/comm /proc/197/comm /proc/197005/comm /proc/197006/comm /proc/197046/comm /proc/197240/comm /proc/197275/comm /proc/197485/comm /proc/197689/comm /proc/197708/comm /proc/197709/comm /proc/197710/comm /proc/197711/comm /proc/197712/comm /proc/197713/comm /proc/197747/comm /proc/197977/comm /proc/198055/comm /proc/198087/comm /proc/198101/comm /proc/198139/comm /proc/198168/comm /proc/198195/comm /proc/198216/comm /proc/198244/comm /proc/198288/comm /proc/198304/comm /proc/198335/comm /proc/198351/comm /proc/198436/comm /proc/198649/comm /proc/198650/comm /proc/198655/comm /proc/198657/comm /proc/198661/comm /proc/198664/comm /proc/198666/comm /proc/198667/comm /proc/198668/comm /proc/2/comm /proc/20/comm /proc/209/comm /proc/21/comm /proc/21637/comm /proc/21652/comm /proc/21653/comm /proc/21667/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24422/comm /proc/24700/comm /proc/24716/comm /proc/24739/comm /proc/24752/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/29152/comm /proc/292/comm /proc/293/comm /proc/29420/comm /proc/29437/comm /proc/29460/comm /proc/29473/comm /proc/295/comm /proc/296/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/315/comm /proc/316/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/33/comm /proc/33907/comm /proc/34/comm /proc/34174/comm /proc/34191/comm /proc/34215/comm /proc/34227/comm /proc/350/comm /proc/35442/comm /proc/36/comm /proc/362/comm /proc/368/comm /proc/37/comm /proc/37233/comm /proc/37235/comm /proc/38/comm /proc/380/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/39609/comm /proc/39634/comm /proc/39664/comm /proc/39666/comm /proc/39685/comm /proc/39693/comm /proc/39757/comm /proc/39769/comm /proc/39772/comm /proc/39788/comm /proc/39853/comm /proc/39872/comm /proc/399/comm /proc/39901/comm /proc/39907/comm /proc/4/comm /proc/40/comm /proc/40019/comm /proc/40083/comm /proc/40213/comm /proc/40237/comm /proc/40268/comm /proc/41080/comm /proc/41104/comm /proc/41124/comm /proc/41149/comm /proc/41369/comm /proc/41492/comm /proc/41874/comm /proc/42/comm /proc/42350/comm /proc/42375/comm /proc/42427/comm /proc/42762/comm /proc/42786/comm /proc/42817/comm /proc/42835/comm /proc/42858/comm /proc/42913/comm /proc/43/comm /proc/43239/comm /proc/43262/comm /proc/43494/comm /proc/43781/comm /proc/43803/comm /proc/43824/comm /proc/43847/comm /proc/43864/comm /proc/43887/comm /proc/44/comm /proc/44000/comm /proc/44050/comm /proc/44095/comm /proc/45/comm /proc/452/comm /proc/45871/comm /proc/45901/comm /proc/45982/comm /proc/46/comm /proc/46005/comm /proc/46220/comm /proc/46233/comm /proc/46271/comm /proc/46362/comm /proc/46772/comm /proc/468/comm /proc/46814/comm /proc/46973/comm /proc/46997/comm /proc/47053/comm /proc/47170/comm /proc/47332/comm /proc/47355/comm /proc/47483/comm /proc/47676/comm /proc/47700/comm /proc/47986/comm /proc/48/comm /proc/48009/comm /proc/48169/comm /proc/48241/comm /proc/48333/comm /proc/48421/comm /proc/48525/comm /proc/48563/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50351/comm /proc/50380/comm /proc/50514/comm /proc/50538/comm /proc/50579/comm /proc/50697/comm /proc/50896/comm /proc/51/comm /proc/51004/comm /proc/51068/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/54952/comm /proc/54976/comm /proc/55/comm /proc/55662/comm /proc/55693/comm /proc/55694/comm /proc/55724/comm /proc/55739/comm /proc/55764/comm /proc/55777/comm /proc/55918/comm /proc/55965/comm /proc/56/comm /proc/56103/comm /proc/56125/comm /proc/56145/comm /proc/56278/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/61472/comm /proc/615/comm /proc/61655/comm /proc/61681/comm /proc/61723/comm /proc/61751/comm /proc/61776/comm /proc/61791/comm /proc/618/comm /proc/61821/comm /proc/61839/comm /proc/61906/comm /proc/62/comm /proc/621/comm /proc/62141/comm /proc/62502/comm /proc/62598/comm /proc/62622/comm /proc/627/comm /proc/628/comm /proc/62880/comm /proc/62965/comm /proc/62966/comm /proc/62969/comm /proc/62970/comm /proc/62971/comm /proc/63/comm /proc/63079/comm /proc/63103/comm /proc/63220/comm /proc/63244/comm /proc/63271/comm /proc/63963/comm /proc/63964/comm /proc/63973/comm /proc/64/comm /proc/64046/comm /proc/64061/comm /proc/64064/comm /proc/643/comm /proc/64317/comm /proc/64343/comm /proc/645/comm /proc/64693/comm /proc/64763/comm /proc/64786/comm /proc/65274/comm /proc/65302/comm /proc/65410/comm /proc/65436/comm /proc/65515/comm /proc/65870/comm /proc/66/comm /proc/66043/comm /proc/66085/comm /proc/66086/comm /proc/66087/comm /proc/66088/comm /proc/66089/comm /proc/66385/comm /proc/66418/comm /proc/66439/comm /proc/66624/comm /proc/66953/comm /proc/67/comm /proc/67200/comm /proc/67234/comm /proc/68/comm /proc/68226/comm /proc/68530/comm /proc/68555/comm /proc/68609/comm /proc/68656/comm /proc/69/comm /proc/69010/comm /proc/69067/comm /proc/69108/comm /proc/69403/comm /proc/69509/comm /proc/69556/comm /proc/69585/comm /proc/69618/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/70201/comm /proc/70218/comm /proc/70224/comm /proc/70271/comm /proc/70272/comm /proc/70282/comm /proc/703/comm /proc/70452/comm /proc/70477/comm /proc/70567/comm /proc/716/comm /proc/71742/comm /proc/71765/comm /proc/72/comm /proc/72549/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75515/comm /proc/75534/comm /proc/75535/comm /proc/75536/comm /proc/75537/comm /proc/75541/comm /proc/75542/comm /proc/75544/comm /proc/75545/comm /proc/75548/comm /proc/75549/comm /proc/75550/comm /proc/75551/comm /proc/75552/comm /proc/75553/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80719/comm /proc/80720/comm /proc/80721/comm /proc/80968/comm /proc/80992/comm /proc/81/comm /proc/81200/comm /proc/81229/comm /proc/81237/comm /proc/81284/comm /proc/81285/comm /proc/81295/comm /proc/81482/comm /proc/82/comm /proc/82650/comm /proc/82674/comm /proc/82828/comm /proc/84/comm /proc/85/comm /proc/85862/comm /proc/86/comm /proc/861/comm /proc/87/comm /proc/88/comm /proc/88138/comm /proc/88150/comm /proc/88770/comm /proc/88794/comm /proc/89842/comm /proc/90/comm /proc/9059/comm /proc/9076/comm /proc/9092/comm /proc/91/comm /proc/9176/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94778/comm /proc/94801/comm /proc/95021/comm /proc/95043/comm /proc/95066/comm /proc/95185/comm /proc/95186/comm /proc/95196/comm /proc/95735/comm /proc/96/comm /proc/97/comm /proc/97568/comm /proc/97569/comm /proc/9792/comm /proc/98/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ grep HugePages_Total
++ cat /proc/meminfo
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.8zbH573GaZ.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r9e238862b53643b1ac5d5830915056dc.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD8V+9pEBroDhAAs4hHDBoE/rIZcFaspk56sg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD8V+9pEBroDhAAs4hHDBoE/rIZcFaspk56sg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD8V+9pEBroDhAAs4hHDBoE/rIZcFaspk56sg==
+ cat
+ virsh secret-define --file /tmp/tmp.8zbH573GaZ.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD8V+9pEBroDhAAs4hHDBoE/rIZcFaspk56sg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.8zbH573GaZ.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=198688
+ kill 198688
+ tail --pid=198688 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r42810374d1b24135ac2f30be2c23131e.scope