+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100136/comm /proc/100573/comm /proc/102/comm /proc/102660/comm /proc/102694/comm /proc/103/comm /proc/10352/comm /proc/10376/comm /proc/104/comm /proc/105/comm /proc/105295/comm /proc/106/comm /proc/106289/comm /proc/106311/comm /proc/106755/comm /proc/106770/comm /proc/106771/comm /proc/107755/comm /proc/107782/comm /proc/107809/comm /proc/107834/comm /proc/108/comm /proc/108257/comm /proc/108414/comm /proc/108417/comm /proc/108420/comm /proc/109/comm /proc/109559/comm /proc/109653/comm /proc/109796/comm /proc/109819/comm /proc/109933/comm /proc/109949/comm /proc/109955/comm /proc/11/comm /proc/110/comm /proc/110050/comm /proc/110051/comm /proc/110061/comm /proc/110342/comm /proc/111/comm /proc/1110/comm /proc/11113/comm /proc/11114/comm /proc/111304/comm /proc/111549/comm /proc/111574/comm /proc/111588/comm /proc/111612/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114206/comm /proc/115/comm /proc/115277/comm /proc/115312/comm /proc/116/comm /proc/116340/comm /proc/117/comm /proc/12/comm /proc/120683/comm /proc/121125/comm /proc/121138/comm /proc/121139/comm /proc/121468/comm /proc/122342/comm /proc/124806/comm /proc/124830/comm /proc/124888/comm /proc/124913/comm /proc/12496/comm /proc/12527/comm /proc/125465/comm /proc/12563/comm /proc/125794/comm /proc/125962/comm /proc/12608/comm /proc/12620/comm /proc/126640/comm /proc/127260/comm /proc/127285/comm /proc/128498/comm /proc/128510/comm /proc/128512/comm /proc/12858/comm /proc/12891/comm /proc/12948/comm /proc/129532/comm /proc/12972/comm /proc/12992/comm /proc/13/comm /proc/130594/comm /proc/130663/comm /proc/130964/comm /proc/131533/comm /proc/132173/comm /proc/132200/comm /proc/132201/comm /proc/133773/comm /proc/133774/comm /proc/14/comm /proc/140718/comm /proc/140719/comm /proc/140721/comm /proc/140722/comm /proc/140861/comm /proc/141547/comm /proc/141573/comm /proc/141927/comm /proc/141962/comm /proc/141975/comm /proc/142007/comm /proc/142008/comm /proc/142009/comm /proc/142010/comm /proc/142263/comm /proc/142275/comm /proc/142458/comm /proc/142534/comm /proc/142559/comm /proc/143380/comm /proc/143664/comm /proc/143687/comm /proc/143700/comm /proc/143727/comm /proc/143816/comm /proc/143871/comm /proc/143887/comm /proc/143936/comm /proc/143959/comm /proc/144011/comm /proc/144029/comm /proc/144115/comm /proc/144174/comm /proc/144217/comm /proc/144241/comm /proc/1443/comm /proc/144545/comm /proc/144808/comm /proc/144813/comm /proc/145244/comm /proc/145351/comm /proc/145376/comm /proc/145480/comm /proc/145497/comm /proc/145504/comm /proc/145771/comm /proc/145773/comm /proc/145799/comm /proc/146088/comm /proc/147243/comm /proc/147427/comm /proc/147451/comm /proc/147488/comm /proc/147847/comm /proc/147888/comm /proc/147965/comm /proc/147994/comm /proc/148064/comm /proc/148158/comm /proc/148186/comm /proc/148303/comm /proc/148326/comm /proc/148382/comm /proc/148415/comm /proc/148439/comm /proc/148533/comm /proc/148557/comm /proc/15/comm /proc/153086/comm /proc/153100/comm /proc/153566/comm /proc/153817/comm /proc/1561/comm /proc/1562/comm /proc/1563/comm /proc/1564/comm /proc/1568/comm /proc/16/comm /proc/1635/comm /proc/1639/comm /proc/1648/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169438/comm /proc/169439/comm /proc/169440/comm /proc/169445/comm /proc/170/comm /proc/170995/comm /proc/171/comm /proc/171393/comm /proc/171430/comm /proc/171431/comm /proc/171502/comm /proc/171517/comm /proc/171518/comm /proc/172/comm /proc/172585/comm /proc/172725/comm /proc/172934/comm /proc/172935/comm /proc/173/comm /proc/173085/comm /proc/173086/comm /proc/173795/comm /proc/174/comm /proc/174047/comm /proc/174071/comm /proc/174152/comm /proc/174169/comm /proc/174175/comm /proc/174328/comm /proc/174329/comm /proc/174339/comm /proc/174613/comm /proc/175/comm /proc/175769/comm /proc/175799/comm /proc/175818/comm /proc/175860/comm /proc/175873/comm /proc/176223/comm /proc/176248/comm /proc/176728/comm /proc/176742/comm /proc/176809/comm /proc/176844/comm /proc/178/comm /proc/178570/comm /proc/179/comm /proc/179344/comm /proc/179392/comm /proc/179393/comm /proc/18/comm /proc/181/comm /proc/181258/comm /proc/181264/comm /proc/182214/comm /proc/182218/comm /proc/183/comm /proc/183626/comm /proc/183650/comm /proc/184/comm /proc/184062/comm /proc/184172/comm /proc/184185/comm /proc/184220/comm /proc/184298/comm /proc/184320/comm /proc/184398/comm /proc/184409/comm /proc/184580/comm /proc/184581/comm /proc/184582/comm /proc/185/comm /proc/185015/comm /proc/185047/comm /proc/185061/comm /proc/185062/comm /proc/185278/comm /proc/185279/comm /proc/185318/comm /proc/185320/comm /proc/185328/comm /proc/185331/comm /proc/185342/comm /proc/186/comm /proc/186075/comm /proc/186367/comm /proc/186405/comm /proc/186407/comm /proc/186650/comm /proc/186682/comm /proc/186803/comm /proc/186820/comm /proc/186826/comm /proc/187/comm /proc/187007/comm /proc/187008/comm /proc/187018/comm /proc/187440/comm /proc/188/comm /proc/188460/comm /proc/188475/comm /proc/188476/comm /proc/188477/comm /proc/188478/comm /proc/188479/comm /proc/188480/comm /proc/188566/comm /proc/188567/comm /proc/18858/comm /proc/18879/comm /proc/188851/comm /proc/188878/comm /proc/188930/comm /proc/189/comm /proc/18901/comm /proc/189069/comm /proc/189109/comm /proc/189164/comm /proc/189165/comm /proc/189266/comm /proc/18929/comm /proc/189310/comm /proc/189389/comm /proc/189390/comm /proc/18946/comm /proc/189462/comm /proc/189467/comm /proc/189469/comm /proc/189721/comm /proc/189850/comm /proc/189987/comm /proc/19/comm /proc/190/comm /proc/190124/comm /proc/190148/comm /proc/190401/comm /proc/190452/comm /proc/190478/comm /proc/190501/comm /proc/190730/comm /proc/190764/comm /proc/190769/comm /proc/190770/comm /proc/190771/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/211/comm /proc/21911/comm /proc/21962/comm /proc/21964/comm /proc/21977/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25235/comm /proc/25516/comm /proc/25533/comm /proc/25558/comm /proc/25570/comm /proc/26/comm /proc/264/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/291/comm /proc/292/comm /proc/3/comm /proc/30/comm /proc/30042/comm /proc/30327/comm /proc/30346/comm /proc/30370/comm /proc/30382/comm /proc/31/comm /proc/31057/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/343/comm /proc/34797/comm /proc/350/comm /proc/35076/comm /proc/35094/comm /proc/35119/comm /proc/35132/comm /proc/352/comm /proc/35627/comm /proc/359/comm /proc/36/comm /proc/367/comm /proc/37/comm /proc/378/comm /proc/38/comm /proc/38492/comm /proc/38506/comm /proc/38508/comm /proc/39/comm /proc/393/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/40869/comm /proc/40916/comm /proc/40918/comm /proc/40930/comm /proc/40944/comm /proc/40948/comm /proc/41014/comm /proc/41019/comm /proc/41023/comm /proc/41045/comm /proc/41109/comm /proc/41127/comm /proc/41149/comm /proc/41164/comm /proc/41273/comm /proc/41334/comm /proc/41356/comm /proc/41494/comm /proc/41516/comm /proc/41547/comm /proc/42/comm /proc/42213/comm /proc/42228/comm /proc/42267/comm /proc/42271/comm /proc/42495/comm /proc/42739/comm /proc/43/comm /proc/43118/comm /proc/43585/comm /proc/436/comm /proc/43609/comm /proc/43645/comm /proc/44/comm /proc/44037/comm /proc/44061/comm /proc/44077/comm /proc/44101/comm /proc/44131/comm /proc/44156/comm /proc/44506/comm /proc/44530/comm /proc/44632/comm /proc/44838/comm /proc/44959/comm /proc/44986/comm /proc/45/comm /proc/45014/comm /proc/45038/comm /proc/45053/comm /proc/45076/comm /proc/451/comm /proc/45186/comm /proc/45233/comm /proc/45281/comm /proc/453/comm /proc/45371/comm /proc/457/comm /proc/46/comm /proc/46851/comm /proc/46881/comm /proc/46929/comm /proc/46952/comm /proc/47172/comm /proc/47184/comm /proc/47213/comm /proc/47329/comm /proc/47661/comm /proc/47684/comm /proc/47782/comm /proc/47806/comm /proc/47830/comm /proc/47893/comm /proc/48/comm /proc/48129/comm /proc/48153/comm /proc/48486/comm /proc/48645/comm /proc/48668/comm /proc/49/comm /proc/49056/comm /proc/49080/comm /proc/49107/comm /proc/49188/comm /proc/49262/comm /proc/49360/comm /proc/49385/comm /proc/49470/comm /proc/5/comm /proc/50/comm /proc/50942/comm /proc/50944/comm /proc/51/comm /proc/51194/comm /proc/51217/comm /proc/51304/comm /proc/51328/comm /proc/51424/comm /proc/51536/comm /proc/51730/comm /proc/51808/comm /proc/51866/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/55/comm /proc/55600/comm /proc/55623/comm /proc/56/comm /proc/56235/comm /proc/56262/comm /proc/56298/comm /proc/56321/comm /proc/56338/comm /proc/56367/comm /proc/56524/comm /proc/56548/comm /proc/56593/comm /proc/56628/comm /proc/56666/comm /proc/56717/comm /proc/57/comm /proc/58/comm /proc/58220/comm /proc/6/comm /proc/60/comm /proc/60255/comm /proc/60299/comm /proc/60402/comm /proc/60430/comm /proc/60534/comm /proc/60557/comm /proc/60580/comm /proc/60602/comm /proc/60620/comm /proc/60713/comm /proc/60947/comm /proc/61/comm /proc/61139/comm /proc/61271/comm /proc/614/comm /proc/61579/comm /proc/61667/comm /proc/617/comm /proc/61790/comm /proc/61852/comm /proc/61853/comm /proc/61866/comm /proc/61867/comm /proc/61884/comm /proc/61919/comm /proc/62/comm /proc/620/comm /proc/62064/comm /proc/62086/comm /proc/62564/comm /proc/62592/comm /proc/626/comm /proc/62609/comm /proc/62637/comm /proc/62668/comm /proc/627/comm /proc/62708/comm /proc/63/comm /proc/63047/comm /proc/63071/comm /proc/63092/comm /proc/63318/comm /proc/63523/comm /proc/63548/comm /proc/63773/comm /proc/63797/comm /proc/63860/comm /proc/63875/comm /proc/63876/comm /proc/63877/comm /proc/63878/comm /proc/63879/comm /proc/64/comm /proc/64272/comm /proc/64295/comm /proc/643/comm /proc/64331/comm /proc/64365/comm /proc/64436/comm /proc/645/comm /proc/64863/comm /proc/64917/comm /proc/65037/comm /proc/65062/comm /proc/65155/comm /proc/65197/comm /proc/65268/comm /proc/65439/comm /proc/65490/comm /proc/65538/comm /proc/65641/comm /proc/65768/comm /proc/66/comm /proc/66043/comm /proc/66082/comm /proc/66156/comm /proc/66221/comm /proc/66243/comm /proc/66281/comm /proc/66401/comm /proc/66425/comm /proc/66763/comm /proc/66781/comm /proc/66787/comm /proc/66836/comm /proc/66837/comm /proc/66847/comm /proc/67/comm /proc/67151/comm /proc/68/comm /proc/68473/comm /proc/68497/comm /proc/69/comm /proc/70/comm /proc/707/comm /proc/710/comm /proc/711/comm /proc/716/comm /proc/71729/comm /proc/71754/comm /proc/71755/comm /proc/71756/comm /proc/71757/comm /proc/71761/comm /proc/71763/comm /proc/71765/comm /proc/71767/comm /proc/71768/comm /proc/71769/comm /proc/71770/comm /proc/71771/comm /proc/71772/comm /proc/71773/comm /proc/72/comm /proc/72229/comm /proc/725/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75676/comm /proc/76/comm /proc/77482/comm /proc/77506/comm /proc/77652/comm /proc/77669/comm /proc/77675/comm /proc/77722/comm /proc/77723/comm /proc/77733/comm /proc/77983/comm /proc/78/comm /proc/78541/comm /proc/78768/comm /proc/78792/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80040/comm /proc/80801/comm /proc/81/comm /proc/81613/comm /proc/81614/comm /proc/82/comm /proc/83974/comm /proc/83987/comm /proc/84/comm /proc/84652/comm /proc/84677/comm /proc/85/comm /proc/85592/comm /proc/86/comm /proc/87/comm /proc/872/comm /proc/88/comm /proc/90/comm /proc/90557/comm /proc/90581/comm /proc/90694/comm /proc/90728/comm /proc/90736/comm /proc/90874/comm /proc/90875/comm /proc/90885/comm /proc/91/comm /proc/91229/comm /proc/92/comm /proc/9245/comm /proc/9262/comm /proc/9278/comm /proc/93/comm /proc/9360/comm /proc/94/comm /proc/96/comm /proc/96515/comm /proc/96943/comm /proc/96968/comm /proc/96989/comm /proc/97/comm /proc/97014/comm /proc/97122/comm /proc/97233/comm /proc/98/comm /proc/98355/comm /proc/99/comm /proc/9980/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.sPA8Abp55O.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r8753c2ab2ad845898e2f415afe931b10.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDd/05qhnd4AhAAzZgifIG2Icda2cP+CtmBfg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDd/05qhnd4AhAAzZgifIG2Icda2cP+CtmBfg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDd/05qhnd4AhAAzZgifIG2Icda2cP+CtmBfg==
+ cat
+ virsh secret-define --file /tmp/tmp.sPA8Abp55O.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDd/05qhnd4AhAAzZgifIG2Icda2cP+CtmBfg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.sPA8Abp55O.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190791
+ kill 190791
+ tail --pid=190791 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rb74f1cee9c3547bb8893c92639282b59.scope