+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101287/comm /proc/102/comm /proc/103/comm /proc/103114/comm /proc/103123/comm /proc/10328/comm /proc/103394/comm /proc/104/comm /proc/104922/comm /proc/105/comm /proc/105997/comm /proc/106/comm /proc/106382/comm /proc/106395/comm /proc/106396/comm /proc/106876/comm /proc/108/comm /proc/10833/comm /proc/10834/comm /proc/1089/comm /proc/109/comm /proc/109301/comm /proc/109326/comm /proc/109365/comm /proc/109396/comm /proc/109880/comm /proc/11/comm /proc/110/comm /proc/110237/comm /proc/110333/comm /proc/111/comm /proc/111071/comm /proc/111074/comm /proc/111623/comm /proc/111648/comm /proc/111989/comm /proc/112/comm /proc/113/comm /proc/113576/comm /proc/114/comm /proc/114345/comm /proc/114404/comm /proc/114458/comm /proc/115/comm /proc/115128/comm /proc/115196/comm /proc/115588/comm /proc/115620/comm /proc/115661/comm /proc/115662/comm /proc/116/comm /proc/116985/comm /proc/116986/comm /proc/117/comm /proc/12/comm /proc/12221/comm /proc/12251/comm /proc/12304/comm /proc/12328/comm /proc/12347/comm /proc/123928/comm /proc/123929/comm /proc/123931/comm /proc/123932/comm /proc/123949/comm /proc/124248/comm /proc/124272/comm /proc/125086/comm /proc/125152/comm /proc/125186/comm /proc/125199/comm /proc/125234/comm /proc/125235/comm /proc/125236/comm /proc/125237/comm /proc/125632/comm /proc/125659/comm /proc/12580/comm /proc/12613/comm /proc/126173/comm /proc/126196/comm /proc/126314/comm /proc/12669/comm /proc/12693/comm /proc/126960/comm /proc/126983/comm /proc/127085/comm /proc/127102/comm /proc/127109/comm /proc/12713/comm /proc/127198/comm /proc/127249/comm /proc/127250/comm /proc/128748/comm /proc/128792/comm /proc/128905/comm /proc/128981/comm /proc/129021/comm /proc/129090/comm /proc/129126/comm /proc/129244/comm /proc/129279/comm /proc/129322/comm /proc/129371/comm /proc/129374/comm /proc/129595/comm /proc/129607/comm /proc/129636/comm /proc/129699/comm /proc/129723/comm /proc/13/comm /proc/130138/comm /proc/13156/comm /proc/133219/comm /proc/133503/comm /proc/133866/comm /proc/133936/comm /proc/133944/comm /proc/133947/comm /proc/135887/comm /proc/135975/comm /proc/136953/comm /proc/136956/comm /proc/137372/comm /proc/137407/comm /proc/137408/comm /proc/137535/comm /proc/137558/comm /proc/137559/comm /proc/138259/comm /proc/138362/comm /proc/138366/comm /proc/138586/comm /proc/138588/comm /proc/138602/comm /proc/138603/comm /proc/139370/comm /proc/139395/comm /proc/139471/comm /proc/139488/comm /proc/139504/comm /proc/139560/comm /proc/139611/comm /proc/139612/comm /proc/14/comm /proc/1422/comm /proc/14400/comm /proc/147563/comm /proc/147566/comm /proc/147678/comm /proc/147684/comm /proc/147724/comm /proc/147769/comm /proc/147814/comm /proc/147903/comm /proc/147929/comm /proc/148007/comm /proc/148832/comm /proc/148948/comm /proc/14913/comm /proc/149215/comm /proc/149302/comm /proc/15/comm /proc/1540/comm /proc/1541/comm /proc/1542/comm /proc/1543/comm /proc/1547/comm /proc/155179/comm /proc/155254/comm /proc/155266/comm /proc/155382/comm /proc/155384/comm /proc/155395/comm /proc/155405/comm /proc/155774/comm /proc/157380/comm /proc/157388/comm /proc/157432/comm /proc/157997/comm /proc/159075/comm /proc/16/comm /proc/160387/comm /proc/160388/comm /proc/160715/comm /proc/1614/comm /proc/161475/comm /proc/161478/comm /proc/161591/comm /proc/161592/comm /proc/161593/comm /proc/161768/comm /proc/161787/comm /proc/1618/comm /proc/161816/comm /proc/161817/comm /proc/161831/comm /proc/161843/comm /proc/161844/comm /proc/162059/comm /proc/162060/comm /proc/162061/comm /proc/1627/comm /proc/162729/comm /proc/163034/comm /proc/163126/comm /proc/163390/comm /proc/163927/comm /proc/163945/comm /proc/164066/comm /proc/164157/comm /proc/164327/comm /proc/164328/comm /proc/164459/comm /proc/164474/comm /proc/164475/comm /proc/164476/comm /proc/164477/comm /proc/164478/comm /proc/164479/comm /proc/164531/comm /proc/164553/comm /proc/164942/comm /proc/165130/comm /proc/165199/comm /proc/165275/comm /proc/165298/comm /proc/165424/comm /proc/165425/comm /proc/165499/comm /proc/165513/comm /proc/165532/comm /proc/165539/comm /proc/165601/comm /proc/165670/comm /proc/165698/comm /proc/165713/comm /proc/165778/comm /proc/165833/comm /proc/165834/comm /proc/165986/comm /proc/165989/comm /proc/166/comm /proc/166024/comm /proc/166025/comm /proc/166026/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/17/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/176/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/183/comm /proc/185/comm /proc/18591/comm /proc/186/comm /proc/18611/comm /proc/18634/comm /proc/18660/comm /proc/18676/comm /proc/187/comm /proc/188/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/196/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/208/comm /proc/21/comm /proc/21591/comm /proc/21656/comm /proc/21657/comm /proc/21673/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/24909/comm /proc/25/comm /proc/25168/comm /proc/25185/comm /proc/25210/comm /proc/25222/comm /proc/25717/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/29393/comm /proc/29655/comm /proc/29674/comm /proc/29692/comm /proc/29717/comm /proc/29729/comm /proc/3/comm /proc/30/comm /proc/307/comm /proc/308/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/33/comm /proc/34/comm /proc/34216/comm /proc/34478/comm /proc/34496/comm /proc/34521/comm /proc/34534/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/391/comm /proc/39113/comm /proc/39116/comm /proc/39204/comm /proc/39225/comm /proc/39251/comm /proc/39281/comm /proc/39314/comm /proc/395/comm /proc/396/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/40778/comm /proc/40796/comm /proc/41769/comm /proc/41785/comm /proc/41828/comm /proc/41841/comm /proc/41843/comm /proc/41848/comm /proc/41890/comm /proc/41921/comm /proc/41923/comm /proc/41944/comm /proc/42/comm /proc/42004/comm /proc/42028/comm /proc/42045/comm /proc/42071/comm /proc/42173/comm /proc/42234/comm /proc/42377/comm /proc/42403/comm /proc/42428/comm /proc/43/comm /proc/43120/comm /proc/43122/comm /proc/43168/comm /proc/43179/comm /proc/43461/comm /proc/43540/comm /proc/43669/comm /proc/44/comm /proc/44090/comm /proc/44523/comm /proc/44547/comm /proc/44591/comm /proc/44979/comm /proc/45/comm /proc/45002/comm /proc/45018/comm /proc/45041/comm /proc/45073/comm /proc/45103/comm /proc/454/comm /proc/45449/comm /proc/45474/comm /proc/45583/comm /proc/45959/comm /proc/45983/comm /proc/46/comm /proc/46005/comm /proc/46034/comm /proc/46051/comm /proc/46076/comm /proc/46193/comm /proc/46235/comm /proc/46282/comm /proc/47880/comm /proc/47904/comm /proc/47968/comm /proc/47991/comm /proc/48/comm /proc/48257/comm /proc/48272/comm /proc/48345/comm /proc/48395/comm /proc/48690/comm /proc/48713/comm /proc/48811/comm /proc/48836/comm /proc/48889/comm /proc/49/comm /proc/49008/comm /proc/49178/comm /proc/49201/comm /proc/49529/comm /proc/49730/comm /proc/49753/comm /proc/49945/comm /proc/5/comm /proc/50/comm /proc/50074/comm /proc/50097/comm /proc/50122/comm /proc/50218/comm /proc/50314/comm /proc/50420/comm /proc/51/comm /proc/51402/comm /proc/51753/comm /proc/51776/comm /proc/51845/comm /proc/52/comm /proc/520/comm /proc/53789/comm /proc/53813/comm /proc/54/comm /proc/54345/comm /proc/54368/comm /proc/54392/comm /proc/54416/comm /proc/54548/comm /proc/54572/comm /proc/54658/comm /proc/54711/comm /proc/54797/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57582/comm /proc/57615/comm /proc/57672/comm /proc/57696/comm /proc/57710/comm /proc/57731/comm /proc/57817/comm /proc/57839/comm /proc/58/comm /proc/58044/comm /proc/58259/comm /proc/58285/comm /proc/58349/comm /proc/58449/comm /proc/58450/comm /proc/58503/comm /proc/58504/comm /proc/58734/comm /proc/58995/comm /proc/59078/comm /proc/59142/comm /proc/59166/comm /proc/59514/comm /proc/59538/comm /proc/59654/comm /proc/59676/comm /proc/59695/comm /proc/59723/comm /proc/59830/comm /proc/59914/comm /proc/59938/comm /proc/6/comm /proc/60/comm /proc/60120/comm /proc/60134/comm /proc/60135/comm /proc/60136/comm /proc/60137/comm /proc/60138/comm /proc/60234/comm /proc/60262/comm /proc/60728/comm /proc/60751/comm /proc/60896/comm /proc/60954/comm /proc/61/comm /proc/61045/comm /proc/61046/comm /proc/61047/comm /proc/611/comm /proc/61159/comm /proc/61221/comm /proc/614/comm /proc/61400/comm /proc/61525/comm /proc/61548/comm /proc/61645/comm /proc/61697/comm /proc/617/comm /proc/61791/comm /proc/62/comm /proc/62020/comm /proc/62065/comm /proc/62114/comm /proc/623/comm /proc/624/comm /proc/62407/comm /proc/62442/comm /proc/62465/comm /proc/62582/comm /proc/62687/comm /proc/62712/comm /proc/62899/comm /proc/62915/comm /proc/62922/comm /proc/62976/comm /proc/63/comm /proc/63036/comm /proc/63037/comm /proc/64/comm /proc/64175/comm /proc/642/comm /proc/64217/comm /proc/646/comm /proc/66/comm /proc/66702/comm /proc/66774/comm /proc/66775/comm /proc/66776/comm /proc/66777/comm /proc/66778/comm /proc/66779/comm /proc/66781/comm /proc/66785/comm /proc/66788/comm /proc/66789/comm /proc/66790/comm /proc/66791/comm /proc/66792/comm /proc/66793/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/69767/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/703/comm /proc/71333/comm /proc/71446/comm /proc/71470/comm /proc/71557/comm /proc/71573/comm /proc/71580/comm /proc/716/comm /proc/71634/comm /proc/71685/comm /proc/71686/comm /proc/72/comm /proc/72638/comm /proc/72663/comm /proc/73/comm /proc/73650/comm /proc/74/comm /proc/75/comm /proc/75668/comm /proc/76/comm /proc/76750/comm /proc/76766/comm /proc/77261/comm /proc/77285/comm /proc/77941/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80444/comm /proc/81/comm /proc/81787/comm /proc/81900/comm /proc/81923/comm /proc/82/comm /proc/82014/comm /proc/82033/comm /proc/82040/comm /proc/82246/comm /proc/82315/comm /proc/82316/comm /proc/82569/comm /proc/84/comm /proc/85/comm /proc/85737/comm /proc/86/comm /proc/861/comm /proc/87/comm /proc/87557/comm /proc/88/comm /proc/89705/comm /proc/89728/comm /proc/89774/comm /proc/89798/comm /proc/89936/comm /proc/9/comm /proc/90/comm /proc/90052/comm /proc/90790/comm /proc/91/comm /proc/91438/comm /proc/92/comm /proc/9225/comm /proc/9242/comm /proc/9258/comm /proc/92951/comm /proc/93/comm /proc/9340/comm /proc/93795/comm /proc/93818/comm /proc/94/comm /proc/94128/comm /proc/94140/comm /proc/94141/comm /proc/94916/comm /proc/95074/comm /proc/95098/comm /proc/95116/comm /proc/95145/comm /proc/95478/comm /proc/95566/comm /proc/95594/comm /proc/95596/comm /proc/96/comm /proc/96051/comm /proc/96618/comm /proc/96847/comm /proc/96871/comm /proc/96958/comm /proc/96974/comm /proc/96981/comm /proc/97/comm /proc/97059/comm /proc/97110/comm /proc/97111/comm /proc/98/comm /proc/98248/comm /proc/98274/comm /proc/98287/comm /proc/98316/comm /proc/99/comm /proc/9957/comm /proc/99895/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.S1Iehvkw9j.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r06de01decf0140929871f34e78f74bd0.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQB/9IlqXpIWGRAAoF+iiEnP5dxJkHH+GrAc3g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQB/9IlqXpIWGRAAoF+iiEnP5dxJkHH+GrAc3g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQB/9IlqXpIWGRAAoF+iiEnP5dxJkHH+GrAc3g==
+ cat
+ virsh secret-define --file /tmp/tmp.S1Iehvkw9j.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQB/9IlqXpIWGRAAoF+iiEnP5dxJkHH+GrAc3g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.S1Iehvkw9j.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=166049
+ kill 166049
+ tail --pid=166049 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r6d629e158e5d42d4a68a2bb36ce4b038.scope