+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100218/comm /proc/100243/comm /proc/100279/comm /proc/100363/comm /proc/100593/comm /proc/100689/comm /proc/101505/comm /proc/102/comm /proc/102338/comm /proc/103/comm /proc/10341/comm /proc/103432/comm /proc/10372/comm /proc/104/comm /proc/10427/comm /proc/105/comm /proc/105396/comm /proc/106/comm /proc/106348/comm /proc/106476/comm /proc/106838/comm /proc/108/comm /proc/109/comm /proc/10930/comm /proc/10931/comm /proc/11/comm /proc/110/comm /proc/1100/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114116/comm /proc/114139/comm /proc/114473/comm /proc/114493/comm /proc/114494/comm /proc/115/comm /proc/115823/comm /proc/115850/comm /proc/115963/comm /proc/115986/comm /proc/116/comm /proc/116365/comm /proc/116497/comm /proc/116511/comm /proc/116513/comm /proc/117/comm /proc/117405/comm /proc/117819/comm /proc/117979/comm /proc/118003/comm /proc/118228/comm /proc/118245/comm /proc/118251/comm /proc/118298/comm /proc/118299/comm /proc/118309/comm /proc/118433/comm /proc/119729/comm /proc/119754/comm /proc/119819/comm /proc/119845/comm /proc/12/comm /proc/120352/comm /proc/121819/comm /proc/121857/comm /proc/12350/comm /proc/12381/comm /proc/12437/comm /proc/12461/comm /proc/12481/comm /proc/124923/comm /proc/126507/comm /proc/12711/comm /proc/12743/comm /proc/12801/comm /proc/12831/comm /proc/12844/comm /proc/128650/comm /proc/128653/comm /proc/13/comm /proc/130183/comm /proc/130196/comm /proc/130197/comm /proc/136369/comm /proc/14/comm /proc/1431/comm /proc/143191/comm /proc/143214/comm /proc/143236/comm /proc/143276/comm /proc/143842/comm /proc/144303/comm /proc/144569/comm /proc/146293/comm /proc/146315/comm /proc/147449/comm /proc/147504/comm /proc/147510/comm /proc/148772/comm /proc/15/comm /proc/150433/comm /proc/152147/comm /proc/152173/comm /proc/152174/comm /proc/153499/comm /proc/153500/comm /proc/1549/comm /proc/1550/comm /proc/1551/comm /proc/1552/comm /proc/1556/comm /proc/16/comm /proc/160729/comm /proc/160730/comm /proc/160732/comm /proc/160733/comm /proc/160875/comm /proc/161482/comm /proc/161508/comm /proc/161574/comm /proc/161575/comm /proc/161576/comm /proc/161769/comm /proc/161805/comm /proc/161817/comm /proc/161847/comm /proc/161849/comm /proc/161851/comm /proc/161852/comm /proc/1623/comm /proc/1627/comm /proc/163087/comm /proc/163113/comm /proc/163397/comm /proc/163415/comm /proc/163541/comm /proc/163564/comm /proc/1636/comm /proc/163700/comm /proc/164075/comm /proc/164247/comm /proc/164248/comm /proc/164497/comm /proc/164521/comm /proc/164611/comm /proc/164628/comm /proc/164634/comm /proc/164837/comm /proc/164838/comm /proc/164848/comm /proc/164961/comm /proc/166509/comm /proc/16659/comm /proc/166616/comm /proc/166676/comm /proc/166801/comm /proc/166825/comm /proc/166854/comm /proc/166890/comm /proc/166978/comm /proc/167/comm /proc/167011/comm /proc/167031/comm /proc/167054/comm /proc/167101/comm /proc/167134/comm /proc/167160/comm /proc/167509/comm /proc/167532/comm /proc/167584/comm /proc/167599/comm /proc/168/comm /proc/168051/comm /proc/169/comm /proc/169787/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/172795/comm /proc/173/comm /proc/173111/comm /proc/173237/comm /proc/174/comm /proc/174445/comm /proc/174506/comm /proc/174533/comm /proc/174541/comm /proc/175/comm /proc/175725/comm /proc/177/comm /proc/177376/comm /proc/177444/comm /proc/177447/comm /proc/177972/comm /proc/177991/comm /proc/178015/comm /proc/178016/comm /proc/178017/comm /proc/178018/comm /proc/178709/comm /proc/178760/comm /proc/178764/comm /proc/178970/comm /proc/178980/comm /proc/179/comm /proc/179183/comm /proc/179185/comm /proc/179206/comm /proc/179208/comm /proc/179784/comm /proc/179797/comm /proc/179876/comm /proc/179900/comm /proc/18/comm /proc/180/comm /proc/180126/comm /proc/180143/comm /proc/180149/comm /proc/180207/comm /proc/180208/comm /proc/180218/comm /proc/180416/comm /proc/181776/comm /proc/181805/comm /proc/181844/comm /proc/181871/comm /proc/181898/comm /proc/181927/comm /proc/181937/comm /proc/181964/comm /proc/181987/comm /proc/182/comm /proc/182027/comm /proc/182323/comm /proc/182348/comm /proc/182361/comm /proc/182398/comm /proc/182612/comm /proc/182984/comm /proc/183016/comm /proc/184/comm /proc/185270/comm /proc/186/comm /proc/186175/comm /proc/186702/comm /proc/186993/comm /proc/187/comm /proc/188/comm /proc/188416/comm /proc/189/comm /proc/18907/comm /proc/18927/comm /proc/18946/comm /proc/18973/comm /proc/18994/comm /proc/19/comm /proc/190062/comm /proc/191/comm /proc/191953/comm /proc/191954/comm /proc/191955/comm /proc/192162/comm /proc/192180/comm /proc/192208/comm /proc/192209/comm /proc/192223/comm /proc/192236/comm /proc/192237/comm /proc/192545/comm /proc/192548/comm /proc/192552/comm /proc/193/comm /proc/193002/comm /proc/193057/comm /proc/193429/comm /proc/193740/comm /proc/194/comm /proc/194065/comm /proc/194111/comm /proc/194683/comm /proc/194708/comm /proc/194721/comm /proc/194761/comm /proc/194993/comm /proc/195/comm /proc/195015/comm /proc/195174/comm /proc/195413/comm /proc/195414/comm /proc/195469/comm /proc/195484/comm /proc/195485/comm /proc/195486/comm /proc/195487/comm /proc/195488/comm /proc/195489/comm /proc/195675/comm /proc/196148/comm /proc/196175/comm /proc/196301/comm /proc/196314/comm /proc/196337/comm /proc/196400/comm /proc/196451/comm /proc/196474/comm /proc/196670/comm /proc/196693/comm /proc/196699/comm /proc/196823/comm /proc/196824/comm /proc/196834/comm /proc/196887/comm /proc/196895/comm /proc/196898/comm /proc/196970/comm /proc/196971/comm /proc/196972/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/215/comm /proc/219/comm /proc/21911/comm /proc/21976/comm /proc/21977/comm /proc/21993/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25252/comm /proc/25532/comm /proc/25550/comm /proc/25575/comm /proc/25587/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/285/comm /proc/286/comm /proc/289/comm /proc/290/comm /proc/29952/comm /proc/3/comm /proc/30/comm /proc/30223/comm /proc/30240/comm /proc/30265/comm /proc/30277/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/33/comm /proc/34/comm /proc/34482/comm /proc/34758/comm /proc/34776/comm /proc/34800/comm /proc/34812/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39166/comm /proc/39172/comm /proc/39268/comm /proc/39289/comm /proc/393/comm /proc/39336/comm /proc/39362/comm /proc/39377/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/41888/comm /proc/41895/comm /proc/41934/comm /proc/41942/comm /proc/41948/comm /proc/41995/comm /proc/42/comm /proc/42002/comm /proc/42030/comm /proc/42048/comm /proc/42062/comm /proc/42135/comm /proc/42148/comm /proc/42167/comm /proc/42216/comm /proc/42290/comm /proc/42354/comm /proc/42488/comm /proc/42514/comm /proc/42544/comm /proc/43/comm /proc/43231/comm /proc/43254/comm /proc/43268/comm /proc/43291/comm /proc/43430/comm /proc/43535/comm /proc/43755/comm /proc/43831/comm /proc/44/comm /proc/44135/comm /proc/44591/comm /proc/44615/comm /proc/44640/comm /proc/449/comm /proc/44999/comm /proc/45/comm /proc/45020/comm /proc/45036/comm /proc/45061/comm /proc/45090/comm /proc/45109/comm /proc/452/comm /proc/45468/comm /proc/45493/comm /proc/45695/comm /proc/45964/comm /proc/45989/comm /proc/46/comm /proc/46025/comm /proc/46048/comm /proc/46062/comm /proc/46088/comm /proc/46199/comm /proc/46245/comm /proc/46290/comm /proc/48/comm /proc/48125/comm /proc/48155/comm /proc/48239/comm /proc/48262/comm /proc/48636/comm /proc/48649/comm /proc/48719/comm /proc/48794/comm /proc/49/comm /proc/49111/comm /proc/49135/comm /proc/49214/comm /proc/49238/comm /proc/49284/comm /proc/49412/comm /proc/49580/comm /proc/49605/comm /proc/49723/comm /proc/49887/comm /proc/49910/comm /proc/5/comm /proc/50/comm /proc/50259/comm /proc/50282/comm /proc/50405/comm /proc/50482/comm /proc/50579/comm /proc/50632/comm /proc/50700/comm /proc/50773/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/52506/comm /proc/52529/comm /proc/52642/comm /proc/52824/comm /proc/52847/comm /proc/52912/comm /proc/53022/comm /proc/53200/comm /proc/53264/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/574/comm /proc/58/comm /proc/58346/comm /proc/58373/comm /proc/59049/comm /proc/59073/comm /proc/59084/comm /proc/59123/comm /proc/59140/comm /proc/59173/comm /proc/59326/comm /proc/59349/comm /proc/59388/comm /proc/59430/comm /proc/59534/comm /proc/59649/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/617/comm /proc/62/comm /proc/620/comm /proc/626/comm /proc/627/comm /proc/63/comm /proc/64/comm /proc/64393/comm /proc/64440/comm /proc/645/comm /proc/64563/comm /proc/64591/comm /proc/646/comm /proc/64610/comm /proc/64634/comm /proc/64647/comm /proc/64672/comm /proc/64831/comm /proc/64833/comm /proc/65083/comm /proc/65107/comm /proc/65180/comm /proc/65194/comm /proc/65283/comm /proc/65284/comm /proc/65289/comm /proc/65290/comm /proc/65403/comm /proc/65850/comm /proc/66/comm /proc/66283/comm /proc/66308/comm /proc/66348/comm /proc/66372/comm /proc/66386/comm /proc/66412/comm /proc/66530/comm /proc/66556/comm /proc/66986/comm /proc/67/comm /proc/67008/comm /proc/67033/comm /proc/67057/comm /proc/67127/comm /proc/67477/comm /proc/67500/comm /proc/67615/comm /proc/67714/comm /proc/67759/comm /proc/67783/comm /proc/67868/comm /proc/68/comm /proc/68079/comm /proc/68112/comm /proc/68113/comm /proc/68114/comm /proc/68115/comm /proc/68116/comm /proc/68342/comm /proc/68442/comm /proc/68469/comm /proc/68828/comm /proc/68866/comm /proc/69/comm /proc/69120/comm /proc/69143/comm /proc/69169/comm /proc/69275/comm /proc/69307/comm /proc/69345/comm /proc/69363/comm /proc/69512/comm /proc/69595/comm /proc/69761/comm /proc/69823/comm /proc/69876/comm /proc/70/comm /proc/70015/comm /proc/70061/comm /proc/70127/comm /proc/70145/comm /proc/704/comm /proc/707/comm /proc/70738/comm /proc/70761/comm /proc/708/comm /proc/71022/comm /proc/71039/comm /proc/71045/comm /proc/71206/comm /proc/71207/comm /proc/71217/comm /proc/71305/comm /proc/72/comm /proc/722/comm /proc/72672/comm /proc/72696/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76088/comm /proc/76106/comm /proc/76107/comm /proc/76108/comm /proc/76109/comm /proc/76110/comm /proc/76113/comm /proc/76115/comm /proc/76116/comm /proc/76117/comm /proc/76118/comm /proc/76121/comm /proc/76122/comm /proc/76124/comm /proc/76125/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80132/comm /proc/81/comm /proc/82/comm /proc/82182/comm /proc/82205/comm /proc/82378/comm /proc/82395/comm /proc/82401/comm /proc/82456/comm /proc/82457/comm /proc/82467/comm /proc/82555/comm /proc/83705/comm /proc/83726/comm /proc/84/comm /proc/84974/comm /proc/85/comm /proc/86/comm /proc/867/comm /proc/87/comm /proc/87726/comm /proc/87802/comm /proc/88/comm /proc/89195/comm /proc/89349/comm /proc/89364/comm /proc/9/comm /proc/90/comm /proc/90180/comm /proc/90204/comm /proc/91/comm /proc/91021/comm /proc/92/comm /proc/9235/comm /proc/9252/comm /proc/9268/comm /proc/93/comm /proc/9351/comm /proc/94/comm /proc/94961/comm /proc/96/comm /proc/97/comm /proc/97053/comm /proc/97079/comm /proc/97361/comm /proc/97380/comm /proc/97387/comm /proc/97500/comm /proc/97501/comm /proc/97511/comm /proc/97748/comm /proc/98/comm /proc/99/comm /proc/9971/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ugHF1gtkHI.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r18488e66115341dca242b2ad2dc4f3e9.scope; invocation ID: 3c1bcb7c048f4e1582ee532496cdba93
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBMTadqzZHiJhAApv190QNYp5+qKCcKywqcRg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBMTadqzZHiJhAApv190QNYp5+qKCcKywqcRg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBMTadqzZHiJhAApv190QNYp5+qKCcKywqcRg==
+ cat
+ virsh secret-define --file /tmp/tmp.ugHF1gtkHI.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBMTadqzZHiJhAApv190QNYp5+qKCcKywqcRg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ugHF1gtkHI.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=196992
+ kill 196992
+ tail --pid=196992 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re9b8bc72aca54fcf8a63652d93b4589c.scope; invocation ID: 326ad58cbe5f4fa6bcbbb9feafc12899