+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100137/comm /proc/100209/comm /proc/100988/comm /proc/102/comm /proc/103/comm /proc/103380/comm /proc/10340/comm /proc/10362/comm /proc/104/comm /proc/105/comm /proc/105601/comm /proc/106/comm /proc/10615/comm /proc/107904/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1107/comm /proc/111/comm /proc/11104/comm /proc/11105/comm /proc/112/comm /proc/113/comm /proc/113601/comm /proc/113624/comm /proc/114/comm /proc/114065/comm /proc/114078/comm /proc/114079/comm /proc/115/comm /proc/115169/comm /proc/115195/comm /proc/115223/comm /proc/115247/comm /proc/115502/comm /proc/115656/comm /proc/116/comm /proc/116062/comm /proc/116063/comm /proc/116944/comm /proc/117/comm /proc/117052/comm /proc/117054/comm /proc/117230/comm /proc/117263/comm /proc/117348/comm /proc/117365/comm /proc/117371/comm /proc/117526/comm /proc/117527/comm /proc/117537/comm /proc/117676/comm /proc/119105/comm /proc/119129/comm /proc/119145/comm /proc/119173/comm /proc/119387/comm /proc/119729/comm /proc/12/comm /proc/121428/comm /proc/121430/comm /proc/121629/comm /proc/121637/comm /proc/122247/comm /proc/124345/comm /proc/124388/comm /proc/12496/comm /proc/12528/comm /proc/12578/comm /proc/12609/comm /proc/12622/comm /proc/127215/comm /proc/12860/comm /proc/12888/comm /proc/12945/comm /proc/129687/comm /proc/12970/comm /proc/129700/comm /proc/129701/comm /proc/12989/comm /proc/13/comm /proc/131262/comm /proc/132265/comm /proc/132289/comm /proc/132325/comm /proc/132355/comm /proc/132893/comm /proc/133332/comm /proc/133518/comm /proc/134134/comm /proc/134336/comm /proc/14/comm /proc/142720/comm /proc/142802/comm /proc/1438/comm /proc/147128/comm /proc/147631/comm /proc/147632/comm /proc/148732/comm /proc/15/comm /proc/150206/comm /proc/150456/comm /proc/150737/comm /proc/150738/comm /proc/152100/comm /proc/152135/comm /proc/152136/comm /proc/154560/comm /proc/154561/comm /proc/1556/comm /proc/1557/comm /proc/1558/comm /proc/1559/comm /proc/1563/comm /proc/16/comm /proc/161617/comm /proc/161618/comm /proc/161620/comm /proc/161621/comm /proc/161851/comm /proc/162590/comm /proc/162614/comm /proc/162710/comm /proc/162800/comm /proc/162969/comm /proc/1630/comm /proc/163011/comm /proc/163049/comm /proc/163081/comm /proc/163082/comm /proc/163083/comm /proc/163084/comm /proc/163379/comm /proc/1634/comm /proc/163588/comm /proc/163616/comm /proc/1643/comm /proc/164458/comm /proc/164466/comm /proc/164468/comm /proc/164709/comm /proc/164736/comm /proc/164841/comm /proc/164883/comm /proc/165/comm /proc/165018/comm /proc/165029/comm /proc/165064/comm /proc/165086/comm /proc/165132/comm /proc/165151/comm /proc/165301/comm /proc/165323/comm /proc/165521/comm /proc/165545/comm /proc/165683/comm /proc/165940/comm /proc/165945/comm /proc/166/comm /proc/166085/comm /proc/166736/comm /proc/166759/comm /proc/167/comm /proc/167003/comm /proc/167020/comm /proc/167026/comm /proc/167117/comm /proc/167118/comm /proc/167128/comm /proc/167309/comm /proc/168/comm /proc/168842/comm /proc/168924/comm /proc/169/comm /proc/169006/comm /proc/169119/comm /proc/169154/comm /proc/169167/comm /proc/169205/comm /proc/169235/comm /proc/169272/comm /proc/169294/comm /proc/169295/comm /proc/169341/comm /proc/169768/comm /proc/169799/comm /proc/169865/comm /proc/169889/comm /proc/170/comm /proc/171/comm /proc/171532/comm /proc/172/comm /proc/173/comm /proc/175815/comm /proc/175844/comm /proc/175923/comm /proc/175950/comm /proc/175970/comm /proc/175999/comm /proc/176/comm /proc/177325/comm /proc/177334/comm /proc/178/comm /proc/178403/comm /proc/178404/comm /proc/178431/comm /proc/178505/comm /proc/178663/comm /proc/178670/comm /proc/178675/comm /proc/179/comm /proc/179112/comm /proc/18/comm /proc/180306/comm /proc/180742/comm /proc/180797/comm /proc/180798/comm /proc/180850/comm /proc/180862/comm /proc/180863/comm /proc/181746/comm /proc/181815/comm /proc/182/comm /proc/182024/comm /proc/182046/comm /proc/182118/comm /proc/182119/comm /proc/182242/comm /proc/182243/comm /proc/182837/comm /proc/182861/comm /proc/183058/comm /proc/183076/comm /proc/183090/comm /proc/183225/comm /proc/183226/comm /proc/183236/comm /proc/183352/comm /proc/184/comm /proc/184718/comm /proc/184748/comm /proc/184782/comm /proc/184814/comm /proc/184848/comm /proc/184866/comm /proc/185/comm /proc/185006/comm /proc/185008/comm /proc/185095/comm /proc/185122/comm /proc/185147/comm /proc/185170/comm /proc/185558/comm /proc/185725/comm /proc/185740/comm /proc/186/comm /proc/186036/comm /proc/186049/comm /proc/187/comm /proc/18766/comm /proc/18787/comm /proc/188/comm /proc/18809/comm /proc/18836/comm /proc/18853/comm /proc/189/comm /proc/189260/comm /proc/189900/comm /proc/189906/comm /proc/189907/comm /proc/19/comm /proc/190614/comm /proc/190637/comm /proc/191/comm /proc/191218/comm /proc/191263/comm /proc/191409/comm /proc/191445/comm /proc/191522/comm /proc/191533/comm /proc/191818/comm /proc/193056/comm /proc/193120/comm /proc/195150/comm /proc/195152/comm /proc/195396/comm /proc/195412/comm /proc/195502/comm /proc/195520/comm /proc/195541/comm /proc/195605/comm /proc/195771/comm /proc/195772/comm /proc/195773/comm /proc/196040/comm /proc/196087/comm /proc/196112/comm /proc/196139/comm /proc/196140/comm /proc/196152/comm /proc/196166/comm /proc/196167/comm /proc/196194/comm /proc/196242/comm /proc/196268/comm /proc/196305/comm /proc/196306/comm /proc/196316/comm /proc/196468/comm /proc/196485/comm /proc/196490/comm /proc/196491/comm /proc/196492/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/208/comm /proc/21/comm /proc/216/comm /proc/21781/comm /proc/21846/comm /proc/21847/comm /proc/21860/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25103/comm /proc/25366/comm /proc/25382/comm /proc/25406/comm /proc/25419/comm /proc/26/comm /proc/26057/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/290/comm /proc/29864/comm /proc/3/comm /proc/30/comm /proc/30142/comm /proc/30159/comm /proc/30184/comm /proc/30197/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/34412/comm /proc/34689/comm /proc/34706/comm /proc/34731/comm /proc/34743/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39028/comm /proc/39031/comm /proc/39125/comm /proc/39150/comm /proc/39174/comm /proc/39201/comm /proc/39217/comm /proc/394/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40808/comm /proc/41846/comm /proc/41884/comm /proc/41907/comm /proc/41913/comm /proc/41915/comm /proc/41917/comm /proc/41985/comm /proc/41992/comm /proc/42/comm /proc/42013/comm /proc/42024/comm /proc/42089/comm /proc/42108/comm /proc/42127/comm /proc/42185/comm /proc/42260/comm /proc/42314/comm /proc/42462/comm /proc/42485/comm /proc/42519/comm /proc/43/comm /proc/43227/comm /proc/43237/comm /proc/43271/comm /proc/43286/comm /proc/43563/comm /proc/43772/comm /proc/44/comm /proc/44147/comm /proc/44614/comm /proc/44639/comm /proc/44681/comm /proc/45/comm /proc/45008/comm /proc/45031/comm /proc/45046/comm /proc/45075/comm /proc/45095/comm /proc/451/comm /proc/45138/comm /proc/45517/comm /proc/45542/comm /proc/45688/comm /proc/46/comm /proc/46026/comm /proc/46051/comm /proc/46070/comm /proc/46089/comm /proc/46112/comm /proc/46139/comm /proc/46253/comm /proc/46298/comm /proc/46345/comm /proc/48/comm /proc/48228/comm /proc/48261/comm /proc/48350/comm /proc/48373/comm /proc/48596/comm /proc/48609/comm /proc/48636/comm /proc/48748/comm /proc/49/comm /proc/49266/comm /proc/49290/comm /proc/49365/comm /proc/49388/comm /proc/49434/comm /proc/49547/comm /proc/49733/comm /proc/49757/comm /proc/49878/comm /proc/5/comm /proc/50/comm /proc/50029/comm /proc/50052/comm /proc/50422/comm /proc/50448/comm /proc/50474/comm /proc/50554/comm /proc/50745/comm /proc/50841/comm /proc/50866/comm /proc/50978/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/52323/comm /proc/52544/comm /proc/52567/comm /proc/52778/comm /proc/52881/comm /proc/52906/comm /proc/52968/comm /proc/53095/comm /proc/53326/comm /proc/53369/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57895/comm /proc/57919/comm /proc/58/comm /proc/58493/comm /proc/58517/comm /proc/58624/comm /proc/58648/comm /proc/58664/comm /proc/58687/comm /proc/58823/comm /proc/58847/comm /proc/58915/comm /proc/58954/comm /proc/58985/comm /proc/59170/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/628/comm /proc/629/comm /proc/63/comm /proc/63867/comm /proc/64/comm /proc/64090/comm /proc/64136/comm /proc/64227/comm /proc/64256/comm /proc/64282/comm /proc/64300/comm /proc/64332/comm /proc/64345/comm /proc/644/comm /proc/64427/comm /proc/64428/comm /proc/64429/comm /proc/64593/comm /proc/646/comm /proc/64772/comm /proc/64907/comm /proc/65297/comm /proc/65351/comm /proc/65413/comm /proc/65466/comm /proc/65483/comm /proc/65484/comm /proc/65657/comm /proc/65658/comm /proc/65696/comm /proc/65721/comm /proc/65736/comm /proc/65761/comm /proc/66/comm /proc/66039/comm /proc/66064/comm /proc/66078/comm /proc/66103/comm /proc/66117/comm /proc/66150/comm /proc/66540/comm /proc/66638/comm /proc/66661/comm /proc/67/comm /proc/67050/comm /proc/67075/comm /proc/67186/comm /proc/67210/comm /proc/67302/comm /proc/67517/comm /proc/67536/comm /proc/67537/comm /proc/67538/comm /proc/67539/comm /proc/67540/comm /proc/67578/comm /proc/67753/comm /proc/67932/comm /proc/67990/comm /proc/68/comm /proc/68206/comm /proc/68242/comm /proc/68510/comm /proc/68582/comm /proc/68647/comm /proc/68758/comm /proc/68781/comm /proc/68917/comm /proc/68958/comm /proc/69/comm /proc/69004/comm /proc/69086/comm /proc/69310/comm /proc/69382/comm /proc/69411/comm /proc/69469/comm /proc/69726/comm /proc/69745/comm /proc/69766/comm /proc/70/comm /proc/70110/comm /proc/70133/comm /proc/70411/comm /proc/70428/comm /proc/70434/comm /proc/705/comm /proc/70558/comm /proc/70559/comm /proc/70569/comm /proc/70747/comm /proc/708/comm /proc/709/comm /proc/72/comm /proc/72177/comm /proc/722/comm /proc/72200/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75690/comm /proc/75713/comm /proc/75714/comm /proc/75715/comm /proc/75716/comm /proc/75722/comm /proc/75723/comm /proc/75724/comm /proc/75725/comm /proc/75727/comm /proc/75728/comm /proc/75729/comm /proc/75730/comm /proc/75731/comm /proc/75732/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81517/comm /proc/81540/comm /proc/81631/comm /proc/81648/comm /proc/81654/comm /proc/81772/comm /proc/81773/comm /proc/81783/comm /proc/81871/comm /proc/82/comm /proc/83047/comm /proc/83071/comm /proc/83252/comm /proc/83255/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86537/comm /proc/867/comm /proc/87/comm /proc/88/comm /proc/88319/comm /proc/88707/comm /proc/88720/comm /proc/89530/comm /proc/89554/comm /proc/90/comm /proc/90599/comm /proc/91/comm /proc/92/comm /proc/9239/comm /proc/9256/comm /proc/9272/comm /proc/93/comm /proc/9355/comm /proc/94/comm /proc/94215/comm /proc/96/comm /proc/96439/comm /proc/96462/comm /proc/96673/comm /proc/96690/comm /proc/96696/comm /proc/96905/comm /proc/96906/comm /proc/96916/comm /proc/97/comm /proc/97073/comm /proc/98/comm /proc/99/comm /proc/99653/comm /proc/99701/comm /proc/9973/comm /proc/99882/comm /proc/99917/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.e2tY5hsDOt.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r206629136456487abe680e426719616b.scope; invocation ID: 70b7f07939284f8ab4e27dbee94e7876
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBwGZxqSTFaARAAaXp0iXwjew5BC6iecW4Kbg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBwGZxqSTFaARAAaXp0iXwjew5BC6iecW4Kbg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBwGZxqSTFaARAAaXp0iXwjew5BC6iecW4Kbg==
+ cat
+ virsh secret-define --file /tmp/tmp.e2tY5hsDOt.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBwGZxqSTFaARAAaXp0iXwjew5BC6iecW4Kbg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.e2tY5hsDOt.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=196512
+ kill 196512
+ tail --pid=196512 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rc80efb95cbf3464b908685b7cf9ae92f.scope; invocation ID: 146d9f41e3574525aec130b3d50f66cc