+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100607/comm /proc/100635/comm /proc/100669/comm /proc/100708/comm /proc/100930/comm /proc/100990/comm /proc/101698/comm /proc/102/comm /proc/102059/comm /proc/103/comm /proc/10324/comm /proc/10346/comm /proc/104/comm /proc/104048/comm /proc/105/comm /proc/106/comm /proc/106300/comm /proc/108/comm /proc/108086/comm /proc/1085/comm /proc/108732/comm /proc/109/comm /proc/109594/comm /proc/11/comm /proc/110/comm /proc/11086/comm /proc/11087/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114589/comm /proc/114612/comm /proc/115/comm /proc/115039/comm /proc/115052/comm /proc/115053/comm /proc/116/comm /proc/116181/comm /proc/116206/comm /proc/116242/comm /proc/116266/comm /proc/116506/comm /proc/116681/comm /proc/116915/comm /proc/116917/comm /proc/117/comm /proc/117842/comm /proc/118059/comm /proc/118227/comm /proc/118250/comm /proc/118351/comm /proc/118368/comm /proc/118374/comm /proc/118422/comm /proc/118423/comm /proc/118433/comm /proc/118591/comm /proc/12/comm /proc/120053/comm /proc/120074/comm /proc/120100/comm /proc/120143/comm /proc/122397/comm /proc/124124/comm /proc/12483/comm /proc/125042/comm /proc/12514/comm /proc/12568/comm /proc/12593/comm /proc/12612/comm /proc/126531/comm /proc/127780/comm /proc/12843/comm /proc/128564/comm /proc/12872/comm /proc/129187/comm /proc/12953/comm /proc/12981/comm /proc/129891/comm /proc/13/comm /proc/13012/comm /proc/130274/comm /proc/130288/comm /proc/130289/comm /proc/131857/comm /proc/133347/comm /proc/133371/comm /proc/133388/comm /proc/133418/comm /proc/134065/comm /proc/134498/comm /proc/134651/comm /proc/136186/comm /proc/136218/comm /proc/136365/comm /proc/136366/comm /proc/14/comm /proc/1418/comm /proc/149100/comm /proc/149101/comm /proc/15/comm /proc/150105/comm /proc/151816/comm /proc/151819/comm /proc/152818/comm /proc/153258/comm /proc/153293/comm /proc/153294/comm /proc/1536/comm /proc/1537/comm /proc/1538/comm /proc/1539/comm /proc/1543/comm /proc/154699/comm /proc/154700/comm /proc/16/comm /proc/1610/comm /proc/1614/comm /proc/161831/comm /proc/161832/comm /proc/161834/comm /proc/161835/comm /proc/162050/comm /proc/162058/comm /proc/1623/comm /proc/162624/comm /proc/162653/comm /proc/163017/comm /proc/163123/comm /proc/163138/comm /proc/163169/comm /proc/163170/comm /proc/163171/comm /proc/163173/comm /proc/164167/comm /proc/164200/comm /proc/164486/comm /proc/164675/comm /proc/164700/comm /proc/164844/comm /proc/165/comm /proc/165434/comm /proc/165615/comm /proc/165638/comm /proc/165822/comm /proc/165839/comm /proc/165846/comm /proc/165983/comm /proc/165984/comm /proc/165994/comm /proc/166/comm /proc/166195/comm /proc/166765/comm /proc/167/comm /proc/167385/comm /proc/167935/comm /proc/167964/comm /proc/168/comm /proc/168000/comm /proc/168062/comm /proc/168104/comm /proc/168179/comm /proc/168217/comm /proc/168236/comm /proc/168304/comm /proc/168328/comm /proc/168365/comm /proc/168398/comm /proc/168502/comm /proc/168540/comm /proc/168565/comm /proc/168777/comm /proc/168803/comm /proc/169/comm /proc/169212/comm /proc/169230/comm /proc/169231/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/173012/comm /proc/174025/comm /proc/174201/comm /proc/175824/comm /proc/176/comm /proc/176470/comm /proc/176520/comm /proc/176538/comm /proc/176543/comm /proc/178100/comm /proc/178101/comm /proc/178107/comm /proc/178110/comm /proc/178722/comm /proc/178741/comm /proc/178761/comm /proc/178762/comm /proc/178763/comm /proc/178764/comm /proc/179/comm /proc/179185/comm /proc/179335/comm /proc/179487/comm /proc/179605/comm /proc/179606/comm /proc/179639/comm /proc/179720/comm /proc/179721/comm /proc/18/comm /proc/180/comm /proc/180307/comm /proc/180491/comm /proc/180533/comm /proc/180677/comm /proc/180694/comm /proc/180700/comm /proc/180857/comm /proc/180858/comm /proc/180868/comm /proc/180959/comm /proc/182/comm /proc/182394/comm /proc/182443/comm /proc/182470/comm /proc/182493/comm /proc/182504/comm /proc/182534/comm /proc/182563/comm /proc/182574/comm /proc/182591/comm /proc/182647/comm /proc/182955/comm /proc/182979/comm /proc/183031/comm /proc/183063/comm /proc/183566/comm /proc/183576/comm /proc/183582/comm /proc/183647/comm /proc/183661/comm /proc/184/comm /proc/186/comm /proc/186841/comm /proc/186842/comm /proc/186843/comm /proc/187/comm /proc/187308/comm /proc/187394/comm /proc/18748/comm /proc/18769/comm /proc/18790/comm /proc/188/comm /proc/18816/comm /proc/18834/comm /proc/188703/comm /proc/189/comm /proc/189810/comm /proc/189811/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/191774/comm /proc/191775/comm /proc/191776/comm /proc/191992/comm /proc/191993/comm /proc/192026/comm /proc/192027/comm /proc/192041/comm /proc/192054/comm /proc/192055/comm /proc/192264/comm /proc/192273/comm /proc/192281/comm /proc/192815/comm /proc/193174/comm /proc/193410/comm /proc/193725/comm /proc/194265/comm /proc/194500/comm /proc/194762/comm /proc/194782/comm /proc/194788/comm /proc/194837/comm /proc/195027/comm /proc/195046/comm /proc/195220/comm /proc/195436/comm /proc/195437/comm /proc/195438/comm /proc/195470/comm /proc/195485/comm /proc/195486/comm /proc/195487/comm /proc/195488/comm /proc/195489/comm /proc/195490/comm /proc/195622/comm /proc/195626/comm /proc/195658/comm /proc/196276/comm /proc/196299/comm /proc/196323/comm /proc/196421/comm /proc/196571/comm /proc/196596/comm /proc/196617/comm /proc/196634/comm /proc/196641/comm /proc/196764/comm /proc/196765/comm /proc/196779/comm /proc/196855/comm /proc/196862/comm /proc/196863/comm /proc/196892/comm /proc/196921/comm /proc/196940/comm /proc/196973/comm /proc/196988/comm /proc/196989/comm /proc/196990/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/206/comm /proc/21/comm /proc/215/comm /proc/21756/comm /proc/21825/comm /proc/21826/comm /proc/21839/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25101/comm /proc/25373/comm /proc/25390/comm /proc/25414/comm /proc/25426/comm /proc/26/comm /proc/26201/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/286/comm /proc/287/comm /proc/288/comm /proc/29787/comm /proc/3/comm /proc/30/comm /proc/30062/comm /proc/30080/comm /proc/30105/comm /proc/30118/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/33/comm /proc/34/comm /proc/34512/comm /proc/34781/comm /proc/34797/comm /proc/34821/comm /proc/34834/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39275/comm /proc/39277/comm /proc/39373/comm /proc/39394/comm /proc/39439/comm /proc/39467/comm /proc/39483/comm /proc/395/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/42/comm /proc/42002/comm /proc/42026/comm /proc/42050/comm /proc/42065/comm /proc/42075/comm /proc/42082/comm /proc/42139/comm /proc/42157/comm /proc/42171/comm /proc/42173/comm /proc/42241/comm /proc/42265/comm /proc/42278/comm /proc/42303/comm /proc/42395/comm /proc/42457/comm /proc/42622/comm /proc/42647/comm /proc/42673/comm /proc/43/comm /proc/43341/comm /proc/43367/comm /proc/43386/comm /proc/43406/comm /proc/43644/comm /proc/43854/comm /proc/44/comm /proc/44251/comm /proc/44715/comm /proc/44739/comm /proc/44764/comm /proc/45/comm /proc/45154/comm /proc/45180/comm /proc/45201/comm /proc/45226/comm /proc/45244/comm /proc/45289/comm /proc/453/comm /proc/45620/comm /proc/45644/comm /proc/45810/comm /proc/46/comm /proc/46141/comm /proc/46172/comm /proc/46179/comm /proc/46210/comm /proc/46242/comm /proc/46259/comm /proc/46362/comm /proc/46409/comm /proc/46450/comm /proc/48/comm /proc/48337/comm /proc/48368/comm /proc/48431/comm /proc/48455/comm /proc/48671/comm /proc/48684/comm /proc/48760/comm /proc/48828/comm /proc/49/comm /proc/49346/comm /proc/49370/comm /proc/49445/comm /proc/49467/comm /proc/49513/comm /proc/49641/comm /proc/49812/comm /proc/49832/comm /proc/49958/comm /proc/5/comm /proc/50/comm /proc/50096/comm /proc/50119/comm /proc/50509/comm /proc/50532/comm /proc/50676/comm /proc/50734/comm /proc/50832/comm /proc/50865/comm /proc/50924/comm /proc/50980/comm /proc/51/comm /proc/51918/comm /proc/52/comm /proc/521/comm /proc/52773/comm /proc/52797/comm /proc/52947/comm /proc/52971/comm /proc/53004/comm /proc/53169/comm /proc/53334/comm /proc/53425/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58112/comm /proc/58135/comm /proc/58791/comm /proc/58819/comm /proc/58870/comm /proc/58895/comm /proc/58910/comm /proc/58935/comm /proc/59130/comm /proc/59154/comm /proc/59232/comm /proc/59269/comm /proc/59318/comm /proc/59420/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/615/comm /proc/619/comm /proc/62/comm /proc/621/comm /proc/63/comm /proc/630/comm /proc/631/comm /proc/64/comm /proc/64127/comm /proc/64128/comm /proc/64167/comm /proc/643/comm /proc/64526/comm /proc/64549/comm /proc/64572/comm /proc/64595/comm /proc/64611/comm /proc/64634/comm /proc/64665/comm /proc/64688/comm /proc/64843/comm /proc/650/comm /proc/65082/comm /proc/65373/comm /proc/65435/comm /proc/65499/comm /proc/65748/comm /proc/65749/comm /proc/65763/comm /proc/65764/comm /proc/66/comm /proc/66002/comm /proc/66026/comm /proc/66097/comm /proc/66121/comm /proc/66298/comm /proc/66326/comm /proc/66341/comm /proc/66369/comm /proc/66400/comm /proc/66424/comm /proc/66468/comm /proc/66802/comm /proc/66803/comm /proc/66804/comm /proc/66805/comm /proc/66806/comm /proc/66940/comm /proc/66963/comm /proc/67/comm /proc/67006/comm /proc/67379/comm /proc/67403/comm /proc/67669/comm /proc/67692/comm /proc/67702/comm /proc/67703/comm /proc/67712/comm /proc/67713/comm /proc/67714/comm /proc/67726/comm /proc/67929/comm /proc/67994/comm /proc/68/comm /proc/68247/comm /proc/68271/comm /proc/68538/comm /proc/68574/comm /proc/68650/comm /proc/69/comm /proc/69019/comm /proc/69042/comm /proc/69159/comm /proc/69198/comm /proc/69236/comm /proc/69284/comm /proc/69331/comm /proc/69373/comm /proc/69548/comm /proc/69701/comm /proc/69730/comm /proc/69802/comm /proc/69831/comm /proc/69873/comm /proc/70/comm /proc/70187/comm /proc/702/comm /proc/70209/comm /proc/705/comm /proc/70508/comm /proc/70545/comm /proc/706/comm /proc/71047/comm /proc/71064/comm /proc/71070/comm /proc/71122/comm /proc/71123/comm /proc/71133/comm /proc/71340/comm /proc/719/comm /proc/72/comm /proc/72638/comm /proc/72661/comm /proc/73/comm /proc/74/comm /proc/74077/comm /proc/75/comm /proc/75636/comm /proc/76/comm /proc/76069/comm /proc/76085/comm /proc/76086/comm /proc/76087/comm /proc/76088/comm /proc/76091/comm /proc/76092/comm /proc/76094/comm /proc/76096/comm /proc/76099/comm /proc/76100/comm /proc/76101/comm /proc/76102/comm /proc/76103/comm /proc/76104/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82247/comm /proc/82272/comm /proc/82397/comm /proc/82414/comm /proc/82420/comm /proc/82470/comm /proc/82471/comm /proc/82481/comm /proc/82684/comm /proc/83826/comm /proc/83850/comm /proc/84/comm /proc/85/comm /proc/85087/comm /proc/85088/comm /proc/86/comm /proc/864/comm /proc/86853/comm /proc/87/comm /proc/87803/comm /proc/88/comm /proc/89295/comm /proc/89310/comm /proc/90/comm /proc/90064/comm /proc/90092/comm /proc/91/comm /proc/91250/comm /proc/92/comm /proc/9219/comm /proc/9236/comm /proc/9252/comm /proc/93/comm /proc/9335/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97001/comm /proc/97026/comm /proc/97219/comm /proc/97285/comm /proc/97292/comm /proc/97416/comm /proc/97417/comm /proc/97430/comm /proc/97596/comm /proc/98/comm /proc/99/comm /proc/9953/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.XmZQLoFg0z.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rddd6d32b7cd04093bcd6bbc2997441d4.scope; invocation ID: 4a0d28b8052243e3a4ea887cd87d2a96
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCei5NqkMUzJBAApr1xMP7q4lP+JAwTm+gdzg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCei5NqkMUzJBAApr1xMP7q4lP+JAwTm+gdzg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCei5NqkMUzJBAApr1xMP7q4lP+JAwTm+gdzg==
+ cat
+ virsh secret-define --file /tmp/tmp.XmZQLoFg0z.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCei5NqkMUzJBAApr1xMP7q4lP+JAwTm+gdzg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.XmZQLoFg0z.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=197010
+ kill 197010
+ tail --pid=197010 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r889711b98462451b8662cde284f7f781.scope; invocation ID: 2d1fb49f6fba4218b18788a03d917e97