+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10334/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10843/comm /proc/10844/comm /proc/109/comm /proc/1096/comm /proc/11/comm /proc/110/comm /proc/110022/comm /proc/110050/comm /proc/110518/comm /proc/110531/comm /proc/110532/comm /proc/111/comm /proc/111705/comm /proc/111729/comm /proc/111751/comm /proc/111788/comm /proc/112/comm /proc/112021/comm /proc/112096/comm /proc/112405/comm /proc/112418/comm /proc/113/comm /proc/113359/comm /proc/113465/comm /proc/113749/comm /proc/113772/comm /proc/113855/comm /proc/113872/comm /proc/113878/comm /proc/113961/comm /proc/113962/comm /proc/113972/comm /proc/114/comm /proc/114106/comm /proc/115/comm /proc/115410/comm /proc/115602/comm /proc/115626/comm /proc/115648/comm /proc/115678/comm /proc/116/comm /proc/116079/comm /proc/117/comm /proc/117571/comm /proc/118313/comm /proc/119478/comm /proc/12/comm /proc/120589/comm /proc/122254/comm /proc/12226/comm /proc/12257/comm /proc/12300/comm /proc/123360/comm /proc/12338/comm /proc/12350/comm /proc/123625/comm /proc/125462/comm /proc/125471/comm /proc/125881/comm /proc/125893/comm /proc/125894/comm /proc/12590/comm /proc/12622/comm /proc/12672/comm /proc/12703/comm /proc/12722/comm /proc/127528/comm /proc/128588/comm /proc/128612/comm /proc/128633/comm /proc/128657/comm /proc/129220/comm /proc/129736/comm /proc/129958/comm /proc/13/comm /proc/130609/comm /proc/130639/comm /proc/130666/comm /proc/130722/comm /proc/131471/comm /proc/131497/comm /proc/131949/comm /proc/132640/comm /proc/133943/comm /proc/14/comm /proc/1427/comm /proc/14400/comm /proc/147307/comm /proc/147668/comm /proc/148360/comm /proc/148395/comm /proc/149163/comm /proc/149177/comm /proc/149178/comm /proc/15/comm /proc/150448/comm /proc/150449/comm /proc/1545/comm /proc/1546/comm /proc/1547/comm /proc/1548/comm /proc/1552/comm /proc/157555/comm /proc/157556/comm /proc/157558/comm /proc/157559/comm /proc/157662/comm /proc/158316/comm /proc/158340/comm /proc/158734/comm /proc/158768/comm /proc/158781/comm /proc/158813/comm /proc/158814/comm /proc/158815/comm /proc/158816/comm /proc/159840/comm /proc/159865/comm /proc/16/comm /proc/160225/comm /proc/160249/comm /proc/160441/comm /proc/161013/comm /proc/161138/comm /proc/161163/comm /proc/161437/comm /proc/161454/comm /proc/161464/comm /proc/161570/comm /proc/161571/comm /proc/161581/comm /proc/161647/comm /proc/1619/comm /proc/1623/comm /proc/1632/comm /proc/163365/comm /proc/163424/comm /proc/163455/comm /proc/163567/comm /proc/163595/comm /proc/163619/comm /proc/163628/comm /proc/163656/comm /proc/163675/comm /proc/163704/comm /proc/163754/comm /proc/163807/comm /proc/164000/comm /proc/164030/comm /proc/164084/comm /proc/164214/comm /proc/164237/comm /proc/164338/comm /proc/164687/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167538/comm /proc/168/comm /proc/169/comm /proc/169062/comm /proc/169114/comm /proc/169122/comm /proc/169860/comm /proc/170/comm /proc/171/comm /proc/171145/comm /proc/171171/comm /proc/171222/comm /proc/172/comm /proc/172366/comm /proc/172773/comm /proc/173/comm /proc/174216/comm /proc/174226/comm /proc/174229/comm /proc/174764/comm /proc/174803/comm /proc/174804/comm /proc/174862/comm /proc/174874/comm /proc/174875/comm /proc/175/comm /proc/175482/comm /proc/175598/comm /proc/175616/comm /proc/175671/comm /proc/175689/comm /proc/176/comm /proc/176035/comm /proc/176037/comm /proc/176053/comm /proc/176055/comm /proc/176356/comm /proc/176361/comm /proc/176431/comm /proc/176553/comm /proc/176578/comm /proc/176765/comm /proc/176783/comm /proc/176789/comm /proc/177012/comm /proc/177013/comm /proc/177032/comm /proc/177099/comm /proc/178424/comm /proc/178441/comm /proc/178499/comm /proc/178529/comm /proc/178551/comm /proc/178602/comm /proc/178626/comm /proc/178636/comm /proc/178673/comm /proc/178716/comm /proc/178983/comm /proc/179/comm /proc/179007/comm /proc/179028/comm /proc/179053/comm /proc/179392/comm /proc/179509/comm /proc/179533/comm /proc/179612/comm /proc/179665/comm /proc/179676/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/182755/comm /proc/182777/comm /proc/183417/comm /proc/183756/comm /proc/183757/comm /proc/184/comm /proc/184707/comm /proc/185/comm /proc/185987/comm /proc/186037/comm /proc/186330/comm /proc/18677/comm /proc/18697/comm /proc/187/comm /proc/18719/comm /proc/18744/comm /proc/187502/comm /proc/187531/comm /proc/187586/comm /proc/18763/comm /proc/188/comm /proc/188498/comm /proc/188499/comm /proc/188500/comm /proc/188718/comm /proc/188735/comm /proc/188762/comm /proc/188763/comm /proc/188776/comm /proc/188798/comm /proc/188799/comm /proc/189/comm /proc/189040/comm /proc/189043/comm /proc/189046/comm /proc/189298/comm /proc/189760/comm /proc/19/comm /proc/190/comm /proc/190115/comm /proc/190440/comm /proc/190726/comm /proc/191576/comm /proc/191578/comm /proc/191601/comm /proc/191844/comm /proc/191869/comm /proc/191945/comm /proc/192/comm /proc/192427/comm /proc/192456/comm /proc/192474/comm /proc/192475/comm /proc/192476/comm /proc/192477/comm /proc/192478/comm /proc/192479/comm /proc/192714/comm /proc/193/comm /proc/193100/comm /proc/193144/comm /proc/193227/comm /proc/193250/comm /proc/193283/comm /proc/193413/comm /proc/193453/comm /proc/193470/comm /proc/193476/comm /proc/193592/comm /proc/193593/comm /proc/193603/comm /proc/193678/comm /proc/194/comm /proc/194014/comm /proc/194256/comm /proc/194257/comm /proc/194361/comm /proc/194370/comm /proc/194553/comm /proc/194599/comm /proc/194625/comm /proc/195/comm /proc/195100/comm /proc/195139/comm /proc/195144/comm /proc/195145/comm /proc/195146/comm /proc/196/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21697/comm /proc/21767/comm /proc/21768/comm /proc/21783/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25007/comm /proc/25282/comm /proc/25299/comm /proc/25325/comm /proc/25337/comm /proc/26/comm /proc/26378/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/281/comm /proc/288/comm /proc/289/comm /proc/290/comm /proc/293/comm /proc/29802/comm /proc/3/comm /proc/30/comm /proc/30061/comm /proc/30078/comm /proc/30103/comm /proc/30115/comm /proc/30877/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/32/comm /proc/326/comm /proc/33/comm /proc/34/comm /proc/344/comm /proc/34493/comm /proc/34760/comm /proc/34777/comm /proc/34802/comm /proc/34815/comm /proc/352/comm /proc/353/comm /proc/356/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/38167/comm /proc/38169/comm /proc/39/comm /proc/392/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40525/comm /proc/40526/comm /proc/40575/comm /proc/40577/comm /proc/40589/comm /proc/40622/comm /proc/40632/comm /proc/40675/comm /proc/40681/comm /proc/40695/comm /proc/40770/comm /proc/40788/comm /proc/40812/comm /proc/40824/comm /proc/40931/comm /proc/40998/comm /proc/41096/comm /proc/41121/comm /proc/41147/comm /proc/41887/comm /proc/41911/comm /proc/41945/comm /proc/41969/comm /proc/42/comm /proc/42083/comm /proc/42394/comm /proc/42771/comm /proc/43/comm /proc/43052/comm /proc/43235/comm /proc/43259/comm /proc/43299/comm /proc/43637/comm /proc/43663/comm /proc/43686/comm /proc/43710/comm /proc/43729/comm /proc/43776/comm /proc/44/comm /proc/44119/comm /proc/44142/comm /proc/443/comm /proc/44347/comm /proc/44638/comm /proc/44662/comm /proc/44676/comm /proc/44699/comm /proc/44721/comm /proc/44745/comm /proc/44860/comm /proc/44905/comm /proc/44948/comm /proc/45/comm /proc/452/comm /proc/46/comm /proc/46759/comm /proc/46789/comm /proc/46884/comm /proc/46912/comm /proc/47265/comm /proc/47277/comm /proc/47328/comm /proc/47413/comm /proc/47734/comm /proc/47759/comm /proc/47833/comm /proc/47858/comm /proc/47903/comm /proc/48/comm /proc/48028/comm /proc/48195/comm /proc/48218/comm /proc/48358/comm /proc/48525/comm /proc/48550/comm /proc/489/comm /proc/48931/comm /proc/48955/comm /proc/48984/comm /proc/49/comm /proc/49065/comm /proc/49142/comm /proc/49239/comm /proc/49264/comm /proc/49350/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/51164/comm /proc/51187/comm /proc/51340/comm /proc/51378/comm /proc/51469/comm /proc/51562/comm /proc/51737/comm /proc/51796/comm /proc/51876/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/55/comm /proc/55784/comm /proc/55808/comm /proc/56/comm /proc/56448/comm /proc/56474/comm /proc/56489/comm /proc/56519/comm /proc/56535/comm /proc/56565/comm /proc/56753/comm /proc/56777/comm /proc/56820/comm /proc/56858/comm /proc/56908/comm /proc/56951/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60833/comm /proc/61/comm /proc/61032/comm /proc/61100/comm /proc/61182/comm /proc/61205/comm /proc/61226/comm /proc/61250/comm /proc/61275/comm /proc/61299/comm /proc/613/comm /proc/616/comm /proc/61695/comm /proc/61724/comm /proc/61851/comm /proc/619/comm /proc/62/comm /proc/62002/comm /proc/62004/comm /proc/62071/comm /proc/62095/comm /proc/62096/comm /proc/62514/comm /proc/627/comm /proc/62706/comm /proc/62730/comm /proc/628/comm /proc/62867/comm /proc/62891/comm /proc/62905/comm /proc/62928/comm /proc/63/comm /proc/63006/comm /proc/63030/comm /proc/63374/comm /proc/63398/comm /proc/63543/comm /proc/63567/comm /proc/63689/comm /proc/63884/comm /proc/63899/comm /proc/63924/comm /proc/64/comm /proc/64090/comm /proc/641/comm /proc/64119/comm /proc/64285/comm /proc/64364/comm /proc/64648/comm /proc/64671/comm /proc/64733/comm /proc/64750/comm /proc/64751/comm /proc/64752/comm /proc/64753/comm /proc/64754/comm /proc/648/comm /proc/65126/comm /proc/65285/comm /proc/65378/comm /proc/65682/comm /proc/65707/comm /proc/65756/comm /proc/65791/comm /proc/65914/comm /proc/65986/comm /proc/66/comm /proc/66028/comm /proc/66073/comm /proc/66198/comm /proc/66354/comm /proc/66398/comm /proc/66489/comm /proc/66529/comm /proc/66729/comm /proc/66792/comm /proc/66963/comm /proc/66986/comm /proc/67/comm /proc/67127/comm /proc/67153/comm /proc/67533/comm /proc/67551/comm /proc/67557/comm /proc/67618/comm /proc/67619/comm /proc/67629/comm /proc/67811/comm /proc/68/comm /proc/69/comm /proc/69001/comm /proc/69025/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72469/comm /proc/72484/comm /proc/72485/comm /proc/72486/comm /proc/72487/comm /proc/72488/comm /proc/72489/comm /proc/72490/comm /proc/72492/comm /proc/72494/comm /proc/72498/comm /proc/72499/comm /proc/72500/comm /proc/72501/comm /proc/72503/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75005/comm /proc/76/comm /proc/78/comm /proc/78335/comm /proc/78496/comm /proc/78521/comm /proc/78636/comm /proc/78652/comm /proc/78658/comm /proc/78792/comm /proc/78793/comm /proc/78805/comm /proc/78905/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80054/comm /proc/80077/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84117/comm /proc/85/comm /proc/85655/comm /proc/85673/comm /proc/85990/comm /proc/86/comm /proc/86502/comm /proc/86526/comm /proc/866/comm /proc/87/comm /proc/87407/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/90151/comm /proc/91/comm /proc/92/comm /proc/9228/comm /proc/9245/comm /proc/9261/comm /proc/92818/comm /proc/92842/comm /proc/92998/comm /proc/93/comm /proc/93016/comm /proc/93022/comm /proc/93209/comm /proc/93210/comm /proc/93229/comm /proc/9344/comm /proc/93457/comm /proc/94/comm /proc/96/comm /proc/96636/comm /proc/96662/comm /proc/96797/comm /proc/96822/comm /proc/97/comm /proc/97177/comm /proc/97212/comm /proc/97321/comm /proc/98/comm /proc/99/comm /proc/9964/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=rdma,
cpuset cpu io memory hugetlb pids rdma misc
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.rzHnrz1jSu.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r922a3e796fcb416fa135310ffdbbfc9b.scope; invocation ID: 45f87d607e8c455c930f9a60022cfa61
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQA5cU5q8UO2MRAA0peqr1EPxs7bzvVzCcKjpA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQA5cU5q8UO2MRAA0peqr1EPxs7bzvVzCcKjpA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQA5cU5q8UO2MRAA0peqr1EPxs7bzvVzCcKjpA==
+ cat
+ virsh secret-define --file /tmp/tmp.rzHnrz1jSu.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQA5cU5q8UO2MRAA0peqr1EPxs7bzvVzCcKjpA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.rzHnrz1jSu.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195166
+ kill 195166
+ tail --pid=195166 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r359e9813c1974c3fa954dc8fb82361f0.scope; invocation ID: 7eb132e3ebe54679a02a4ccd30d795d5