+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101567/comm /proc/10177/comm /proc/102/comm /proc/102251/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10688/comm /proc/10689/comm /proc/107574/comm /proc/107598/comm /proc/107983/comm /proc/107996/comm /proc/107997/comm /proc/108/comm /proc/108790/comm /proc/109/comm /proc/109131/comm /proc/109155/comm /proc/109184/comm /proc/109209/comm /proc/109545/comm /proc/109675/comm /proc/109677/comm /proc/11/comm /proc/110/comm /proc/110871/comm /proc/111/comm /proc/111040/comm /proc/111069/comm /proc/111200/comm /proc/111223/comm /proc/111319/comm /proc/111336/comm /proc/111342/comm /proc/111434/comm /proc/111435/comm /proc/111445/comm /proc/111634/comm /proc/112/comm /proc/112679/comm /proc/113/comm /proc/113006/comm /proc/113032/comm /proc/113057/comm /proc/113083/comm /proc/113568/comm /proc/114/comm /proc/115/comm /proc/115367/comm /proc/115981/comm /proc/116/comm /proc/117/comm /proc/117029/comm /proc/118061/comm /proc/118066/comm /proc/1186/comm /proc/119652/comm /proc/12/comm /proc/12130/comm /proc/12160/comm /proc/12217/comm /proc/12241/comm /proc/12255/comm /proc/123068/comm /proc/123272/comm /proc/123285/comm /proc/123286/comm /proc/124619/comm /proc/12490/comm /proc/12522/comm /proc/12577/comm /proc/12601/comm /proc/126111/comm /proc/126135/comm /proc/126150/comm /proc/126178/comm /proc/12622/comm /proc/126789/comm /proc/127194/comm /proc/127386/comm /proc/128071/comm /proc/128775/comm /proc/128798/comm /proc/128993/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/129364/comm /proc/1294/comm /proc/13/comm /proc/130189/comm /proc/130563/comm /proc/130564/comm /proc/132812/comm /proc/132816/comm /proc/133058/comm /proc/133745/comm /proc/134541/comm /proc/134563/comm /proc/134564/comm /proc/135632/comm /proc/135633/comm /proc/135673/comm /proc/135674/comm /proc/1386/comm /proc/1390/comm /proc/14/comm /proc/142942/comm /proc/142943/comm /proc/142945/comm /proc/142946/comm /proc/143156/comm /proc/1457/comm /proc/1461/comm /proc/1470/comm /proc/15/comm /proc/155034/comm /proc/155175/comm /proc/155200/comm /proc/155651/comm /proc/155686/comm /proc/155699/comm /proc/155731/comm /proc/155732/comm /proc/155733/comm /proc/155734/comm /proc/156174/comm /proc/156216/comm /proc/157096/comm /proc/157097/comm /proc/157351/comm /proc/157372/comm /proc/157397/comm /proc/157440/comm /proc/157644/comm /proc/157647/comm /proc/157687/comm /proc/157711/comm /proc/157765/comm /proc/157778/comm /proc/157867/comm /proc/157894/comm /proc/158067/comm /proc/158094/comm /proc/158243/comm /proc/158444/comm /proc/158450/comm /proc/158699/comm /proc/159057/comm /proc/159059/comm /proc/159215/comm /proc/159238/comm /proc/159506/comm /proc/159526/comm /proc/159532/comm /proc/159592/comm /proc/159593/comm /proc/159603/comm /proc/159762/comm /proc/16/comm /proc/161407/comm /proc/161476/comm /proc/161562/comm /proc/161648/comm /proc/161676/comm /proc/161727/comm /proc/161755/comm /proc/161779/comm /proc/161813/comm /proc/161934/comm /proc/161980/comm /proc/162037/comm /proc/162080/comm /proc/162153/comm /proc/162413/comm /proc/162422/comm /proc/162445/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167363/comm /proc/167428/comm /proc/167432/comm /proc/167444/comm /proc/168/comm /proc/168150/comm /proc/168284/comm /proc/169/comm /proc/169474/comm /proc/169480/comm /proc/169483/comm /proc/169495/comm /proc/170/comm /proc/170591/comm /proc/170592/comm /proc/170593/comm /proc/170702/comm /proc/170703/comm /proc/170708/comm /proc/171/comm /proc/172/comm /proc/172908/comm /proc/172944/comm /proc/172945/comm /proc/173/comm /proc/173002/comm /proc/173015/comm /proc/173016/comm /proc/173635/comm /proc/173849/comm /proc/173874/comm /proc/174195/comm /proc/174411/comm /proc/174412/comm /proc/174500/comm /proc/174513/comm /proc/174515/comm /proc/174671/comm /proc/174678/comm /proc/174802/comm /proc/174825/comm /proc/174984/comm /proc/175000/comm /proc/175006/comm /proc/175121/comm /proc/175122/comm /proc/175204/comm /proc/175320/comm /proc/176527/comm /proc/176568/comm /proc/176591/comm /proc/176646/comm /proc/176653/comm /proc/176712/comm /proc/176935/comm /proc/176959/comm /proc/176973/comm /proc/177/comm /proc/177004/comm /proc/177580/comm /proc/177593/comm /proc/177701/comm /proc/177707/comm /proc/18/comm /proc/180/comm /proc/180578/comm /proc/180701/comm /proc/181/comm /proc/181152/comm /proc/181291/comm /proc/182611/comm /proc/182639/comm /proc/182734/comm /proc/183/comm /proc/183387/comm /proc/183410/comm /proc/183956/comm /proc/183994/comm /proc/184/comm /proc/184125/comm /proc/184166/comm /proc/184238/comm /proc/184249/comm /proc/184277/comm /proc/184278/comm /proc/184851/comm /proc/185/comm /proc/186/comm /proc/186157/comm /proc/186168/comm /proc/186398/comm /proc/186399/comm /proc/186401/comm /proc/186731/comm /proc/186782/comm /proc/186799/comm /proc/186828/comm /proc/186829/comm /proc/186897/comm /proc/186917/comm /proc/186918/comm /proc/187/comm /proc/187366/comm /proc/187368/comm /proc/187371/comm /proc/187776/comm /proc/187918/comm /proc/188/comm /proc/188200/comm /proc/188217/comm /proc/188314/comm /proc/188329/comm /proc/188330/comm /proc/188331/comm /proc/188332/comm /proc/188333/comm /proc/188334/comm /proc/188966/comm /proc/188989/comm /proc/189/comm /proc/189011/comm /proc/189032/comm /proc/189060/comm /proc/189062/comm /proc/189223/comm /proc/189246/comm /proc/189448/comm /proc/189468/comm /proc/189474/comm /proc/189523/comm /proc/189541/comm /proc/189542/comm /proc/189552/comm /proc/189641/comm /proc/189689/comm /proc/189715/comm /proc/189823/comm /proc/189979/comm /proc/19/comm /proc/190/comm /proc/190013/comm /proc/190016/comm /proc/190020/comm /proc/190021/comm /proc/190022/comm /proc/191/comm /proc/19127/comm /proc/19147/comm /proc/19169/comm /proc/19196/comm /proc/192/comm /proc/19212/comm /proc/193/comm /proc/194/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21241/comm /proc/21250/comm /proc/21251/comm /proc/21267/comm /proc/215/comm /proc/216/comm /proc/21649/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24062/comm /proc/24333/comm /proc/24350/comm /proc/24374/comm /proc/24386/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/28491/comm /proc/28759/comm /proc/28775/comm /proc/288/comm /proc/28800/comm /proc/28813/comm /proc/289/comm /proc/290/comm /proc/291/comm /proc/293/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/32/comm /proc/325/comm /proc/33/comm /proc/33161/comm /proc/33427/comm /proc/33444/comm /proc/33468/comm /proc/33480/comm /proc/34/comm /proc/34153/comm /proc/344/comm /proc/34915/comm /proc/34917/comm /proc/352/comm /proc/353/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/38/comm /proc/386/comm /proc/38803/comm /proc/38826/comm /proc/38840/comm /proc/38865/comm /proc/38883/comm /proc/38888/comm /proc/38938/comm /proc/38950/comm /proc/38963/comm /proc/38978/comm /proc/39/comm /proc/39038/comm /proc/39076/comm /proc/39095/comm /proc/39097/comm /proc/392/comm /proc/39219/comm /proc/39274/comm /proc/39374/comm /proc/39398/comm /proc/39424/comm /proc/396/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40149/comm /proc/40162/comm /proc/402/comm /proc/40206/comm /proc/40207/comm /proc/40442/comm /proc/40655/comm /proc/40751/comm /proc/41096/comm /proc/41509/comm /proc/41532/comm /proc/41574/comm /proc/41950/comm /proc/41978/comm /proc/41989/comm /proc/42/comm /proc/42015/comm /proc/42046/comm /proc/42065/comm /proc/42416/comm /proc/42441/comm /proc/42578/comm /proc/42848/comm /proc/42872/comm /proc/43/comm /proc/43008/comm /proc/43032/comm /proc/43060/comm /proc/43093/comm /proc/43155/comm /proc/43201/comm /proc/43246/comm /proc/44/comm /proc/45/comm /proc/452/comm /proc/45324/comm /proc/45359/comm /proc/45426/comm /proc/45450/comm /proc/45681/comm /proc/45694/comm /proc/45732/comm /proc/45823/comm /proc/46/comm /proc/46398/comm /proc/46421/comm /proc/46435/comm /proc/46458/comm /proc/46529/comm /proc/46659/comm /proc/46822/comm /proc/46844/comm /proc/46964/comm /proc/47117/comm /proc/47142/comm /proc/47278/comm /proc/47525/comm /proc/47548/comm /proc/47655/comm /proc/47709/comm /proc/47806/comm /proc/47835/comm /proc/47891/comm /proc/47950/comm /proc/48/comm /proc/486/comm /proc/48847/comm /proc/49/comm /proc/49713/comm /proc/49737/comm /proc/49864/comm /proc/49888/comm /proc/49943/comm /proc/5/comm /proc/50/comm /proc/50036/comm /proc/50258/comm /proc/50339/comm /proc/51/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/54215/comm /proc/54239/comm /proc/54835/comm /proc/54882/comm /proc/54883/comm /proc/54915/comm /proc/54956/comm /proc/54982/comm /proc/55/comm /proc/55116/comm /proc/55140/comm /proc/55190/comm /proc/55236/comm /proc/55276/comm /proc/55375/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59289/comm /proc/59324/comm /proc/59400/comm /proc/59425/comm /proc/59440/comm /proc/59466/comm /proc/59485/comm /proc/59510/comm /proc/59719/comm /proc/6/comm /proc/60/comm /proc/60084/comm /proc/60398/comm /proc/60434/comm /proc/60611/comm /proc/60612/comm /proc/60622/comm /proc/60647/comm /proc/60652/comm /proc/60653/comm /proc/60693/comm /proc/60793/comm /proc/60816/comm /proc/61/comm /proc/61188/comm /proc/61218/comm /proc/61252/comm /proc/61275/comm /proc/61302/comm /proc/61351/comm /proc/614/comm /proc/61681/comm /proc/61706/comm /proc/618/comm /proc/61946/comm /proc/62/comm /proc/620/comm /proc/62022/comm /proc/62046/comm /proc/62129/comm /proc/62154/comm /proc/623/comm /proc/624/comm /proc/62543/comm /proc/62567/comm /proc/62784/comm /proc/62891/comm /proc/62913/comm /proc/62914/comm /proc/62915/comm /proc/62917/comm /proc/62918/comm /proc/63/comm /proc/63137/comm /proc/63299/comm /proc/63329/comm /proc/63351/comm /proc/63504/comm /proc/63571/comm /proc/63605/comm /proc/63700/comm /proc/63965/comm /proc/64/comm /proc/64167/comm /proc/64211/comm /proc/64465/comm /proc/64505/comm /proc/64569/comm /proc/646/comm /proc/64661/comm /proc/64684/comm /proc/647/comm /proc/64708/comm /proc/64744/comm /proc/64775/comm /proc/64867/comm /proc/65044/comm /proc/65069/comm /proc/65641/comm /proc/65658/comm /proc/65664/comm /proc/65735/comm /proc/65736/comm /proc/65746/comm /proc/65932/comm /proc/66/comm /proc/67/comm /proc/67323/comm /proc/67348/comm /proc/68/comm /proc/68059/comm /proc/69/comm /proc/70/comm /proc/701/comm /proc/704/comm /proc/705/comm /proc/70607/comm /proc/70627/comm /proc/70628/comm /proc/70629/comm /proc/70630/comm /proc/70632/comm /proc/70635/comm /proc/70638/comm /proc/70639/comm /proc/70640/comm /proc/70641/comm /proc/70642/comm /proc/70644/comm /proc/70645/comm /proc/70646/comm /proc/718/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76736/comm /proc/76760/comm /proc/76855/comm /proc/76872/comm /proc/76878/comm /proc/76949/comm /proc/76950/comm /proc/76960/comm /proc/77093/comm /proc/78/comm /proc/78258/comm /proc/78284/comm /proc/79/comm /proc/79387/comm /proc/79453/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81376/comm /proc/82/comm /proc/83378/comm /proc/83391/comm /proc/84/comm /proc/84240/comm /proc/84265/comm /proc/85/comm /proc/85089/comm /proc/86/comm /proc/863/comm /proc/87/comm /proc/87594/comm /proc/87595/comm /proc/87596/comm /proc/87597/comm /proc/88/comm /proc/8841/comm /proc/89240/comm /proc/90/comm /proc/90336/comm /proc/90361/comm /proc/90576/comm /proc/90593/comm /proc/90599/comm /proc/9069/comm /proc/90723/comm /proc/90724/comm /proc/90734/comm /proc/9086/comm /proc/91/comm /proc/91013/comm /proc/9102/comm /proc/9186/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94340/comm /proc/94378/comm /proc/94384/comm /proc/94422/comm /proc/94892/comm /proc/94995/comm /proc/95666/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/9805/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.wO8n2ztJAg.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-raef405419b0e4216baadf2ed3a659ef5.scope; invocation ID: ae4c19dad9e249faad2254fbfd389b4d
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBY3OlpU1O3JBAA/lfEOWfBxRJ3Rq0zUtqF+A==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBY3OlpU1O3JBAA/lfEOWfBxRJ3Rq0zUtqF+A==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBY3OlpU1O3JBAA/lfEOWfBxRJ3Rq0zUtqF+A==
+ cat
+ virsh secret-define --file /tmp/tmp.wO8n2ztJAg.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBY3OlpU1O3JBAA/lfEOWfBxRJ3Rq0zUtqF+A==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.wO8n2ztJAg.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190042
+ kill 190042
+ tail --pid=190042 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rfacb48a1c93c49ef839173edfd64f589.scope; invocation ID: a1b10cf26ff84a3bbc75677757e7d199