+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10007/comm /proc/102/comm /proc/103/comm /proc/10382/comm /proc/104/comm /proc/104663/comm /proc/104665/comm /proc/105/comm /proc/106/comm /proc/106065/comm /proc/106089/comm /proc/106516/comm /proc/106530/comm /proc/106531/comm /proc/107798/comm /proc/107826/comm /proc/107853/comm /proc/107895/comm /proc/108/comm /proc/108417/comm /proc/108494/comm /proc/108629/comm /proc/108631/comm /proc/10890/comm /proc/10891/comm /proc/109/comm /proc/109176/comm /proc/109641/comm /proc/109812/comm /proc/109989/comm /proc/11/comm /proc/110/comm /proc/110013/comm /proc/110094/comm /proc/110111/comm /proc/110117/comm /proc/110286/comm /proc/110287/comm /proc/110297/comm /proc/110557/comm /proc/111/comm /proc/111564/comm /proc/111725/comm /proc/111747/comm /proc/111769/comm /proc/111793/comm /proc/112/comm /proc/1127/comm /proc/113/comm /proc/113962/comm /proc/114/comm /proc/115/comm /proc/115259/comm /proc/115290/comm /proc/115314/comm /proc/116/comm /proc/117/comm /proc/117593/comm /proc/119613/comm /proc/12/comm /proc/121157/comm /proc/121172/comm /proc/121173/comm /proc/122021/comm /proc/12281/comm /proc/12311/comm /proc/12365/comm /proc/12388/comm /proc/12401/comm /proc/124830/comm /proc/124853/comm /proc/124868/comm /proc/124897/comm /proc/125010/comm /proc/125503/comm /proc/125816/comm /proc/12585/comm /proc/126024/comm /proc/12640/comm /proc/126570/comm /proc/12671/comm /proc/127259/comm /proc/127283/comm /proc/12731/comm /proc/127465/comm /proc/12755/comm /proc/127684/comm /proc/127745/comm /proc/127746/comm /proc/12775/comm /proc/128544/comm /proc/12862/comm /proc/129557/comm /proc/129563/comm /proc/129659/comm /proc/13/comm /proc/130646/comm /proc/130661/comm /proc/132319/comm /proc/132332/comm /proc/132333/comm /proc/133466/comm /proc/133467/comm /proc/139/comm /proc/14/comm /proc/140455/comm /proc/140456/comm /proc/140459/comm /proc/140464/comm /proc/140685/comm /proc/140695/comm /proc/141230/comm /proc/141257/comm /proc/141565/comm /proc/141606/comm /proc/141619/comm /proc/141651/comm /proc/141652/comm /proc/141653/comm /proc/141654/comm /proc/142158/comm /proc/142185/comm /proc/143105/comm /proc/143106/comm /proc/143401/comm /proc/143427/comm /proc/143441/comm /proc/143465/comm /proc/143585/comm /proc/143669/comm /proc/143683/comm /proc/143710/comm /proc/143729/comm /proc/143782/comm /proc/143801/comm /proc/143891/comm /proc/143898/comm /proc/143923/comm /proc/143967/comm /proc/144310/comm /proc/144515/comm /proc/144520/comm /proc/144845/comm /proc/144912/comm /proc/144975/comm /proc/144999/comm /proc/145073/comm /proc/145095/comm /proc/145112/comm /proc/145118/comm /proc/145375/comm /proc/145376/comm /proc/145388/comm /proc/145711/comm /proc/1470/comm /proc/147130/comm /proc/147216/comm /proc/147337/comm /proc/147496/comm /proc/147526/comm /proc/147540/comm /proc/147571/comm /proc/147696/comm /proc/147739/comm /proc/147807/comm /proc/147843/comm /proc/147913/comm /proc/147927/comm /proc/147957/comm /proc/148192/comm /proc/148201/comm /proc/148224/comm /proc/148558/comm /proc/148621/comm /proc/148633/comm /proc/15/comm /proc/1536/comm /proc/1546/comm /proc/1587/comm /proc/1588/comm /proc/1589/comm /proc/1590/comm /proc/1594/comm /proc/16/comm /proc/166/comm /proc/1661/comm /proc/1665/comm /proc/167/comm /proc/167277/comm /proc/1674/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171185/comm /proc/171675/comm /proc/171733/comm /proc/171768/comm /proc/171769/comm /proc/171881/comm /proc/171918/comm /proc/171919/comm /proc/172/comm /proc/172445/comm /proc/172446/comm /proc/172447/comm /proc/172506/comm /proc/172512/comm /proc/172740/comm /proc/172744/comm /proc/172765/comm /proc/172766/comm /proc/172771/comm /proc/172772/comm /proc/173/comm /proc/173417/comm /proc/173432/comm /proc/173435/comm /proc/173532/comm /proc/173556/comm /proc/173807/comm /proc/173824/comm /proc/173830/comm /proc/173922/comm /proc/173923/comm /proc/173935/comm /proc/174/comm /proc/174120/comm /proc/175/comm /proc/175421/comm /proc/175463/comm /proc/175477/comm /proc/175525/comm /proc/175737/comm /proc/175762/comm /proc/176/comm /proc/176322/comm /proc/176338/comm /proc/178/comm /proc/178953/comm /proc/179/comm /proc/179339/comm /proc/179478/comm /proc/179994/comm /proc/18/comm /proc/180860/comm /proc/180869/comm /proc/180870/comm /proc/180871/comm /proc/181857/comm /proc/182/comm /proc/183258/comm /proc/183282/comm /proc/183781/comm /proc/183806/comm /proc/183850/comm /proc/183920/comm /proc/183957/comm /proc/184/comm /proc/184024/comm /proc/184035/comm /proc/184127/comm /proc/184128/comm /proc/184129/comm /proc/184610/comm /proc/184642/comm /proc/184655/comm /proc/184656/comm /proc/184871/comm /proc/184872/comm /proc/184874/comm /proc/184875/comm /proc/184876/comm /proc/184877/comm /proc/184878/comm /proc/185/comm /proc/186/comm /proc/186020/comm /proc/186138/comm /proc/186164/comm /proc/186408/comm /proc/186426/comm /proc/186436/comm /proc/186615/comm /proc/186616/comm /proc/186626/comm /proc/186824/comm /proc/187/comm /proc/188/comm /proc/188106/comm /proc/188148/comm /proc/188197/comm /proc/188225/comm /proc/188226/comm /proc/188227/comm /proc/188228/comm /proc/188229/comm /proc/188230/comm /proc/188277/comm /proc/188319/comm /proc/18839/comm /proc/188527/comm /proc/188551/comm /proc/188566/comm /proc/18859/comm /proc/188595/comm /proc/188654/comm /proc/188677/comm /proc/188718/comm /proc/188786/comm /proc/18882/comm /proc/188846/comm /proc/188921/comm /proc/188922/comm /proc/188927/comm /proc/189/comm /proc/18909/comm /proc/189097/comm /proc/189228/comm /proc/18926/comm /proc/189260/comm /proc/189551/comm /proc/189599/comm /proc/189601/comm /proc/189759/comm /proc/189788/comm /proc/19/comm /proc/190/comm /proc/190030/comm /proc/190080/comm /proc/190170/comm /proc/190195/comm /proc/190245/comm /proc/190269/comm /proc/190299/comm /proc/190570/comm /proc/190573/comm /proc/190576/comm /proc/190577/comm /proc/190578/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/217/comm /proc/21846/comm /proc/21906/comm /proc/21907/comm /proc/21920/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25161/comm /proc/25428/comm /proc/25445/comm /proc/25470/comm /proc/25482/comm /proc/26/comm /proc/26133/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/288/comm /proc/290/comm /proc/293/comm /proc/294/comm /proc/29664/comm /proc/29930/comm /proc/29948/comm /proc/29973/comm /proc/29985/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/327/comm /proc/33/comm /proc/34/comm /proc/34472/comm /proc/346/comm /proc/34754/comm /proc/34772/comm /proc/34796/comm /proc/34808/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/371/comm /proc/38/comm /proc/38180/comm /proc/38182/comm /proc/389/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/405/comm /proc/40571/comm /proc/40576/comm /proc/40615/comm /proc/40618/comm /proc/40620/comm /proc/40681/comm /proc/40689/comm /proc/40715/comm /proc/40735/comm /proc/40737/comm /proc/40818/comm /proc/40839/comm /proc/40854/comm /proc/40867/comm /proc/40977/comm /proc/41044/comm /proc/41166/comm /proc/41189/comm /proc/41214/comm /proc/42/comm /proc/42053/comm /proc/42077/comm /proc/42099/comm /proc/42123/comm /proc/42250/comm /proc/42458/comm /proc/42548/comm /proc/42835/comm /proc/43/comm /proc/43350/comm /proc/43374/comm /proc/43445/comm /proc/43694/comm /proc/43717/comm /proc/43734/comm /proc/43756/comm /proc/43792/comm /proc/43831/comm /proc/44/comm /proc/44162/comm /proc/44186/comm /proc/44505/comm /proc/44650/comm /proc/44674/comm /proc/44689/comm /proc/44714/comm /proc/44729/comm /proc/44759/comm /proc/44873/comm /proc/44920/comm /proc/44961/comm /proc/45/comm /proc/458/comm /proc/46/comm /proc/46829/comm /proc/46862/comm /proc/46942/comm /proc/46967/comm /proc/47199/comm /proc/47212/comm /proc/47295/comm /proc/47355/comm /proc/47694/comm /proc/47717/comm /proc/47797/comm /proc/47823/comm /proc/47870/comm /proc/47992/comm /proc/48/comm /proc/48179/comm /proc/48204/comm /proc/48341/comm /proc/48539/comm /proc/48563/comm /proc/48886/comm /proc/48911/comm /proc/49/comm /proc/49023/comm /proc/49201/comm /proc/49298/comm /proc/49327/comm /proc/49353/comm /proc/49444/comm /proc/5/comm /proc/50/comm /proc/50335/comm /proc/51/comm /proc/51165/comm /proc/51194/comm /proc/51345/comm /proc/51369/comm /proc/51400/comm /proc/51530/comm /proc/51695/comm /proc/51807/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/55/comm /proc/55576/comm /proc/55599/comm /proc/56/comm /proc/56235/comm /proc/56258/comm /proc/56274/comm /proc/56314/comm /proc/56316/comm /proc/56364/comm /proc/56502/comm /proc/56525/comm /proc/56624/comm /proc/56658/comm /proc/56698/comm /proc/56785/comm /proc/56826/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60176/comm /proc/60205/comm /proc/60402/comm /proc/60468/comm /proc/60528/comm /proc/60589/comm /proc/60616/comm /proc/60648/comm /proc/60673/comm /proc/60698/comm /proc/60727/comm /proc/60938/comm /proc/61/comm /proc/61169/comm /proc/613/comm /proc/61377/comm /proc/61599/comm /proc/616/comm /proc/61683/comm /proc/61713/comm /proc/619/comm /proc/61954/comm /proc/61955/comm /proc/61958/comm /proc/61959/comm /proc/61975/comm /proc/62/comm /proc/62215/comm /proc/62238/comm /proc/623/comm /proc/62326/comm /proc/62349/comm /proc/62538/comm /proc/62562/comm /proc/62589/comm /proc/62617/comm /proc/62636/comm /proc/62659/comm /proc/627/comm /proc/63/comm /proc/63046/comm /proc/63191/comm /proc/63215/comm /proc/63244/comm /proc/63340/comm /proc/63432/comm /proc/63673/comm /proc/63985/comm /proc/64/comm /proc/64015/comm /proc/64016/comm /proc/64017/comm /proc/64018/comm /proc/64019/comm /proc/64269/comm /proc/64292/comm /proc/644/comm /proc/64458/comm /proc/64482/comm /proc/64515/comm /proc/64598/comm /proc/649/comm /proc/64929/comm /proc/64940/comm /proc/64999/comm /proc/650/comm /proc/65150/comm /proc/65175/comm /proc/65405/comm /proc/65443/comm /proc/65499/comm /proc/65538/comm /proc/65797/comm /proc/65835/comm /proc/65883/comm /proc/66/comm /proc/66210/comm /proc/66336/comm /proc/66381/comm /proc/66456/comm /proc/66495/comm /proc/66537/comm /proc/66556/comm /proc/66796/comm /proc/66820/comm /proc/67/comm /proc/67112/comm /proc/67129/comm /proc/67135/comm /proc/67263/comm /proc/67264/comm /proc/67274/comm /proc/67474/comm /proc/68/comm /proc/68379/comm /proc/68402/comm /proc/69/comm /proc/69243/comm /proc/70/comm /proc/706/comm /proc/707/comm /proc/71860/comm /proc/71902/comm /proc/71903/comm /proc/71904/comm /proc/71905/comm /proc/71908/comm /proc/71911/comm /proc/71913/comm /proc/71915/comm /proc/71916/comm /proc/71917/comm /proc/71918/comm /proc/71919/comm /proc/71920/comm /proc/71921/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77417/comm /proc/77440/comm /proc/77585/comm /proc/77601/comm /proc/77607/comm /proc/77665/comm /proc/77666/comm /proc/77676/comm /proc/77890/comm /proc/78/comm /proc/78924/comm /proc/78948/comm /proc/79/comm /proc/79197/comm /proc/8/comm /proc/80/comm /proc/80729/comm /proc/80730/comm /proc/80805/comm /proc/81/comm /proc/82/comm /proc/82542/comm /proc/83835/comm /proc/83862/comm /proc/84/comm /proc/84509/comm /proc/84533/comm /proc/85/comm /proc/85235/comm /proc/86/comm /proc/865/comm /proc/87/comm /proc/88/comm /proc/90/comm /proc/90379/comm /proc/90424/comm /proc/9046/comm /proc/90616/comm /proc/90640/comm /proc/90646/comm /proc/90805/comm /proc/90806/comm /proc/90816/comm /proc/91/comm /proc/91170/comm /proc/92/comm /proc/9274/comm /proc/9291/comm /proc/93/comm /proc/9307/comm /proc/9391/comm /proc/94/comm /proc/95282/comm /proc/96/comm /proc/96973/comm /proc/96996/comm /proc/97/comm /proc/97019/comm /proc/97044/comm /proc/97376/comm /proc/97547/comm /proc/98/comm /proc/98299/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.odcq7dmYHN.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r4687540c7a4145d68e149c629408ca28.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDyjhZqBcIJLRAAYnQObe27df+kIjMb+qE6BA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDyjhZqBcIJLRAAYnQObe27df+kIjMb+qE6BA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDyjhZqBcIJLRAAYnQObe27df+kIjMb+qE6BA==
+ cat
+ virsh secret-define --file /tmp/tmp.odcq7dmYHN.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDyjhZqBcIJLRAAYnQObe27df+kIjMb+qE6BA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.odcq7dmYHN.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190598
+ kill 190598
+ tail --pid=190598 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rd61ff5444c6942618d4d606d41d4d3ea.scope