+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101608/comm /proc/10167/comm /proc/102/comm /proc/103/comm /proc/103087/comm /proc/103196/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106143/comm /proc/10673/comm /proc/10674/comm /proc/106994/comm /proc/107018/comm /proc/107354/comm /proc/107367/comm /proc/107368/comm /proc/108/comm /proc/108561/comm /proc/108585/comm /proc/108622/comm /proc/108666/comm /proc/109/comm /proc/109064/comm /proc/109255/comm /proc/109257/comm /proc/109874/comm /proc/109936/comm /proc/109942/comm /proc/11/comm /proc/110/comm /proc/110400/comm /proc/110664/comm /proc/110686/comm /proc/110766/comm /proc/110783/comm /proc/110789/comm /proc/110881/comm /proc/110882/comm /proc/110892/comm /proc/111/comm /proc/111164/comm /proc/112/comm /proc/112410/comm /proc/112433/comm /proc/112453/comm /proc/112478/comm /proc/113/comm /proc/113950/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/118060/comm /proc/1185/comm /proc/12/comm /proc/120093/comm /proc/120377/comm /proc/12108/comm /proc/121171/comm /proc/12137/comm /proc/121660/comm /proc/121672/comm /proc/121673/comm /proc/12172/comm /proc/12219/comm /proc/122230/comm /proc/12231/comm /proc/12470/comm /proc/12491/comm /proc/12519/comm /proc/125393/comm /proc/125413/comm /proc/125431/comm /proc/125456/comm /proc/12561/comm /proc/125884/comm /proc/12594/comm /proc/126102/comm /proc/126517/comm /proc/126575/comm /proc/128075/comm /proc/128348/comm /proc/128368/comm /proc/128427/comm /proc/128446/comm /proc/128521/comm /proc/128652/comm /proc/128662/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/13/comm /proc/130297/comm /proc/130322/comm /proc/130500/comm /proc/130716/comm /proc/131100/comm /proc/131572/comm /proc/131578/comm /proc/132768/comm /proc/133097/comm /proc/133943/comm /proc/134868/comm /proc/134942/comm /proc/135723/comm /proc/135736/comm /proc/135737/comm /proc/136831/comm /proc/136832/comm /proc/1383/comm /proc/1387/comm /proc/14/comm /proc/144047/comm /proc/144174/comm /proc/144175/comm /proc/144177/comm /proc/144178/comm /proc/144333/comm /proc/1452/comm /proc/1456/comm /proc/1465/comm /proc/15/comm /proc/156108/comm /proc/156134/comm /proc/156209/comm /proc/156653/comm /proc/156753/comm /proc/156766/comm /proc/156792/comm /proc/156793/comm /proc/156794/comm /proc/156795/comm /proc/157396/comm /proc/157422/comm /proc/158292/comm /proc/158318/comm /proc/158554/comm /proc/158577/comm /proc/158608/comm /proc/158639/comm /proc/158848/comm /proc/158849/comm /proc/158886/comm /proc/158908/comm /proc/158944/comm /proc/158964/comm /proc/159039/comm /proc/159064/comm /proc/159184/comm /proc/159208/comm /proc/159440/comm /proc/159644/comm /proc/159661/comm /proc/15971/comm /proc/16/comm /proc/160076/comm /proc/160192/comm /proc/160216/comm /proc/160297/comm /proc/160381/comm /proc/160399/comm /proc/160406/comm /proc/160471/comm /proc/160472/comm /proc/160484/comm /proc/160846/comm /proc/162573/comm /proc/162598/comm /proc/162662/comm /proc/162695/comm /proc/162732/comm /proc/162816/comm /proc/162848/comm /proc/162878/comm /proc/162915/comm /proc/162963/comm /proc/163018/comm /proc/163045/comm /proc/163190/comm /proc/163213/comm /proc/163380/comm /proc/163405/comm /proc/163524/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167918/comm /proc/168/comm /proc/168338/comm /proc/168711/comm /proc/168770/comm /proc/168771/comm /proc/169/comm /proc/170/comm /proc/170864/comm /proc/171/comm /proc/171023/comm /proc/172/comm /proc/172604/comm /proc/172622/comm /proc/172625/comm /proc/173/comm /proc/173071/comm /proc/173150/comm /proc/173185/comm /proc/173186/comm /proc/173311/comm /proc/173325/comm /proc/173326/comm /proc/173961/comm /proc/173967/comm /proc/174219/comm /proc/174222/comm /proc/174223/comm /proc/174226/comm /proc/174255/comm /proc/174256/comm /proc/174910/comm /proc/175181/comm /proc/175205/comm /proc/175283/comm /proc/175300/comm /proc/175306/comm /proc/175352/comm /proc/175369/comm /proc/175370/comm /proc/175380/comm /proc/175633/comm /proc/176/comm /proc/176963/comm /proc/176992/comm /proc/177021/comm /proc/177061/comm /proc/177153/comm /proc/177252/comm /proc/177275/comm /proc/177542/comm /proc/177692/comm /proc/177724/comm /proc/177871/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/182/comm /proc/183155/comm /proc/183185/comm /proc/183254/comm /proc/183634/comm /proc/183658/comm /proc/184/comm /proc/184143/comm /proc/184318/comm /proc/184389/comm /proc/184455/comm /proc/184475/comm /proc/184527/comm /proc/184538/comm /proc/184883/comm /proc/185529/comm /proc/185614/comm /proc/185623/comm /proc/186/comm /proc/186849/comm /proc/187/comm /proc/188/comm /proc/188390/comm /proc/188429/comm /proc/188430/comm /proc/188431/comm /proc/188432/comm /proc/188433/comm /proc/188434/comm /proc/188435/comm /proc/188436/comm /proc/188437/comm /proc/188438/comm /proc/188439/comm /proc/188440/comm /proc/188441/comm /proc/188442/comm /proc/188443/comm /proc/188444/comm /proc/188445/comm /proc/188446/comm /proc/188994/comm /proc/188995/comm /proc/188996/comm /proc/189/comm /proc/189100/comm /proc/189515/comm /proc/189591/comm /proc/189652/comm /proc/189665/comm /proc/189666/comm /proc/189799/comm /proc/189821/comm /proc/189937/comm /proc/189992/comm /proc/19/comm /proc/190200/comm /proc/190250/comm /proc/190265/comm /proc/190291/comm /proc/190338/comm /proc/190339/comm /proc/190342/comm /proc/190343/comm /proc/190344/comm /proc/190345/comm /proc/190346/comm /proc/190500/comm /proc/190501/comm /proc/190502/comm /proc/190528/comm /proc/190533/comm /proc/190543/comm /proc/190544/comm /proc/190545/comm /proc/191/comm /proc/192/comm /proc/19289/comm /proc/193/comm /proc/19310/comm /proc/19331/comm /proc/19360/comm /proc/19376/comm /proc/194/comm /proc/195/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21396/comm /proc/21403/comm /proc/21404/comm /proc/21418/comm /proc/216/comm /proc/21925/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24250/comm /proc/24514/comm /proc/24531/comm /proc/24554/comm /proc/24567/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/286/comm /proc/287/comm /proc/28765/comm /proc/289/comm /proc/290/comm /proc/29034/comm /proc/29056/comm /proc/29082/comm /proc/29095/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/32/comm /proc/324/comm /proc/33/comm /proc/33547/comm /proc/33827/comm /proc/33844/comm /proc/33868/comm /proc/33880/comm /proc/34/comm /proc/350/comm /proc/357/comm /proc/36/comm /proc/36865/comm /proc/36867/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/391/comm /proc/39230/comm /proc/39238/comm /proc/39275/comm /proc/39298/comm /proc/39303/comm /proc/39323/comm /proc/39341/comm /proc/39381/comm /proc/39384/comm /proc/39402/comm /proc/39468/comm /proc/39509/comm /proc/39694/comm /proc/397/comm /proc/398/comm /proc/39865/comm /proc/39888/comm /proc/39914/comm /proc/4/comm /proc/40/comm /proc/40582/comm /proc/40600/comm /proc/40642/comm /proc/40651/comm /proc/41074/comm /proc/41449/comm /proc/41932/comm /proc/41956/comm /proc/42/comm /proc/42336/comm /proc/42359/comm /proc/42381/comm /proc/42405/comm /proc/42424/comm /proc/42469/comm /proc/42802/comm /proc/42825/comm /proc/43/comm /proc/43069/comm /proc/43291/comm /proc/43315/comm /proc/43330/comm /proc/43356/comm /proc/43377/comm /proc/43401/comm /proc/43512/comm /proc/43554/comm /proc/43600/comm /proc/43750/comm /proc/44/comm /proc/45/comm /proc/45355/comm /proc/45387/comm /proc/454/comm /proc/45467/comm /proc/45491/comm /proc/45695/comm /proc/45708/comm /proc/45721/comm /proc/45756/comm /proc/45838/comm /proc/46/comm /proc/46258/comm /proc/46281/comm /proc/46296/comm /proc/46326/comm /proc/46736/comm /proc/46769/comm /proc/47219/comm /proc/47246/comm /proc/47381/comm /proc/47639/comm /proc/47663/comm /proc/47761/comm /proc/47812/comm /proc/47911/comm /proc/47940/comm /proc/48/comm /proc/48029/comm /proc/48043/comm /proc/489/comm /proc/49/comm /proc/49261/comm /proc/5/comm /proc/50/comm /proc/50076/comm /proc/50104/comm /proc/50271/comm /proc/50295/comm /proc/50363/comm /proc/50482/comm /proc/50654/comm /proc/50744/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/54/comm /proc/55/comm /proc/55051/comm /proc/55075/comm /proc/55318/comm /proc/55681/comm /proc/55710/comm /proc/55732/comm /proc/55756/comm /proc/55771/comm /proc/55796/comm /proc/56/comm /proc/56016/comm /proc/56039/comm /proc/56077/comm /proc/56111/comm /proc/56150/comm /proc/56264/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60678/comm /proc/60749/comm /proc/60863/comm /proc/60886/comm /proc/60901/comm /proc/60929/comm /proc/60949/comm /proc/60974/comm /proc/61/comm /proc/612/comm /proc/61301/comm /proc/61325/comm /proc/61416/comm /proc/61509/comm /proc/61577/comm /proc/61578/comm /proc/616/comm /proc/61639/comm /proc/61640/comm /proc/618/comm /proc/61837/comm /proc/62/comm /proc/621/comm /proc/622/comm /proc/62263/comm /proc/62292/comm /proc/62537/comm /proc/62614/comm /proc/62711/comm /proc/62741/comm /proc/62769/comm /proc/62794/comm /proc/62815/comm /proc/62840/comm /proc/62885/comm /proc/62917/comm /proc/63/comm /proc/63016/comm /proc/63017/comm /proc/63384/comm /proc/63407/comm /proc/63622/comm /proc/63781/comm /proc/63805/comm /proc/64/comm /proc/64004/comm /proc/64030/comm /proc/641/comm /proc/64309/comm /proc/64333/comm /proc/64394/comm /proc/646/comm /proc/64833/comm /proc/64849/comm /proc/64850/comm /proc/64851/comm /proc/64852/comm /proc/64853/comm /proc/65009/comm /proc/65052/comm /proc/65077/comm /proc/65279/comm /proc/65469/comm /proc/65503/comm /proc/65542/comm /proc/65767/comm /proc/66/comm /proc/66328/comm /proc/66467/comm /proc/66547/comm /proc/66590/comm /proc/66723/comm /proc/66746/comm /proc/66852/comm /proc/66896/comm /proc/66933/comm /proc/66968/comm /proc/67/comm /proc/67081/comm /proc/67111/comm /proc/67141/comm /proc/67285/comm /proc/67487/comm /proc/67736/comm /proc/67753/comm /proc/67759/comm /proc/67817/comm /proc/67818/comm /proc/67828/comm /proc/68/comm /proc/68029/comm /proc/69/comm /proc/69008/comm /proc/69032/comm /proc/698/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72388/comm /proc/72428/comm /proc/72429/comm /proc/72430/comm /proc/72431/comm /proc/72432/comm /proc/72434/comm /proc/72435/comm /proc/72436/comm /proc/72437/comm /proc/72442/comm /proc/72443/comm /proc/72444/comm /proc/72446/comm /proc/72447/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76235/comm /proc/78/comm /proc/78082/comm /proc/78106/comm /proc/78197/comm /proc/78246/comm /proc/78252/comm /proc/78324/comm /proc/78325/comm /proc/78335/comm /proc/78522/comm /proc/79/comm /proc/79607/comm /proc/79632/comm /proc/79782/comm /proc/8/comm /proc/80/comm /proc/80714/comm /proc/81/comm /proc/82/comm /proc/83072/comm /proc/83304/comm /proc/84/comm /proc/84640/comm /proc/84654/comm /proc/85/comm /proc/85204/comm /proc/85228/comm /proc/86/comm /proc/86123/comm /proc/864/comm /proc/87/comm /proc/88/comm /proc/89450/comm /proc/90/comm /proc/9062/comm /proc/9079/comm /proc/9095/comm /proc/91/comm /proc/91103/comm /proc/91387/comm /proc/91409/comm /proc/91526/comm /proc/91544/comm /proc/91550/comm /proc/91640/comm /proc/91641/comm /proc/91652/comm /proc/9179/comm /proc/92/comm /proc/92105/comm /proc/93/comm /proc/94/comm /proc/95544/comm /proc/95545/comm /proc/96/comm /proc/97/comm /proc/97810/comm /proc/97834/comm /proc/97858/comm /proc/97886/comm /proc/9795/comm /proc/98/comm /proc/98167/comm /proc/98251/comm /proc/99/comm /proc/99034/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.n88bgSPqQJ.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-ra6b93ac0c441478288568ceead0b1497.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDIaulpvPWqLBAAYhheg9BZePrXDqv5mrnukw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDIaulpvPWqLBAAYhheg9BZePrXDqv5mrnukw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDIaulpvPWqLBAAYhheg9BZePrXDqv5mrnukw==
+ cat
+ virsh secret-define --file /tmp/tmp.n88bgSPqQJ.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDIaulpvPWqLBAAYhheg9BZePrXDqv5mrnukw==
error: Passing secret value as command-line argument is insecure!
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.n88bgSPqQJ.xml
Secret value set

+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190565
+ kill 190565
+ tail --pid=190565 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r0e0ff4f8f8774d45ae605acfd6b6b4fb.scope