+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10330/comm /proc/104/comm /proc/104517/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10836/comm /proc/10837/comm /proc/1087/comm /proc/109/comm /proc/109355/comm /proc/109378/comm /proc/1097/comm /proc/109740/comm /proc/109752/comm /proc/109753/comm /proc/11/comm /proc/110/comm /proc/11040/comm /proc/110883/comm /proc/110911/comm /proc/111/comm /proc/111000/comm /proc/111023/comm /proc/111229/comm /proc/111395/comm /proc/111499/comm /proc/111605/comm /proc/111607/comm /proc/112/comm /proc/112075/comm /proc/112268/comm /proc/112743/comm /proc/113/comm /proc/113017/comm /proc/113041/comm /proc/113179/comm /proc/113195/comm /proc/113202/comm /proc/113315/comm /proc/113316/comm /proc/113326/comm /proc/113459/comm /proc/114/comm /proc/114735/comm /proc/114777/comm /proc/114811/comm /proc/114837/comm /proc/115/comm /proc/115428/comm /proc/115465/comm /proc/116/comm /proc/117/comm /proc/119767/comm /proc/119912/comm /proc/12/comm /proc/121276/comm /proc/121823/comm /proc/12230/comm /proc/122616/comm /proc/12262/comm /proc/12309/comm /proc/12343/comm /proc/123455/comm /proc/123459/comm /proc/12355/comm /proc/124563/comm /proc/125003/comm /proc/125017/comm /proc/125018/comm /proc/12592/comm /proc/12621/comm /proc/126413/comm /proc/12676/comm /proc/12701/comm /proc/12720/comm /proc/127942/comm /proc/127966/comm /proc/127981/comm /proc/128006/comm /proc/128280/comm /proc/128539/comm /proc/128569/comm /proc/128988/comm /proc/129181/comm /proc/129930/comm /proc/129936/comm /proc/13/comm /proc/130284/comm /proc/130579/comm /proc/130607/comm /proc/132266/comm /proc/134379/comm /proc/134474/comm /proc/134477/comm /proc/134490/comm /proc/14/comm /proc/1419/comm /proc/145105/comm /proc/147596/comm /proc/147622/comm /proc/147623/comm /proc/149138/comm /proc/149139/comm /proc/15/comm /proc/1539/comm /proc/1540/comm /proc/1541/comm /proc/1542/comm /proc/1546/comm /proc/156236/comm /proc/156237/comm /proc/156239/comm /proc/156240/comm /proc/156357/comm /proc/157010/comm /proc/157034/comm /proc/157242/comm /proc/157440/comm /proc/157475/comm /proc/157488/comm /proc/157520/comm /proc/157521/comm /proc/157522/comm /proc/157523/comm /proc/158022/comm /proc/158047/comm /proc/158790/comm /proc/158877/comm /proc/159124/comm /proc/159148/comm /proc/159163/comm /proc/159186/comm /proc/159378/comm /proc/159380/comm /proc/159425/comm /proc/159447/comm /proc/159499/comm /proc/159517/comm /proc/159646/comm /proc/159668/comm /proc/159750/comm /proc/159778/comm /proc/159993/comm /proc/16/comm /proc/160200/comm /proc/160205/comm /proc/161013/comm /proc/161038/comm /proc/161235/comm /proc/161252/comm /proc/161258/comm /proc/1613/comm /proc/161327/comm /proc/161328/comm /proc/161338/comm /proc/161490/comm /proc/1617/comm /proc/1626/comm /proc/163133/comm /proc/163185/comm /proc/163303/comm /proc/163408/comm /proc/163436/comm /proc/163531/comm /proc/163554/comm /proc/163572/comm /proc/163603/comm /proc/163618/comm /proc/163646/comm /proc/163800/comm /proc/163994/comm /proc/164031/comm /proc/164104/comm /proc/164127/comm /proc/164701/comm /proc/164705/comm /proc/16518/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169031/comm /proc/169746/comm /proc/169874/comm /proc/170/comm /proc/170207/comm /proc/171/comm /proc/171062/comm /proc/172/comm /proc/172276/comm /proc/173/comm /proc/174/comm /proc/174143/comm /proc/174144/comm /proc/174362/comm /proc/174404/comm /proc/174405/comm /proc/174468/comm /proc/174496/comm /proc/174497/comm /proc/174765/comm /proc/175/comm /proc/175003/comm /proc/175033/comm /proc/175417/comm /proc/175418/comm /proc/175424/comm /proc/175425/comm /proc/176/comm /proc/176135/comm /proc/176137/comm /proc/176343/comm /proc/176367/comm /proc/176668/comm /proc/176694/comm /proc/176702/comm /proc/176766/comm /proc/176769/comm /proc/176789/comm /proc/176924/comm /proc/178/comm /proc/178247/comm /proc/178274/comm /proc/178320/comm /proc/178343/comm /proc/178365/comm /proc/178407/comm /proc/178636/comm /proc/178659/comm /proc/178693/comm /proc/178754/comm /proc/179/comm /proc/179161/comm /proc/179174/comm /proc/179341/comm /proc/18/comm /proc/182/comm /proc/182554/comm /proc/182557/comm /proc/182558/comm /proc/182584/comm /proc/183027/comm /proc/183169/comm /proc/184/comm /proc/184494/comm /proc/18481/comm /proc/185/comm /proc/18501/comm /proc/185217/comm /proc/18522/comm /proc/185242/comm /proc/18550/comm /proc/18567/comm /proc/185733/comm /proc/185782/comm /proc/185845/comm /proc/185868/comm /proc/186/comm /proc/186016/comm /proc/186027/comm /proc/186166/comm /proc/186244/comm /proc/187/comm /proc/187724/comm /proc/187725/comm /proc/188/comm /proc/188019/comm /proc/188020/comm /proc/188021/comm /proc/188409/comm /proc/188427/comm /proc/188454/comm /proc/188455/comm /proc/188468/comm /proc/188482/comm /proc/188483/comm /proc/188930/comm /proc/188932/comm /proc/188935/comm /proc/189/comm /proc/19/comm /proc/190067/comm /proc/190068/comm /proc/190213/comm /proc/190229/comm /proc/190230/comm /proc/190231/comm /proc/190232/comm /proc/190233/comm /proc/190234/comm /proc/190280/comm /proc/190640/comm /proc/190698/comm /proc/190757/comm /proc/190777/comm /proc/190812/comm /proc/190962/comm /proc/191/comm /proc/191092/comm /proc/191141/comm /proc/191167/comm /proc/191289/comm /proc/191290/comm /proc/191334/comm /proc/191351/comm /proc/191357/comm /proc/191414/comm /proc/191468/comm /proc/191494/comm /proc/191603/comm /proc/191608/comm /proc/191609/comm /proc/191619/comm /proc/191784/comm /proc/191848/comm /proc/191890/comm /proc/191895/comm /proc/191896/comm /proc/191897/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/196/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/21505/comm /proc/21571/comm /proc/21572/comm /proc/21585/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/2250/comm /proc/226/comm /proc/23088/comm /proc/24/comm /proc/248/comm /proc/24822/comm /proc/25/comm /proc/25086/comm /proc/25105/comm /proc/25130/comm /proc/25142/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/291/comm /proc/292/comm /proc/29316/comm /proc/29589/comm /proc/29606/comm /proc/29630/comm /proc/29642/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/32/comm /proc/323/comm /proc/33/comm /proc/33864/comm /proc/34/comm /proc/34130/comm /proc/34147/comm /proc/34172/comm /proc/34184/comm /proc/347/comm /proc/353/comm /proc/354/comm /proc/359/comm /proc/36/comm /proc/37/comm /proc/371/comm /proc/37542/comm /proc/37544/comm /proc/379/comm /proc/38/comm /proc/380/comm /proc/381/comm /proc/39/comm /proc/395/comm /proc/398/comm /proc/39898/comm /proc/399/comm /proc/39921/comm /proc/39940/comm /proc/39949/comm /proc/39973/comm /proc/4/comm /proc/40/comm /proc/40007/comm /proc/40022/comm /proc/40038/comm /proc/40053/comm /proc/40073/comm /proc/40131/comm /proc/40152/comm /proc/40178/comm /proc/40195/comm /proc/40301/comm /proc/40366/comm /proc/40471/comm /proc/40495/comm /proc/40521/comm /proc/41274/comm /proc/41295/comm /proc/41319/comm /proc/41337/comm /proc/41569/comm /proc/41779/comm /proc/42/comm /proc/42205/comm /proc/42604/comm /proc/42628/comm /proc/42670/comm /proc/43/comm /proc/43001/comm /proc/43029/comm /proc/43035/comm /proc/43063/comm /proc/43094/comm /proc/43119/comm /proc/43514/comm /proc/43540/comm /proc/43582/comm /proc/43783/comm /proc/44/comm /proc/44030/comm /proc/44053/comm /proc/44068/comm /proc/44092/comm /proc/44109/comm /proc/44140/comm /proc/44255/comm /proc/44304/comm /proc/44347/comm /proc/45/comm /proc/454/comm /proc/46/comm /proc/46181/comm /proc/46218/comm /proc/46287/comm /proc/46310/comm /proc/46540/comm /proc/46553/comm /proc/46588/comm /proc/46611/comm /proc/47224/comm /proc/47246/comm /proc/47328/comm /proc/47352/comm /proc/47398/comm /proc/47466/comm /proc/47711/comm /proc/47734/comm /proc/47850/comm /proc/48/comm /proc/48013/comm /proc/48036/comm /proc/48427/comm /proc/48450/comm /proc/48563/comm /proc/48620/comm /proc/48717/comm /proc/48746/comm /proc/48805/comm /proc/48885/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50430/comm /proc/50707/comm /proc/50731/comm /proc/50884/comm /proc/50908/comm /proc/50951/comm /proc/51/comm /proc/51045/comm /proc/51245/comm /proc/51299/comm /proc/51408/comm /proc/519/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55315/comm /proc/55338/comm /proc/56/comm /proc/56006/comm /proc/56030/comm /proc/56059/comm /proc/56084/comm /proc/56114/comm /proc/56143/comm /proc/56290/comm /proc/56314/comm /proc/56367/comm /proc/56406/comm /proc/56469/comm /proc/56576/comm /proc/57/comm /proc/57658/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60686/comm /proc/60736/comm /proc/60897/comm /proc/60919/comm /proc/60939/comm /proc/60963/comm /proc/60978/comm /proc/61/comm /proc/61003/comm /proc/611/comm /proc/61239/comm /proc/61253/comm /proc/615/comm /proc/617/comm /proc/61716/comm /proc/61742/comm /proc/61900/comm /proc/62/comm /proc/620/comm /proc/62089/comm /proc/62090/comm /proc/62091/comm /proc/62092/comm /proc/62093/comm /proc/621/comm /proc/62160/comm /proc/62197/comm /proc/62228/comm /proc/62314/comm /proc/62338/comm /proc/62773/comm /proc/62798/comm /proc/62856/comm /proc/62881/comm /proc/62896/comm /proc/62917/comm /proc/63/comm /proc/63306/comm /proc/63480/comm /proc/63505/comm /proc/63704/comm /proc/63728/comm /proc/63882/comm /proc/64/comm /proc/641/comm /proc/64186/comm /proc/64281/comm /proc/64292/comm /proc/643/comm /proc/64317/comm /proc/64612/comm /proc/64636/comm /proc/64654/comm /proc/64692/comm /proc/64693/comm /proc/64694/comm /proc/64695/comm /proc/64697/comm /proc/64731/comm /proc/65129/comm /proc/65181/comm /proc/65371/comm /proc/65404/comm /proc/65506/comm /proc/65553/comm /proc/65597/comm /proc/65638/comm /proc/65878/comm /proc/65924/comm /proc/65967/comm /proc/66/comm /proc/66026/comm /proc/66189/comm /proc/66467/comm /proc/66554/comm /proc/66583/comm /proc/66614/comm /proc/66732/comm /proc/66756/comm /proc/66819/comm /proc/66851/comm /proc/67/comm /proc/67175/comm /proc/67192/comm /proc/67198/comm /proc/67337/comm /proc/67338/comm /proc/67348/comm /proc/67444/comm /proc/68/comm /proc/68688/comm /proc/68713/comm /proc/69/comm /proc/70/comm /proc/704/comm /proc/707/comm /proc/708/comm /proc/72/comm /proc/72198/comm /proc/722/comm /proc/72212/comm /proc/72213/comm /proc/72214/comm /proc/72215/comm /proc/72216/comm /proc/72219/comm /proc/72220/comm /proc/72222/comm /proc/72224/comm /proc/72225/comm /proc/72226/comm /proc/72228/comm /proc/72229/comm /proc/72230/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76067/comm /proc/77910/comm /proc/78/comm /proc/78003/comm /proc/78026/comm /proc/78150/comm /proc/78167/comm /proc/78173/comm /proc/78287/comm /proc/78288/comm /proc/78298/comm /proc/78386/comm /proc/79/comm /proc/79538/comm /proc/79562/comm /proc/79992/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83469/comm /proc/84/comm /proc/84949/comm /proc/84980/comm /proc/85/comm /proc/85037/comm /proc/85706/comm /proc/85729/comm /proc/86/comm /proc/86672/comm /proc/867/comm /proc/87/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/90318/comm /proc/91/comm /proc/91404/comm /proc/91428/comm /proc/91521/comm /proc/91537/comm /proc/91543/comm /proc/91749/comm /proc/91750/comm /proc/91760/comm /proc/91855/comm /proc/92/comm /proc/9227/comm /proc/92385/comm /proc/9244/comm /proc/9260/comm /proc/93/comm /proc/9342/comm /proc/94/comm /proc/94242/comm /proc/94454/comm /proc/96/comm /proc/96804/comm /proc/96831/comm /proc/96840/comm /proc/96873/comm /proc/97/comm /proc/97379/comm /proc/97514/comm /proc/98/comm /proc/98209/comm /proc/99/comm /proc/99132/comm /proc/9959/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.amqz3ux1LM.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-refa4c954ae4f479d82966de0bd3d8c65.scope; invocation ID: 8710b8fb74524864a5aa79386586aea6
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDdI05qnWAsFRAAWXOUyQe9xJUmmTJjtzaLVw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDdI05qnWAsFRAAWXOUyQe9xJUmmTJjtzaLVw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDdI05qnWAsFRAAWXOUyQe9xJUmmTJjtzaLVw==
+ cat
+ virsh secret-define --file /tmp/tmp.amqz3ux1LM.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDdI05qnWAsFRAAWXOUyQe9xJUmmTJjtzaLVw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.amqz3ux1LM.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191926
+ kill 191926
+ tail --pid=191926 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r7ba268a3dda741448b1e885bce3c9bbd.scope; invocation ID: 505d101eaeae43739b48f6b4f2fa5088