+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/102979/comm /proc/103/comm /proc/10335/comm /proc/103605/comm /proc/103629/comm /proc/103761/comm /proc/104/comm /proc/104000/comm /proc/104013/comm /proc/104014/comm /proc/105/comm /proc/105230/comm /proc/105255/comm /proc/105382/comm /proc/105416/comm /proc/105652/comm /proc/105711/comm /proc/105759/comm /proc/105806/comm /proc/105808/comm /proc/106/comm /proc/107005/comm /proc/107112/comm /proc/107198/comm /proc/107222/comm /proc/107421/comm /proc/107438/comm /proc/107444/comm /proc/107552/comm /proc/107553/comm /proc/107564/comm /proc/107707/comm /proc/108/comm /proc/10844/comm /proc/10845/comm /proc/109/comm /proc/109163/comm /proc/109191/comm /proc/109217/comm /proc/109254/comm /proc/11/comm /proc/110/comm /proc/1100/comm /proc/111/comm /proc/111001/comm /proc/111002/comm /proc/111751/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117501/comm /proc/118604/comm /proc/119065/comm /proc/119078/comm /proc/119079/comm /proc/12/comm /proc/120486/comm /proc/122167/comm /proc/122190/comm /proc/122211/comm /proc/122249/comm /proc/12229/comm /proc/12258/comm /proc/122847/comm /proc/12314/comm /proc/123362/comm /proc/12339/comm /proc/123549/comm /proc/12359/comm /proc/124196/comm /proc/124767/comm /proc/124792/comm /proc/125287/comm /proc/125481/comm /proc/12589/comm /proc/126176/comm /proc/12620/comm /proc/126215/comm /proc/12675/comm /proc/12700/comm /proc/12719/comm /proc/127334/comm /proc/127642/comm /proc/128742/comm /proc/128825/comm /proc/128842/comm /proc/129854/comm /proc/129909/comm /proc/13/comm /proc/130387/comm /proc/130417/comm /proc/130418/comm /proc/131785/comm /proc/131786/comm /proc/138753/comm /proc/138919/comm /proc/138920/comm /proc/138922/comm /proc/138924/comm /proc/139128/comm /proc/139651/comm /proc/139678/comm /proc/14/comm /proc/140004/comm /proc/140081/comm /proc/140110/comm /proc/140165/comm /proc/140177/comm /proc/140209/comm /proc/140210/comm /proc/140211/comm /proc/140212/comm /proc/140559/comm /proc/140754/comm /proc/140795/comm /proc/140833/comm /proc/141605/comm /proc/141608/comm /proc/141619/comm /proc/141620/comm /proc/141770/comm /proc/141792/comm /proc/141899/comm /proc/141918/comm /proc/141932/comm /proc/142034/comm /proc/142057/comm /proc/142133/comm /proc/142172/comm /proc/142184/comm /proc/142197/comm /proc/142445/comm /proc/142510/comm /proc/142535/comm /proc/142726/comm /proc/142747/comm /proc/142950/comm /proc/142955/comm /proc/1432/comm /proc/143367/comm /proc/143542/comm /proc/143566/comm /proc/143783/comm /proc/143798/comm /proc/143804/comm /proc/143853/comm /proc/143854/comm /proc/143864/comm /proc/144020/comm /proc/145728/comm /proc/145758/comm /proc/145925/comm /proc/146032/comm /proc/146057/comm /proc/146173/comm /proc/146214/comm /proc/146227/comm /proc/146270/comm /proc/146312/comm /proc/146339/comm /proc/146373/comm /proc/146454/comm /proc/146484/comm /proc/146825/comm /proc/146850/comm /proc/147425/comm /proc/15/comm /proc/1537/comm /proc/1538/comm /proc/1539/comm /proc/1540/comm /proc/1544/comm /proc/16/comm /proc/1611/comm /proc/1615/comm /proc/1624/comm /proc/165342/comm /proc/165390/comm /proc/165395/comm /proc/165983/comm /proc/167/comm /proc/167296/comm /proc/167353/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170278/comm /proc/170834/comm /proc/170853/comm /proc/170871/comm /proc/170872/comm /proc/170883/comm /proc/170884/comm /proc/171/comm /proc/171135/comm /proc/171403/comm /proc/171479/comm /proc/171560/comm /proc/171920/comm /proc/171922/comm /proc/171977/comm /proc/171979/comm /proc/172/comm /proc/172542/comm /proc/172547/comm /proc/172586/comm /proc/172758/comm /proc/172783/comm /proc/172933/comm /proc/172953/comm /proc/172959/comm /proc/173/comm /proc/173051/comm /proc/173052/comm /proc/173062/comm /proc/173237/comm /proc/173616/comm /proc/174/comm /proc/174593/comm /proc/174625/comm /proc/174627/comm /proc/174698/comm /proc/174705/comm /proc/174743/comm /proc/174850/comm /proc/174875/comm /proc/174968/comm /proc/174995/comm /proc/175/comm /proc/175018/comm /proc/175055/comm /proc/175339/comm /proc/175531/comm /proc/175569/comm /proc/175711/comm /proc/175728/comm /proc/177/comm /proc/178/comm /proc/178794/comm /proc/178851/comm /proc/179410/comm /proc/18/comm /proc/180/comm /proc/180760/comm /proc/180765/comm /proc/181/comm /proc/181670/comm /proc/181693/comm /proc/181859/comm /proc/181897/comm /proc/182125/comm /proc/182231/comm /proc/182244/comm /proc/182292/comm /proc/182362/comm /proc/182394/comm /proc/182483/comm /proc/182505/comm /proc/183/comm /proc/184331/comm /proc/184332/comm /proc/184333/comm /proc/184510/comm /proc/184776/comm /proc/184824/comm /proc/184825/comm /proc/184838/comm /proc/184850/comm /proc/184851/comm /proc/185/comm /proc/186/comm /proc/18605/comm /proc/18624/comm /proc/186399/comm /proc/18644/comm /proc/186525/comm /proc/186541/comm /proc/18673/comm /proc/18690/comm /proc/186976/comm /proc/187/comm /proc/187054/comm /proc/187117/comm /proc/187144/comm /proc/187281/comm /proc/187310/comm /proc/187313/comm /proc/187317/comm /proc/187354/comm /proc/187368/comm /proc/187396/comm /proc/187430/comm /proc/187431/comm /proc/187432/comm /proc/187433/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/213/comm /proc/215/comm /proc/21639/comm /proc/21708/comm /proc/21709/comm /proc/21722/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24963/comm /proc/25/comm /proc/25224/comm /proc/25242/comm /proc/25267/comm /proc/25279/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/288/comm /proc/29746/comm /proc/3/comm /proc/30/comm /proc/30012/comm /proc/30029/comm /proc/30054/comm /proc/30067/comm /proc/307/comm /proc/308/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/32/comm /proc/33/comm /proc/339/comm /proc/34/comm /proc/34359/comm /proc/34625/comm /proc/34642/comm /proc/34666/comm /proc/34679/comm /proc/347/comm /proc/350/comm /proc/352/comm /proc/356/comm /proc/36/comm /proc/367/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/38138/comm /proc/38140/comm /proc/39/comm /proc/391/comm /proc/395/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40514/comm /proc/40556/comm /proc/40562/comm /proc/40581/comm /proc/40582/comm /proc/40589/comm /proc/40646/comm /proc/40674/comm /proc/40675/comm /proc/40690/comm /proc/40759/comm /proc/40777/comm /proc/40795/comm /proc/40814/comm /proc/40923/comm /proc/40983/comm /proc/41133/comm /proc/41156/comm /proc/41182/comm /proc/41871/comm /proc/41874/comm /proc/41917/comm /proc/41929/comm /proc/42/comm /proc/42178/comm /proc/42377/comm /proc/42390/comm /proc/42770/comm /proc/43/comm /proc/43225/comm /proc/43248/comm /proc/43291/comm /proc/43632/comm /proc/43656/comm /proc/43670/comm /proc/43694/comm /proc/43725/comm /proc/43750/comm /proc/44/comm /proc/44098/comm /proc/44122/comm /proc/44297/comm /proc/44578/comm /proc/44606/comm /proc/44626/comm /proc/44650/comm /proc/44665/comm /proc/44689/comm /proc/44804/comm /proc/44849/comm /proc/44897/comm /proc/45/comm /proc/450/comm /proc/453/comm /proc/46/comm /proc/46931/comm /proc/46964/comm /proc/46996/comm /proc/47056/comm /proc/47080/comm /proc/47240/comm /proc/47295/comm /proc/47308/comm /proc/47379/comm /proc/47454/comm /proc/47776/comm /proc/47800/comm /proc/47880/comm /proc/47901/comm /proc/47949/comm /proc/48/comm /proc/48073/comm /proc/48255/comm /proc/48281/comm /proc/48619/comm /proc/48767/comm /proc/48790/comm /proc/49/comm /proc/49186/comm /proc/49210/comm /proc/49237/comm /proc/49317/comm /proc/49394/comm /proc/49510/comm /proc/49535/comm /proc/49621/comm /proc/5/comm /proc/50/comm /proc/50557/comm /proc/51/comm /proc/51212/comm /proc/51243/comm /proc/51395/comm /proc/51419/comm /proc/51510/comm /proc/51610/comm /proc/518/comm /proc/51804/comm /proc/51908/comm /proc/51950/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55637/comm /proc/55661/comm /proc/56/comm /proc/56345/comm /proc/56370/comm /proc/56383/comm /proc/56407/comm /proc/56431/comm /proc/56454/comm /proc/56572/comm /proc/56595/comm /proc/56640/comm /proc/56684/comm /proc/56726/comm /proc/56829/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60162/comm /proc/60163/comm /proc/60387/comm /proc/60440/comm /proc/60484/comm /proc/60512/comm /proc/60533/comm /proc/60558/comm /proc/60575/comm /proc/60600/comm /proc/60815/comm /proc/60945/comm /proc/61/comm /proc/611/comm /proc/61105/comm /proc/61106/comm /proc/61156/comm /proc/614/comm /proc/61445/comm /proc/61495/comm /proc/617/comm /proc/61760/comm /proc/61804/comm /proc/61805/comm /proc/61817/comm /proc/61818/comm /proc/62/comm /proc/62118/comm /proc/62154/comm /proc/62184/comm /proc/62207/comm /proc/62414/comm /proc/62437/comm /proc/62472/comm /proc/62497/comm /proc/62516/comm /proc/62544/comm /proc/62572/comm /proc/627/comm /proc/628/comm /proc/62976/comm /proc/63/comm /proc/63009/comm /proc/63133/comm /proc/63271/comm /proc/63300/comm /proc/63425/comm /proc/63712/comm /proc/63732/comm /proc/63733/comm /proc/63734/comm /proc/63735/comm /proc/63736/comm /proc/63762/comm /proc/63785/comm /proc/64/comm /proc/64032/comm /proc/64055/comm /proc/64090/comm /proc/64186/comm /proc/643/comm /proc/64631/comm /proc/64672/comm /proc/64731/comm /proc/648/comm /proc/64869/comm /proc/64892/comm /proc/64967/comm /proc/64968/comm /proc/64996/comm /proc/65112/comm /proc/65166/comm /proc/65204/comm /proc/65374/comm /proc/65437/comm /proc/65480/comm /proc/65804/comm /proc/65886/comm /proc/65983/comm /proc/66/comm /proc/66014/comm /proc/66046/comm /proc/66152/comm /proc/66173/comm /proc/66256/comm /proc/66279/comm /proc/66620/comm /proc/66647/comm /proc/66653/comm /proc/66770/comm /proc/66771/comm /proc/66781/comm /proc/66893/comm /proc/67/comm /proc/68/comm /proc/68361/comm /proc/68384/comm /proc/69/comm /proc/70/comm /proc/70252/comm /proc/712/comm /proc/715/comm /proc/716/comm /proc/71754/comm /proc/71769/comm /proc/71770/comm /proc/71771/comm /proc/71772/comm /proc/71775/comm /proc/71777/comm /proc/71778/comm /proc/71779/comm /proc/71780/comm /proc/71781/comm /proc/71782/comm /proc/71783/comm /proc/71786/comm /proc/71787/comm /proc/72/comm /proc/729/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77609/comm /proc/77634/comm /proc/77724/comm /proc/77740/comm /proc/77746/comm /proc/77939/comm /proc/77940/comm /proc/77950/comm /proc/78/comm /proc/78044/comm /proc/79/comm /proc/79124/comm /proc/79147/comm /proc/8/comm /proc/80/comm /proc/80336/comm /proc/80338/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84438/comm /proc/84451/comm /proc/85/comm /proc/85121/comm /proc/85219/comm /proc/85982/comm /proc/86/comm /proc/87/comm /proc/876/comm /proc/88/comm /proc/88616/comm /proc/90/comm /proc/90516/comm /proc/90929/comm /proc/91/comm /proc/91097/comm /proc/91120/comm /proc/91393/comm /proc/91411/comm /proc/91417/comm /proc/91492/comm /proc/91493/comm /proc/91503/comm /proc/91705/comm /proc/92/comm /proc/9221/comm /proc/9238/comm /proc/9254/comm /proc/93/comm /proc/9337/comm /proc/94/comm /proc/95458/comm /proc/95482/comm /proc/95628/comm /proc/95661/comm /proc/95817/comm /proc/95905/comm /proc/96/comm /proc/96638/comm /proc/97/comm /proc/98/comm /proc/98023/comm /proc/99/comm /proc/9962/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.tr2MiNVU3e.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r932c4be1f5d14f05a75bba03e8de1f1c.scope; invocation ID: d70fbc80a3114a78b081b330be72b9eb
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCtVDBqe4RuBhAAQzxLVnF/gw5H8iCNout1GQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCtVDBqe4RuBhAAQzxLVnF/gw5H8iCNout1GQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCtVDBqe4RuBhAAQzxLVnF/gw5H8iCNout1GQ==
+ cat
+ virsh secret-define --file /tmp/tmp.tr2MiNVU3e.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCtVDBqe4RuBhAAQzxLVnF/gw5H8iCNout1GQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.tr2MiNVU3e.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=187453
+ kill 187453
+ tail --pid=187453 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rcb932338732c4bf3b006cb9cad76b56f.scope; invocation ID: dfd901a52b35403bb80e05c621e08d4d