+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10325/comm /proc/104/comm /proc/104531/comm /proc/105/comm /proc/105432/comm /proc/105456/comm /proc/105698/comm /proc/105867/comm /proc/105880/comm /proc/105881/comm /proc/106/comm /proc/106689/comm /proc/106847/comm /proc/106870/comm /proc/106884/comm /proc/106916/comm /proc/107197/comm /proc/107429/comm /proc/107440/comm /proc/107505/comm /proc/108/comm /proc/10833/comm /proc/10834/comm /proc/108589/comm /proc/1087/comm /proc/108844/comm /proc/108905/comm /proc/109/comm /proc/109041/comm /proc/109058/comm /proc/109064/comm /proc/109112/comm /proc/109113/comm /proc/109123/comm /proc/109287/comm /proc/11/comm /proc/110/comm /proc/110795/comm /proc/110819/comm /proc/110841/comm /proc/110867/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113682/comm /proc/114/comm /proc/115/comm /proc/115712/comm /proc/115713/comm /proc/115715/comm /proc/116/comm /proc/117/comm /proc/117238/comm /proc/117317/comm /proc/117321/comm /proc/119208/comm /proc/119634/comm /proc/12/comm /proc/120521/comm /proc/120741/comm /proc/120901/comm /proc/120914/comm /proc/120915/comm /proc/12222/comm /proc/122392/comm /proc/12252/comm /proc/12290/comm /proc/12332/comm /proc/12345/comm /proc/123794/comm /proc/123818/comm /proc/123891/comm /proc/123914/comm /proc/124505/comm /proc/124843/comm /proc/125004/comm /proc/12581/comm /proc/125819/comm /proc/12610/comm /proc/126320/comm /proc/126442/comm /proc/126467/comm /proc/12665/comm /proc/126889/comm /proc/12691/comm /proc/126967/comm /proc/12710/comm /proc/127606/comm /proc/128754/comm /proc/128784/comm /proc/129409/comm /proc/13/comm /proc/131221/comm /proc/131906/comm /proc/131936/comm /proc/131937/comm /proc/133091/comm /proc/133092/comm /proc/14/comm /proc/140177/comm /proc/140178/comm /proc/140180/comm /proc/140181/comm /proc/140329/comm /proc/140872/comm /proc/140898/comm /proc/141252/comm /proc/141253/comm /proc/141350/comm /proc/141384/comm /proc/141397/comm /proc/141429/comm /proc/141430/comm /proc/141431/comm /proc/141432/comm /proc/1418/comm /proc/141840/comm /proc/142091/comm /proc/142116/comm /proc/142850/comm /proc/143149/comm /proc/143175/comm /proc/143195/comm /proc/143220/comm /proc/143344/comm /proc/143362/comm /proc/143415/comm /proc/143438/comm /proc/143500/comm /proc/143534/comm /proc/143667/comm /proc/143690/comm /proc/143744/comm /proc/143767/comm /proc/14386/comm /proc/144057/comm /proc/144245/comm /proc/144251/comm /proc/144954/comm /proc/144978/comm /proc/145099/comm /proc/145134/comm /proc/145140/comm /proc/145203/comm /proc/145204/comm /proc/145216/comm /proc/145484/comm /proc/15/comm /proc/1536/comm /proc/1537/comm /proc/1538/comm /proc/1539/comm /proc/1543/comm /proc/159430/comm /proc/159506/comm /proc/159574/comm /proc/159789/comm /proc/159825/comm /proc/159925/comm /proc/16/comm /proc/160041/comm /proc/160065/comm /proc/160085/comm /proc/160111/comm /proc/160225/comm /proc/160250/comm /proc/160290/comm /proc/160355/comm /proc/160378/comm /proc/160518/comm /proc/160542/comm /proc/160938/comm /proc/1610/comm /proc/1614/comm /proc/1623/comm /proc/165385/comm /proc/165790/comm /proc/166/comm /proc/166076/comm /proc/166243/comm /proc/167/comm /proc/168/comm /proc/168676/comm /proc/168681/comm /proc/168682/comm /proc/169/comm /proc/170/comm /proc/170644/comm /proc/170722/comm /proc/170760/comm /proc/170761/comm /proc/170844/comm /proc/170859/comm /proc/170860/comm /proc/171/comm /proc/171165/comm /proc/171430/comm /proc/171435/comm /proc/171627/comm /proc/171823/comm /proc/171824/comm /proc/171880/comm /proc/171882/comm /proc/172/comm /proc/172351/comm /proc/172469/comm /proc/172477/comm /proc/172503/comm /proc/172549/comm /proc/172654/comm /proc/172694/comm /proc/172884/comm /proc/172901/comm /proc/172907/comm /proc/172996/comm /proc/172997/comm /proc/173/comm /proc/173007/comm /proc/173173/comm /proc/173403/comm /proc/174/comm /proc/174539/comm /proc/174561/comm /proc/174603/comm /proc/174648/comm /proc/174720/comm /proc/174747/comm /proc/174932/comm /proc/174961/comm /proc/174982/comm /proc/175/comm /proc/175012/comm /proc/175526/comm /proc/175593/comm /proc/175716/comm /proc/176/comm /proc/178/comm /proc/178663/comm /proc/178701/comm /proc/179/comm /proc/179695/comm /proc/18/comm /proc/180611/comm /proc/180614/comm /proc/181/comm /proc/181591/comm /proc/181616/comm /proc/181888/comm /proc/182029/comm /proc/182234/comm /proc/182277/comm /proc/182351/comm /proc/182382/comm /proc/182446/comm /proc/182457/comm /proc/183/comm /proc/183906/comm /proc/183948/comm /proc/184241/comm /proc/184242/comm /proc/184243/comm /proc/184546/comm /proc/184556/comm /proc/184588/comm /proc/184589/comm /proc/184602/comm /proc/184615/comm /proc/184616/comm /proc/185/comm /proc/185184/comm /proc/185186/comm /proc/185189/comm /proc/185741/comm /proc/185756/comm /proc/185757/comm /proc/185758/comm /proc/185759/comm /proc/185760/comm /proc/185761/comm /proc/186/comm /proc/186166/comm /proc/186167/comm /proc/186557/comm /proc/186580/comm /proc/186721/comm /proc/186723/comm /proc/186963/comm /proc/186979/comm /proc/186985/comm /proc/187/comm /proc/187044/comm /proc/187045/comm /proc/187074/comm /proc/187190/comm /proc/187200/comm /proc/187328/comm /proc/187379/comm /proc/187450/comm /proc/187486/comm /proc/18759/comm /proc/187671/comm /proc/18780/comm /proc/187950/comm /proc/187995/comm /proc/188/comm /proc/18800/comm /proc/188021/comm /proc/188032/comm /proc/188222/comm /proc/18825/comm /proc/188280/comm /proc/188293/comm /proc/188307/comm /proc/188314/comm /proc/188359/comm /proc/188360/comm /proc/188361/comm /proc/18845/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/203/comm /proc/21/comm /proc/217/comm /proc/21814/comm /proc/21849/comm /proc/21850/comm /proc/21863/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25127/comm /proc/25403/comm /proc/25420/comm /proc/25445/comm /proc/25457/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29919/comm /proc/3/comm /proc/30/comm /proc/30195/comm /proc/30214/comm /proc/30238/comm /proc/30250/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34655/comm /proc/348/comm /proc/34936/comm /proc/34953/comm /proc/34977/comm /proc/34989/comm /proc/355/comm /proc/36/comm /proc/366/comm /proc/368/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/38162/comm /proc/38164/comm /proc/384/comm /proc/385/comm /proc/386/comm /proc/39/comm /proc/392/comm /proc/395/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/40552/comm /proc/40579/comm /proc/40598/comm /proc/40624/comm /proc/40627/comm /proc/40629/comm /proc/40704/comm /proc/40711/comm /proc/40720/comm /proc/40729/comm /proc/40797/comm /proc/40824/comm /proc/40845/comm /proc/40854/comm /proc/40968/comm /proc/41019/comm /proc/41189/comm /proc/41212/comm /proc/41237/comm /proc/41920/comm /proc/41947/comm /proc/41966/comm /proc/41987/comm /proc/42/comm /proc/42220/comm /proc/42379/comm /proc/42433/comm /proc/42847/comm /proc/43/comm /proc/43270/comm /proc/43294/comm /proc/43338/comm /proc/43706/comm /proc/43729/comm /proc/43744/comm /proc/43768/comm /proc/43800/comm /proc/43819/comm /proc/44/comm /proc/44172/comm /proc/44197/comm /proc/44348/comm /proc/44700/comm /proc/44724/comm /proc/44742/comm /proc/44777/comm /proc/44802/comm /proc/44825/comm /proc/44937/comm /proc/44983/comm /proc/45/comm /proc/45031/comm /proc/455/comm /proc/46/comm /proc/46870/comm /proc/46905/comm /proc/46964/comm /proc/46987/comm /proc/47294/comm /proc/47306/comm /proc/47343/comm /proc/47524/comm /proc/47880/comm /proc/47904/comm /proc/47978/comm /proc/48/comm /proc/48002/comm /proc/48076/comm /proc/48175/comm /proc/48325/comm /proc/48349/comm /proc/48468/comm /proc/48638/comm /proc/48662/comm /proc/488/comm /proc/49/comm /proc/49055/comm /proc/49078/comm /proc/49114/comm /proc/49194/comm /proc/49296/comm /proc/49393/comm /proc/49414/comm /proc/49505/comm /proc/5/comm /proc/50/comm /proc/50590/comm /proc/51/comm /proc/51147/comm /proc/51148/comm /proc/51465/comm /proc/51490/comm /proc/51646/comm /proc/51670/comm /proc/51731/comm /proc/518/comm /proc/51835/comm /proc/52/comm /proc/52024/comm /proc/52105/comm /proc/54/comm /proc/55/comm /proc/55992/comm /proc/56/comm /proc/56015/comm /proc/56652/comm /proc/56675/comm /proc/56690/comm /proc/56715/comm /proc/56731/comm /proc/56762/comm /proc/56869/comm /proc/56892/comm /proc/56965/comm /proc/57/comm /proc/57007/comm /proc/57042/comm /proc/57092/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/611/comm /proc/61247/comm /proc/61317/comm /proc/614/comm /proc/61429/comm /proc/61453/comm /proc/61471/comm /proc/61495/comm /proc/61522/comm /proc/61547/comm /proc/617/comm /proc/61905/comm /proc/62/comm /proc/62057/comm /proc/62083/comm /proc/62155/comm /proc/622/comm /proc/62309/comm /proc/62310/comm /proc/62343/comm /proc/624/comm /proc/62456/comm /proc/62457/comm /proc/62666/comm /proc/62934/comm /proc/63/comm /proc/63074/comm /proc/63097/comm /proc/63139/comm /proc/63168/comm /proc/63195/comm /proc/63219/comm /proc/63452/comm /proc/63475/comm /proc/63661/comm /proc/63700/comm /proc/63857/comm /proc/63883/comm /proc/63997/comm /proc/64/comm /proc/64063/comm /proc/64087/comm /proc/641/comm /proc/64242/comm /proc/64268/comm /proc/64338/comm /proc/64352/comm /proc/64353/comm /proc/64354/comm /proc/64355/comm /proc/64356/comm /proc/647/comm /proc/64744/comm /proc/64767/comm /proc/64795/comm /proc/64820/comm /proc/64945/comm /proc/65547/comm /proc/65570/comm /proc/65632/comm /proc/65656/comm /proc/65710/comm /proc/65744/comm /proc/65948/comm /proc/66/comm /proc/66134/comm /proc/66223/comm /proc/66483/comm /proc/66543/comm /proc/66651/comm /proc/66690/comm /proc/66708/comm /proc/66908/comm /proc/66931/comm /proc/66992/comm /proc/67/comm /proc/67046/comm /proc/67097/comm /proc/67132/comm /proc/67337/comm /proc/67571/comm /proc/67588/comm /proc/67594/comm /proc/67644/comm /proc/67645/comm /proc/67655/comm /proc/67810/comm /proc/68/comm /proc/69/comm /proc/69457/comm /proc/69482/comm /proc/70/comm /proc/700/comm /proc/703/comm /proc/704/comm /proc/718/comm /proc/72/comm /proc/72684/comm /proc/72699/comm /proc/72700/comm /proc/72701/comm /proc/72702/comm /proc/72704/comm /proc/72706/comm /proc/72710/comm /proc/72712/comm /proc/72713/comm /proc/72714/comm /proc/72715/comm /proc/72716/comm /proc/72717/comm /proc/72718/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76206/comm /proc/76823/comm /proc/78/comm /proc/78731/comm /proc/78754/comm /proc/78834/comm /proc/78907/comm /proc/78917/comm /proc/79/comm /proc/79011/comm /proc/79012/comm /proc/79022/comm /proc/79087/comm /proc/8/comm /proc/80/comm /proc/80283/comm /proc/80307/comm /proc/81/comm /proc/82/comm /proc/82044/comm /proc/84/comm /proc/85/comm /proc/85343/comm /proc/85344/comm /proc/85405/comm /proc/85419/comm /proc/86/comm /proc/86209/comm /proc/86233/comm /proc/863/comm /proc/86987/comm /proc/87/comm /proc/88/comm /proc/89979/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/91462/comm /proc/92/comm /proc/9223/comm /proc/92237/comm /proc/92379/comm /proc/9240/comm /proc/92403/comm /proc/9256/comm /proc/92650/comm /proc/92690/comm /proc/92696/comm /proc/92777/comm /proc/92778/comm /proc/92789/comm /proc/93/comm /proc/93055/comm /proc/9336/comm /proc/9340/comm /proc/94/comm /proc/96/comm /proc/96287/comm /proc/96312/comm /proc/96339/comm /proc/96363/comm /proc/96657/comm /proc/96774/comm /proc/96938/comm /proc/97/comm /proc/98/comm /proc/98627/comm /proc/99/comm /proc/9957/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.AVAK5u6YxK.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r7d067d855ccd495f8223d79feddbd36f.scope; invocation ID: 76512e67ddc440e4b3c03e709b119193
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQADxkRqHD1ZCBAAhP4/frEHwcMOTxwH9OnUJQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQADxkRqHD1ZCBAAhP4/frEHwcMOTxwH9OnUJQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQADxkRqHD1ZCBAAhP4/frEHwcMOTxwH9OnUJQ==
+ cat
+ virsh secret-define --file /tmp/tmp.AVAK5u6YxK.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQADxkRqHD1ZCBAAhP4/frEHwcMOTxwH9OnUJQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.AVAK5u6YxK.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188383
+ kill 188383
+ tail --pid=188383 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r2c526747ee6e4c22a23c1d39cd25d891.scope; invocation ID: eb99528bc2e64a40a634b1078eaa887c