+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100074/comm /proc/100139/comm /proc/101322/comm /proc/102/comm /proc/103/comm /proc/10332/comm /proc/104/comm /proc/105/comm /proc/105302/comm /proc/105382/comm /proc/105989/comm /proc/106/comm /proc/107961/comm /proc/107985/comm /proc/108/comm /proc/108377/comm /proc/108390/comm /proc/108391/comm /proc/10842/comm /proc/10843/comm /proc/109/comm /proc/1092/comm /proc/109520/comm /proc/109544/comm /proc/109558/comm /proc/109583/comm /proc/109912/comm /proc/11/comm /proc/110/comm /proc/110041/comm /proc/110178/comm /proc/110180/comm /proc/110860/comm /proc/111/comm /proc/111160/comm /proc/111648/comm /proc/111671/comm /proc/111773/comm /proc/111790/comm /proc/111796/comm /proc/111843/comm /proc/111845/comm /proc/111846/comm /proc/111848/comm /proc/111849/comm /proc/111859/comm /proc/112/comm /proc/112031/comm /proc/113/comm /proc/113305/comm /proc/113331/comm /proc/113359/comm /proc/113382/comm /proc/114/comm /proc/114961/comm /proc/114966/comm /proc/115/comm /proc/115282/comm /proc/116/comm /proc/116923/comm /proc/117/comm /proc/117779/comm /proc/119136/comm /proc/12/comm /proc/120446/comm /proc/121102/comm /proc/121557/comm /proc/12230/comm /proc/122394/comm /proc/122398/comm /proc/122416/comm /proc/12261/comm /proc/122909/comm /proc/122921/comm /proc/122922/comm /proc/12298/comm /proc/12342/comm /proc/123465/comm /proc/12355/comm /proc/12593/comm /proc/12622/comm /proc/126305/comm /proc/126328/comm /proc/126386/comm /proc/126404/comm /proc/126412/comm /proc/12678/comm /proc/126906/comm /proc/126940/comm /proc/12703/comm /proc/12723/comm /proc/127310/comm /proc/127431/comm /proc/128218/comm /proc/128870/comm /proc/128894/comm /proc/129032/comm /proc/129371/comm /proc/129660/comm /proc/13/comm /proc/132774/comm /proc/133372/comm /proc/133377/comm /proc/133891/comm /proc/133921/comm /proc/133922/comm /proc/135498/comm /proc/135499/comm /proc/14/comm /proc/1423/comm /proc/15/comm /proc/151443/comm /proc/151445/comm /proc/151463/comm /proc/151465/comm /proc/1541/comm /proc/1542/comm /proc/1543/comm /proc/154324/comm /proc/1544/comm /proc/154621/comm /proc/154650/comm /proc/154740/comm /proc/1548/comm /proc/155380/comm /proc/155438/comm /proc/155463/comm /proc/155510/comm /proc/155511/comm /proc/155512/comm /proc/155513/comm /proc/156281/comm /proc/156309/comm /proc/156473/comm /proc/156598/comm /proc/156622/comm /proc/156836/comm /proc/157472/comm /proc/157496/comm /proc/157609/comm /proc/157628/comm /proc/157634/comm /proc/157681/comm /proc/157683/comm /proc/157684/comm /proc/157786/comm /proc/157787/comm /proc/157797/comm /proc/157940/comm /proc/159766/comm /proc/159796/comm /proc/159892/comm /proc/159979/comm /proc/16/comm /proc/160008/comm /proc/160038/comm /proc/160048/comm /proc/160176/comm /proc/160226/comm /proc/160259/comm /proc/160266/comm /proc/160310/comm /proc/160337/comm /proc/160420/comm /proc/160468/comm /proc/160787/comm /proc/160813/comm /proc/1615/comm /proc/1619/comm /proc/1628/comm /proc/165295/comm /proc/165343/comm /proc/165349/comm /proc/165350/comm /proc/165909/comm /proc/166/comm /proc/167/comm /proc/167299/comm /proc/167302/comm /proc/168/comm /proc/168204/comm /proc/168258/comm /proc/168305/comm /proc/168312/comm /proc/169/comm /proc/169709/comm /proc/170/comm /proc/170268/comm /proc/170302/comm /proc/170303/comm /proc/170403/comm /proc/170416/comm /proc/170417/comm /proc/171/comm /proc/171014/comm /proc/171206/comm /proc/171321/comm /proc/171322/comm /proc/171335/comm /proc/171336/comm /proc/171519/comm /proc/171520/comm /proc/171896/comm /proc/171967/comm /proc/171970/comm /proc/172/comm /proc/172218/comm /proc/172243/comm /proc/172339/comm /proc/172357/comm /proc/172363/comm /proc/172410/comm /proc/172412/comm /proc/172413/comm /proc/172415/comm /proc/172416/comm /proc/172426/comm /proc/172640/comm /proc/172908/comm /proc/173/comm /proc/174/comm /proc/174077/comm /proc/174122/comm /proc/174135/comm /proc/174143/comm /proc/174178/comm /proc/174214/comm /proc/174242/comm /proc/174292/comm /proc/174305/comm /proc/174333/comm /proc/174605/comm /proc/174628/comm /proc/174651/comm /proc/174687/comm /proc/175/comm /proc/175148/comm /proc/175162/comm /proc/175199/comm /proc/175313/comm /proc/176/comm /proc/177/comm /proc/178079/comm /proc/178080/comm /proc/178447/comm /proc/178458/comm /proc/178459/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/180298/comm /proc/180308/comm /proc/180311/comm /proc/181230/comm /proc/181311/comm /proc/181345/comm /proc/181668/comm /proc/182/comm /proc/183/comm /proc/183095/comm /proc/183096/comm /proc/183097/comm /proc/183227/comm /proc/183313/comm /proc/183314/comm /proc/183347/comm /proc/183348/comm /proc/183361/comm /proc/183375/comm /proc/183376/comm /proc/183654/comm /proc/183655/comm /proc/183656/comm /proc/184268/comm /proc/184482/comm /proc/184704/comm /proc/184843/comm /proc/185/comm /proc/185312/comm /proc/185447/comm /proc/185460/comm /proc/185717/comm /proc/185718/comm /proc/185879/comm /proc/185972/comm /proc/186/comm /proc/186181/comm /proc/186423/comm /proc/186473/comm /proc/186487/comm /proc/186500/comm /proc/186776/comm /proc/186915/comm /proc/186921/comm /proc/186922/comm /proc/186937/comm /proc/186939/comm /proc/186940/comm /proc/186941/comm /proc/186943/comm /proc/186945/comm /proc/186946/comm /proc/186947/comm /proc/186948/comm /proc/187/comm /proc/18759/comm /proc/18778/comm /proc/18799/comm /proc/188/comm /proc/18827/comm /proc/18845/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/206/comm /proc/21/comm /proc/216/comm /proc/21756/comm /proc/21821/comm /proc/21822/comm /proc/21835/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/2238/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25091/comm /proc/25354/comm /proc/25371/comm /proc/25395/comm /proc/25408/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/288/comm /proc/290/comm /proc/29869/comm /proc/3/comm /proc/30/comm /proc/30132/comm /proc/30149/comm /proc/30174/comm /proc/30186/comm /proc/30695/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/33/comm /proc/34/comm /proc/34672/comm /proc/34949/comm /proc/34966/comm /proc/34992/comm /proc/35004/comm /proc/35798/comm /proc/36/comm /proc/361/comm /proc/369/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39395/comm /proc/39397/comm /proc/394/comm /proc/39556/comm /proc/39575/comm /proc/39606/comm /proc/39637/comm /proc/39658/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/42/comm /proc/42142/comm /proc/42179/comm /proc/42185/comm /proc/42200/comm /proc/42219/comm /proc/42221/comm /proc/42293/comm /proc/42302/comm /proc/42304/comm /proc/42320/comm /proc/42385/comm /proc/42416/comm /proc/42422/comm /proc/42443/comm /proc/42558/comm /proc/42615/comm /proc/42706/comm /proc/42758/comm /proc/42782/comm /proc/42806/comm /proc/43/comm /proc/43508/comm /proc/43524/comm /proc/43560/comm /proc/43567/comm /proc/43800/comm /proc/44/comm /proc/44011/comm /proc/44385/comm /proc/44864/comm /proc/44888/comm /proc/44920/comm /proc/45/comm /proc/45224/comm /proc/45250/comm /proc/45282/comm /proc/45284/comm /proc/45314/comm /proc/45357/comm /proc/454/comm /proc/45680/comm /proc/45706/comm /proc/45922/comm /proc/46/comm /proc/46178/comm /proc/46201/comm /proc/46216/comm /proc/46239/comm /proc/46254/comm /proc/46283/comm /proc/46396/comm /proc/46445/comm /proc/46501/comm /proc/48/comm /proc/48466/comm /proc/48498/comm /proc/48528/comm /proc/48552/comm /proc/48771/comm /proc/48783/comm /proc/48831/comm /proc/48904/comm /proc/49/comm /proc/49254/comm /proc/49279/comm /proc/49356/comm /proc/49379/comm /proc/49432/comm /proc/49555/comm /proc/49721/comm /proc/49744/comm /proc/49865/comm /proc/5/comm /proc/50/comm /proc/50059/comm /proc/50085/comm /proc/50414/comm /proc/50439/comm /proc/50574/comm /proc/50632/comm /proc/50729/comm /proc/50758/comm /proc/50824/comm /proc/50872/comm /proc/51/comm /proc/519/comm /proc/52/comm /proc/52664/comm /proc/52688/comm /proc/52893/comm /proc/53008/comm /proc/53033/comm /proc/53072/comm /proc/53192/comm /proc/53370/comm /proc/53425/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58028/comm /proc/58052/comm /proc/58807/comm /proc/58830/comm /proc/58845/comm /proc/58877/comm /proc/58893/comm /proc/58918/comm /proc/59036/comm /proc/59061/comm /proc/59134/comm /proc/59169/comm /proc/59205/comm /proc/59422/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/612/comm /proc/616/comm /proc/618/comm /proc/62/comm /proc/624/comm /proc/625/comm /proc/63/comm /proc/63921/comm /proc/63976/comm /proc/64/comm /proc/64069/comm /proc/64091/comm /proc/64107/comm /proc/64131/comm /proc/64153/comm /proc/64181/comm /proc/643/comm /proc/64334/comm /proc/64490/comm /proc/645/comm /proc/64896/comm /proc/65155/comm /proc/65197/comm /proc/65392/comm /proc/65416/comm /proc/65461/comm /proc/65462/comm /proc/65504/comm /proc/65524/comm /proc/65525/comm /proc/65552/comm /proc/65593/comm /proc/65646/comm /proc/66/comm /proc/66040/comm /proc/66068/comm /proc/66109/comm /proc/66133/comm /proc/66204/comm /proc/66237/comm /proc/66463/comm /proc/66536/comm /proc/66561/comm /proc/66963/comm /proc/66989/comm /proc/67/comm /proc/67085/comm /proc/67110/comm /proc/67139/comm /proc/67154/comm /proc/67155/comm /proc/67156/comm /proc/67157/comm /proc/67158/comm /proc/67390/comm /proc/67547/comm /proc/67777/comm /proc/67802/comm /proc/68/comm /proc/68048/comm /proc/68083/comm /proc/68133/comm /proc/68334/comm /proc/68518/comm /proc/68541/comm /proc/68642/comm /proc/68692/comm /proc/68739/comm /proc/68911/comm /proc/68988/comm /proc/69/comm /proc/69029/comm /proc/69107/comm /proc/69244/comm /proc/69273/comm /proc/69417/comm /proc/69600/comm /proc/69601/comm /proc/69602/comm /proc/69603/comm /proc/69634/comm /proc/69746/comm /proc/69872/comm /proc/70/comm /proc/70231/comm /proc/70254/comm /proc/70485/comm /proc/70502/comm /proc/70508/comm /proc/70556/comm /proc/70558/comm /proc/70559/comm /proc/706/comm /proc/70654/comm /proc/70655/comm /proc/70665/comm /proc/70796/comm /proc/709/comm /proc/710/comm /proc/71931/comm /proc/71956/comm /proc/72/comm /proc/724/comm /proc/73/comm /proc/74/comm /proc/74768/comm /proc/75/comm /proc/75186/comm /proc/75255/comm /proc/75256/comm /proc/75257/comm /proc/75258/comm /proc/75259/comm /proc/75263/comm /proc/75265/comm /proc/75266/comm /proc/75268/comm /proc/75269/comm /proc/75271/comm /proc/75272/comm /proc/75273/comm /proc/75274/comm /proc/75807/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79286/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81214/comm /proc/81238/comm /proc/81343/comm /proc/81360/comm /proc/81367/comm /proc/81414/comm /proc/81416/comm /proc/81417/comm /proc/81494/comm /proc/81495/comm /proc/81505/comm /proc/81601/comm /proc/82/comm /proc/82795/comm /proc/82821/comm /proc/83196/comm /proc/84/comm /proc/84422/comm /proc/85/comm /proc/86/comm /proc/86560/comm /proc/869/comm /proc/87/comm /proc/87798/comm /proc/87816/comm /proc/88/comm /proc/88489/comm /proc/88513/comm /proc/89400/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9227/comm /proc/9244/comm /proc/9260/comm /proc/93/comm /proc/9344/comm /proc/93798/comm /proc/94/comm /proc/95083/comm /proc/95107/comm /proc/95232/comm /proc/95251/comm /proc/95265/comm /proc/95348/comm /proc/95359/comm /proc/95360/comm /proc/95533/comm /proc/95534/comm /proc/95545/comm /proc/95740/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98781/comm /proc/98804/comm /proc/98815/comm /proc/98846/comm /proc/99/comm /proc/99285/comm /proc/99409/comm /proc/9963/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.D6hXVgn6lB.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r35bf5d19d9b1440996e659d9e04d49bf.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD6maxq7+UoNhAALeDIw7o/M8mP0pIEzF7PJg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD6maxq7+UoNhAALeDIw7o/M8mP0pIEzF7PJg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD6maxq7+UoNhAALeDIw7o/M8mP0pIEzF7PJg==
+ cat
+ virsh secret-define --file /tmp/tmp.D6hXVgn6lB.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD6maxq7+UoNhAALeDIw7o/M8mP0pIEzF7PJg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.D6hXVgn6lB.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=186968
+ kill 186968
+ tail --pid=186968 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r62bea52d44a84dba900a9114a21cab3e.scope