+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/102596/comm /proc/103/comm /proc/10315/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10821/comm /proc/10822/comm /proc/1089/comm /proc/109/comm /proc/109296/comm /proc/109319/comm /proc/109376/comm /proc/109601/comm /proc/109602/comm /proc/109696/comm /proc/109711/comm /proc/109712/comm /proc/11/comm /proc/110/comm /proc/110690/comm /proc/110858/comm /proc/110900/comm /proc/110931/comm /proc/110954/comm /proc/111/comm /proc/111240/comm /proc/111241/comm /proc/111331/comm /proc/111533/comm /proc/111535/comm /proc/112/comm /proc/112021/comm /proc/112638/comm /proc/112930/comm /proc/112954/comm /proc/113/comm /proc/113069/comm /proc/113086/comm /proc/113092/comm /proc/113197/comm /proc/113198/comm /proc/113208/comm /proc/113430/comm /proc/114/comm /proc/114796/comm /proc/114822/comm /proc/114835/comm /proc/114862/comm /proc/115/comm /proc/115385/comm /proc/115668/comm /proc/116/comm /proc/116549/comm /proc/116550/comm /proc/117/comm /proc/117375/comm /proc/118656/comm /proc/119702/comm /proc/12/comm /proc/12210/comm /proc/12240/comm /proc/122464/comm /proc/12291/comm /proc/12324/comm /proc/12336/comm /proc/124296/comm /proc/125027/comm /proc/125040/comm /proc/125041/comm /proc/12573/comm /proc/12603/comm /proc/126461/comm /proc/12661/comm /proc/12686/comm /proc/12705/comm /proc/127867/comm /proc/127895/comm /proc/127941/comm /proc/127976/comm /proc/128555/comm /proc/129036/comm /proc/129195/comm /proc/129778/comm /proc/129807/comm /proc/129874/comm /proc/13/comm /proc/130524/comm /proc/130548/comm /proc/131149/comm /proc/131151/comm /proc/131420/comm /proc/131894/comm /proc/133118/comm /proc/135599/comm /proc/135701/comm /proc/136341/comm /proc/136381/comm /proc/136382/comm /proc/137580/comm /proc/137581/comm /proc/14/comm /proc/1420/comm /proc/144870/comm /proc/144871/comm /proc/144873/comm /proc/144874/comm /proc/145043/comm /proc/15/comm /proc/1525/comm /proc/1526/comm /proc/1527/comm /proc/1528/comm /proc/1532/comm /proc/157024/comm /proc/157053/comm /proc/157372/comm /proc/157407/comm /proc/157419/comm /proc/157452/comm /proc/157453/comm /proc/157454/comm /proc/157455/comm /proc/158127/comm /proc/158151/comm /proc/158391/comm /proc/158812/comm /proc/158882/comm /proc/159189/comm /proc/159212/comm /proc/159236/comm /proc/159276/comm /proc/159460/comm /proc/159461/comm /proc/159497/comm /proc/159521/comm /proc/159572/comm /proc/159590/comm /proc/159691/comm /proc/159717/comm /proc/159783/comm /proc/159806/comm /proc/1599/comm /proc/16/comm /proc/160143/comm /proc/1603/comm /proc/160419/comm /proc/160435/comm /proc/160828/comm /proc/160830/comm /proc/160941/comm /proc/160965/comm /proc/1612/comm /proc/161227/comm /proc/161299/comm /proc/161306/comm /proc/161363/comm /proc/161364/comm /proc/161374/comm /proc/161446/comm /proc/163075/comm /proc/163079/comm /proc/163134/comm /proc/163193/comm /proc/163285/comm /proc/163501/comm /proc/163519/comm /proc/163544/comm /proc/163567/comm /proc/163593/comm /proc/163641/comm /proc/163701/comm /proc/163749/comm /proc/163872/comm /proc/163897/comm /proc/163960/comm /proc/163983/comm /proc/164291/comm /proc/164292/comm /proc/164295/comm /proc/164816/comm /proc/164840/comm /proc/164906/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/169/comm /proc/169147/comm /proc/169239/comm /proc/169257/comm /proc/169970/comm /proc/170/comm /proc/170023/comm /proc/171/comm /proc/171300/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/174308/comm /proc/174332/comm /proc/174711/comm /proc/174843/comm /proc/174879/comm /proc/174880/comm /proc/174999/comm /proc/175013/comm /proc/175014/comm /proc/175553/comm /proc/175661/comm /proc/175875/comm /proc/175876/comm /proc/176/comm /proc/176118/comm /proc/176120/comm /proc/176212/comm /proc/176214/comm /proc/176902/comm /proc/176925/comm /proc/177/comm /proc/177093/comm /proc/177110/comm /proc/177116/comm /proc/177174/comm /proc/177175/comm /proc/177185/comm /proc/177318/comm /proc/178752/comm /proc/178803/comm /proc/178837/comm /proc/178880/comm /proc/178882/comm /proc/178886/comm /proc/179/comm /proc/179017/comm /proc/179046/comm /proc/179168/comm /proc/179192/comm /proc/179241/comm /proc/179269/comm /proc/179627/comm /proc/179640/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/182835/comm /proc/182880/comm /proc/182894/comm /proc/183/comm /proc/183557/comm /proc/183601/comm /proc/184/comm /proc/18490/comm /proc/185/comm /proc/18510/comm /proc/18532/comm /proc/185414/comm /proc/185439/comm /proc/18560/comm /proc/18576/comm /proc/185993/comm /proc/186/comm /proc/186039/comm /proc/186121/comm /proc/186146/comm /proc/186218/comm /proc/186229/comm /proc/18645/comm /proc/186587/comm /proc/186766/comm /proc/186776/comm /proc/187/comm /proc/188/comm /proc/188714/comm /proc/188757/comm /proc/189/comm /proc/189021/comm /proc/189023/comm /proc/189024/comm /proc/189154/comm /proc/189396/comm /proc/189433/comm /proc/189434/comm /proc/189448/comm /proc/189461/comm /proc/189462/comm /proc/19/comm /proc/190/comm /proc/190239/comm /proc/190241/comm /proc/190417/comm /proc/190532/comm /proc/190838/comm /proc/190852/comm /proc/190899/comm /proc/190929/comm /proc/190945/comm /proc/190946/comm /proc/190947/comm /proc/190948/comm /proc/191/comm /proc/191119/comm /proc/191120/comm /proc/191121/comm /proc/191122/comm /proc/191123/comm /proc/191124/comm /proc/191125/comm /proc/191137/comm /proc/191163/comm /proc/191164/comm /proc/191165/comm /proc/191166/comm /proc/192/comm /proc/193/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21499/comm /proc/21566/comm /proc/21567/comm /proc/21588/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24836/comm /proc/25/comm /proc/25114/comm /proc/25132/comm /proc/25157/comm /proc/25169/comm /proc/25950/comm /proc/26/comm /proc/261/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/289/comm /proc/290/comm /proc/29456/comm /proc/29738/comm /proc/29755/comm /proc/29779/comm /proc/29791/comm /proc/3/comm /proc/30/comm /proc/30705/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/341/comm /proc/34270/comm /proc/34553/comm /proc/34570/comm /proc/34595/comm /proc/34607/comm /proc/349/comm /proc/352/comm /proc/357/comm /proc/36/comm /proc/37/comm /proc/37950/comm /proc/37952/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/391/comm /proc/394/comm /proc/395/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40324/comm /proc/40339/comm /proc/40384/comm /proc/40394/comm /proc/40396/comm /proc/40411/comm /proc/40452/comm /proc/40484/comm /proc/40493/comm /proc/40495/comm /proc/40570/comm /proc/40604/comm /proc/40612/comm /proc/40619/comm /proc/40730/comm /proc/40792/comm /proc/40955/comm /proc/40979/comm /proc/41005/comm /proc/41674/comm /proc/41683/comm /proc/41725/comm /proc/41736/comm /proc/41999/comm /proc/42/comm /proc/42209/comm /proc/42284/comm /proc/42634/comm /proc/43/comm /proc/43051/comm /proc/43074/comm /proc/43111/comm /proc/43495/comm /proc/43524/comm /proc/43545/comm /proc/43570/comm /proc/43588/comm /proc/43646/comm /proc/43964/comm /proc/43988/comm /proc/44/comm /proc/44213/comm /proc/44529/comm /proc/44556/comm /proc/44582/comm /proc/44611/comm /proc/44626/comm /proc/44649/comm /proc/44721/comm /proc/44765/comm /proc/44810/comm /proc/45/comm /proc/451/comm /proc/455/comm /proc/46/comm /proc/46856/comm /proc/46895/comm /proc/46942/comm /proc/46965/comm /proc/47189/comm /proc/47202/comm /proc/47238/comm /proc/47324/comm /proc/47669/comm /proc/47693/comm /proc/47772/comm /proc/47795/comm /proc/48/comm /proc/48050/comm /proc/48167/comm /proc/48336/comm /proc/48361/comm /proc/48485/comm /proc/48608/comm /proc/48633/comm /proc/49/comm /proc/49030/comm /proc/49052/comm /proc/49159/comm /proc/49236/comm /proc/49333/comm /proc/49361/comm /proc/49428/comm /proc/49475/comm /proc/5/comm /proc/50/comm /proc/50395/comm /proc/51/comm /proc/51159/comm /proc/51183/comm /proc/51369/comm /proc/51393/comm /proc/51434/comm /proc/51533/comm /proc/51765/comm /proc/51833/comm /proc/519/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55594/comm /proc/55618/comm /proc/56/comm /proc/56296/comm /proc/56330/comm /proc/56369/comm /proc/56395/comm /proc/56410/comm /proc/56440/comm /proc/56568/comm /proc/56593/comm /proc/56641/comm /proc/56684/comm /proc/56722/comm /proc/56790/comm /proc/57/comm /proc/58/comm /proc/58138/comm /proc/6/comm /proc/60/comm /proc/60514/comm /proc/60547/comm /proc/60590/comm /proc/60642/comm /proc/60833/comm /proc/60856/comm /proc/60871/comm /proc/60894/comm /proc/60909/comm /proc/60935/comm /proc/61/comm /proc/612/comm /proc/61253/comm /proc/61277/comm /proc/61468/comm /proc/615/comm /proc/61501/comm /proc/61502/comm /proc/61503/comm /proc/61504/comm /proc/61520/comm /proc/61578/comm /proc/618/comm /proc/62/comm /proc/62010/comm /proc/621/comm /proc/62236/comm /proc/62450/comm /proc/62474/comm /proc/62492/comm /proc/625/comm /proc/62520/comm /proc/62535/comm /proc/62559/comm /proc/62815/comm /proc/62839/comm /proc/63/comm /proc/63122/comm /proc/63146/comm /proc/63196/comm /proc/63220/comm /proc/63312/comm /proc/63409/comm /proc/63436/comm /proc/63599/comm /proc/63771/comm /proc/63837/comm /proc/639/comm /proc/63943/comm /proc/63974/comm /proc/64/comm /proc/64169/comm /proc/64194/comm /proc/64258/comm /proc/64287/comm /proc/64288/comm /proc/64290/comm /proc/64291/comm /proc/64292/comm /proc/644/comm /proc/64626/comm /proc/64830/comm /proc/65050/comm /proc/65073/comm /proc/65284/comm /proc/65326/comm /proc/65414/comm /proc/65502/comm /proc/65541/comm /proc/65571/comm /proc/65751/comm /proc/65927/comm /proc/66/comm /proc/66079/comm /proc/66181/comm /proc/66403/comm /proc/66440/comm /proc/66467/comm /proc/66520/comm /proc/66580/comm /proc/66598/comm /proc/66745/comm /proc/66772/comm /proc/67/comm /proc/67360/comm /proc/67378/comm /proc/67384/comm /proc/67455/comm /proc/67456/comm /proc/67466/comm /proc/67565/comm /proc/68/comm /proc/68843/comm /proc/68867/comm /proc/69/comm /proc/698/comm /proc/70/comm /proc/701/comm /proc/702/comm /proc/715/comm /proc/72/comm /proc/72230/comm /proc/72243/comm /proc/72244/comm /proc/72245/comm /proc/72246/comm /proc/72247/comm /proc/72252/comm /proc/72254/comm /proc/72255/comm /proc/72256/comm /proc/72257/comm /proc/72258/comm /proc/72260/comm /proc/72261/comm /proc/72262/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78176/comm /proc/78199/comm /proc/78337/comm /proc/78354/comm /proc/78360/comm /proc/78407/comm /proc/78408/comm /proc/78418/comm /proc/78550/comm /proc/79/comm /proc/79585/comm /proc/79623/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82829/comm /proc/84/comm /proc/85/comm /proc/85054/comm /proc/85072/comm /proc/85785/comm /proc/85808/comm /proc/86/comm /proc/860/comm /proc/86647/comm /proc/87/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/91759/comm /proc/91954/comm /proc/91980/comm /proc/92/comm /proc/9213/comm /proc/92189/comm /proc/92205/comm /proc/92211/comm /proc/92282/comm /proc/92283/comm /proc/92295/comm /proc/9230/comm /proc/9246/comm /proc/92603/comm /proc/93/comm /proc/9328/comm /proc/94/comm /proc/95401/comm /proc/95802/comm /proc/95825/comm /proc/95849/comm /proc/95890/comm /proc/96/comm /proc/96285/comm /proc/96408/comm /proc/97/comm /proc/97233/comm /proc/98/comm /proc/99/comm /proc/99091/comm /proc/9945/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.dh4hldJp9C.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r1bddb6fd30454667be3ba4223eeba132.scope; invocation ID: fe1deee1905247ce9c83a60fef3f128b
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAv2zFqHj4iCRAAcy+yGm8TYnsQmG/nFLAmQA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAv2zFqHj4iCRAAcy+yGm8TYnsQmG/nFLAmQA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAv2zFqHj4iCRAAcy+yGm8TYnsQmG/nFLAmQA==
+ cat
+ virsh secret-define --file /tmp/tmp.dh4hldJp9C.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAv2zFqHj4iCRAAcy+yGm8TYnsQmG/nFLAmQA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.dh4hldJp9C.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191186
+ kill 191186
+ tail --pid=191186 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r1027c24c0fbc4275904e8d18aa8da945.scope; invocation ID: d632e160db0b475e85c2f4cd0842728b