+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100292/comm /proc/100793/comm /proc/10169/comm /proc/102/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10675/comm /proc/10676/comm /proc/106898/comm /proc/106921/comm /proc/107362/comm /proc/107374/comm /proc/107375/comm /proc/107602/comm /proc/108/comm /proc/108385/comm /proc/108413/comm /proc/108440/comm /proc/108464/comm /proc/108667/comm /proc/108700/comm /proc/108907/comm /proc/109/comm /proc/109003/comm /proc/109005/comm /proc/109011/comm /proc/109666/comm /proc/10995/comm /proc/11/comm /proc/110/comm /proc/110138/comm /proc/110382/comm /proc/110406/comm /proc/110499/comm /proc/110517/comm /proc/110523/comm /proc/110582/comm /proc/110583/comm /proc/110593/comm /proc/110756/comm /proc/111/comm /proc/112/comm /proc/112134/comm /proc/112158/comm /proc/112180/comm /proc/112221/comm /proc/112990/comm /proc/113/comm /proc/114/comm /proc/114007/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/118616/comm /proc/118637/comm /proc/1188/comm /proc/119781/comm /proc/119782/comm /proc/12/comm /proc/12112/comm /proc/12144/comm /proc/121695/comm /proc/12181/comm /proc/122111/comm /proc/122123/comm /proc/122124/comm /proc/12225/comm /proc/12238/comm /proc/123640/comm /proc/12476/comm /proc/12508/comm /proc/125162/comm /proc/125188/comm /proc/125207/comm /proc/125232/comm /proc/12564/comm /proc/125825/comm /proc/12588/comm /proc/12607/comm /proc/126219/comm /proc/126406/comm /proc/127166/comm /proc/127824/comm /proc/127866/comm /proc/128249/comm /proc/129255/comm /proc/1293/comm /proc/1294/comm /proc/1295/comm /proc/1296/comm /proc/13/comm /proc/130285/comm /proc/132769/comm /proc/132781/comm /proc/133485/comm /proc/133498/comm /proc/133499/comm /proc/134468/comm /proc/134605/comm /proc/134606/comm /proc/1389/comm /proc/1393/comm /proc/14/comm /proc/141745/comm /proc/141746/comm /proc/141748/comm /proc/141749/comm /proc/141872/comm /proc/142/comm /proc/142507/comm /proc/142530/comm /proc/143086/comm /proc/143143/comm /proc/143156/comm /proc/143188/comm /proc/143189/comm /proc/143190/comm /proc/143191/comm /proc/143192/comm /proc/143581/comm /proc/143608/comm /proc/144491/comm /proc/144496/comm /proc/144534/comm /proc/144545/comm /proc/144725/comm /proc/144750/comm /proc/144787/comm /proc/144822/comm /proc/144973/comm /proc/144992/comm /proc/145037/comm /proc/145050/comm /proc/145214/comm /proc/145232/comm /proc/145247/comm /proc/145339/comm /proc/145377/comm /proc/145426/comm /proc/145448/comm /proc/145552/comm /proc/145769/comm /proc/145776/comm /proc/1458/comm /proc/146027/comm /proc/1462/comm /proc/146314/comm /proc/146316/comm /proc/146527/comm /proc/146549/comm /proc/146630/comm /proc/146647/comm /proc/146653/comm /proc/146736/comm /proc/146737/comm /proc/146747/comm /proc/147004/comm /proc/1471/comm /proc/148714/comm /proc/148835/comm /proc/148901/comm /proc/149065/comm /proc/149066/comm /proc/149092/comm /proc/149222/comm /proc/149248/comm /proc/149278/comm /proc/149312/comm /proc/149390/comm /proc/149477/comm /proc/15/comm /proc/150401/comm /proc/150482/comm /proc/150866/comm /proc/154109/comm /proc/154174/comm /proc/16/comm /proc/160764/comm /proc/160765/comm /proc/163440/comm /proc/168/comm /proc/168108/comm /proc/168337/comm /proc/168647/comm /proc/169/comm /proc/169032/comm /proc/170/comm /proc/171/comm /proc/171527/comm /proc/171536/comm /proc/171545/comm /proc/172/comm /proc/173/comm /proc/173026/comm /proc/173453/comm /proc/173488/comm /proc/173489/comm /proc/173603/comm /proc/173633/comm /proc/173634/comm /proc/174/comm /proc/174353/comm /proc/174418/comm /proc/174422/comm /proc/174737/comm /proc/174740/comm /proc/174848/comm /proc/174849/comm /proc/175/comm /proc/175134/comm /proc/175137/comm /proc/175208/comm /proc/175382/comm /proc/175415/comm /proc/175636/comm /proc/175652/comm /proc/175658/comm /proc/175735/comm /proc/175736/comm /proc/175746/comm /proc/176/comm /proc/176069/comm /proc/177216/comm /proc/177221/comm /proc/177286/comm /proc/177287/comm /proc/177290/comm /proc/177348/comm /proc/177585/comm /proc/177609/comm /proc/178199/comm /proc/178232/comm /proc/178246/comm /proc/178247/comm /proc/179/comm /proc/18/comm /proc/181306/comm /proc/181898/comm /proc/181910/comm /proc/181911/comm /proc/182/comm /proc/183/comm /proc/183085/comm /proc/183209/comm /proc/183210/comm /proc/184188/comm /proc/184210/comm /proc/184236/comm /proc/184503/comm /proc/184959/comm /proc/185086/comm /proc/185201/comm /proc/185266/comm /proc/185319/comm /proc/185330/comm /proc/186/comm /proc/186916/comm /proc/186917/comm /proc/186918/comm /proc/187141/comm /proc/187163/comm /proc/187164/comm /proc/187177/comm /proc/187190/comm /proc/187191/comm /proc/188/comm /proc/188655/comm /proc/188656/comm /proc/188658/comm /proc/188746/comm /proc/188789/comm /proc/188813/comm /proc/189/comm /proc/189389/comm /proc/189397/comm /proc/189446/comm /proc/189463/comm /proc/189469/comm /proc/189520/comm /proc/189521/comm /proc/189531/comm /proc/189927/comm /proc/189953/comm /proc/19/comm /proc/190075/comm /proc/190198/comm /proc/190437/comm /proc/190508/comm /proc/190556/comm /proc/190581/comm /proc/190901/comm /proc/190903/comm /proc/190929/comm /proc/190930/comm /proc/190931/comm /proc/190932/comm /proc/190933/comm /proc/190934/comm /proc/190977/comm /proc/190994/comm /proc/190995/comm /proc/191/comm /proc/191015/comm /proc/191020/comm /proc/191045/comm /proc/191046/comm /proc/191047/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19466/comm /proc/19485/comm /proc/195/comm /proc/19523/comm /proc/19550/comm /proc/19568/comm /proc/196/comm /proc/197/comm /proc/198/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/214/comm /proc/21604/comm /proc/21611/comm /proc/21612/comm /proc/21631/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24412/comm /proc/24673/comm /proc/24690/comm /proc/247/comm /proc/24715/comm /proc/24727/comm /proc/25/comm /proc/26/comm /proc/265/comm /proc/27/comm /proc/28/comm /proc/28378/comm /proc/284/comm /proc/285/comm /proc/287/comm /proc/28833/comm /proc/289/comm /proc/29103/comm /proc/29121/comm /proc/29143/comm /proc/29157/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/32/comm /proc/321/comm /proc/33/comm /proc/33412/comm /proc/33688/comm /proc/33705/comm /proc/33729/comm /proc/33742/comm /proc/339/comm /proc/34/comm /proc/347/comm /proc/348/comm /proc/35183/comm /proc/35185/comm /proc/355/comm /proc/359/comm /proc/36/comm /proc/37/comm /proc/374/comm /proc/38/comm /proc/384/comm /proc/39/comm /proc/390/comm /proc/39354/comm /proc/39365/comm /proc/39395/comm /proc/39411/comm /proc/39429/comm /proc/39465/comm /proc/39499/comm /proc/395/comm /proc/39503/comm /proc/39511/comm /proc/39529/comm /proc/39601/comm /proc/39615/comm /proc/39646/comm /proc/39648/comm /proc/39752/comm /proc/39816/comm /proc/39960/comm /proc/39983/comm /proc/4/comm /proc/40/comm /proc/40009/comm /proc/40692/comm /proc/40715/comm /proc/40740/comm /proc/40759/comm /proc/41452/comm /proc/41658/comm /proc/42/comm /proc/42044/comm /proc/42344/comm /proc/42369/comm /proc/42382/comm /proc/42406/comm /proc/42420/comm /proc/42451/comm /proc/42515/comm /proc/42553/comm /proc/42590/comm /proc/42657/comm /proc/42661/comm /proc/42695/comm /proc/42772/comm /proc/42794/comm /proc/42847/comm /proc/42892/comm /proc/42987/comm /proc/43/comm /proc/43031/comm /proc/44/comm /proc/45/comm /proc/451/comm /proc/45179/comm /proc/45214/comm /proc/45291/comm /proc/45314/comm /proc/45529/comm /proc/45542/comm /proc/45576/comm /proc/45645/comm /proc/46/comm /proc/46019/comm /proc/46045/comm /proc/46119/comm /proc/46143/comm /proc/46189/comm /proc/46315/comm /proc/46499/comm /proc/46523/comm /proc/46642/comm /proc/46785/comm /proc/46809/comm /proc/47055/comm /proc/47214/comm /proc/47238/comm /proc/47263/comm /proc/47343/comm /proc/47623/comm /proc/47721/comm /proc/47746/comm /proc/47832/comm /proc/48/comm /proc/484/comm /proc/48608/comm /proc/488/comm /proc/49/comm /proc/49361/comm /proc/49386/comm /proc/49546/comm /proc/49569/comm /proc/49660/comm /proc/49753/comm /proc/49946/comm /proc/5/comm /proc/50/comm /proc/50036/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/53590/comm /proc/53614/comm /proc/54/comm /proc/54225/comm /proc/54260/comm /proc/54296/comm /proc/54320/comm /proc/54341/comm /proc/54365/comm /proc/54484/comm /proc/54508/comm /proc/54550/comm /proc/54585/comm /proc/54627/comm /proc/54800/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58124/comm /proc/58158/comm /proc/58227/comm /proc/58251/comm /proc/58265/comm /proc/58290/comm /proc/58312/comm /proc/58336/comm /proc/58709/comm /proc/59157/comm /proc/59181/comm /proc/59319/comm /proc/59485/comm /proc/59486/comm /proc/59487/comm /proc/59488/comm /proc/59710/comm /proc/59736/comm /proc/59766/comm /proc/59799/comm /proc/59824/comm /proc/59975/comm /proc/6/comm /proc/60/comm /proc/60195/comm /proc/60224/comm /proc/60333/comm /proc/60339/comm /proc/60391/comm /proc/60404/comm /proc/60645/comm /proc/60669/comm /proc/60816/comm /proc/60939/comm /proc/61/comm /proc/61062/comm /proc/61088/comm /proc/61149/comm /proc/613/comm /proc/61376/comm /proc/61399/comm /proc/61636/comm /proc/61665/comm /proc/61701/comm /proc/61737/comm /proc/61738/comm /proc/61739/comm /proc/61740/comm /proc/61741/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/62048/comm /proc/62138/comm /proc/62396/comm /proc/62420/comm /proc/62529/comm /proc/62593/comm /proc/62628/comm /proc/62742/comm /proc/628/comm /proc/62865/comm /proc/63/comm /proc/630/comm /proc/63068/comm /proc/63345/comm /proc/63386/comm /proc/63629/comm /proc/63678/comm /proc/63796/comm /proc/63872/comm /proc/63895/comm /proc/64/comm /proc/64005/comm /proc/641/comm /proc/64202/comm /proc/64231/comm /proc/64262/comm /proc/64316/comm /proc/64334/comm /proc/64765/comm /proc/64782/comm /proc/64788/comm /proc/64913/comm /proc/64914/comm /proc/64924/comm /proc/64988/comm /proc/655/comm /proc/66/comm /proc/66365/comm /proc/66388/comm /proc/67/comm /proc/67878/comm /proc/68/comm /proc/69/comm /proc/69775/comm /proc/69789/comm /proc/69790/comm /proc/69791/comm /proc/69792/comm /proc/69796/comm /proc/69799/comm /proc/69800/comm /proc/69801/comm /proc/69802/comm /proc/69803/comm /proc/69805/comm /proc/69806/comm /proc/69807/comm /proc/69810/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75665/comm /proc/75688/comm /proc/75767/comm /proc/75784/comm /proc/75790/comm /proc/75872/comm /proc/75873/comm /proc/75883/comm /proc/76/comm /proc/76003/comm /proc/77202/comm /proc/77225/comm /proc/78/comm /proc/78964/comm /proc/78965/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80895/comm /proc/80925/comm /proc/81/comm /proc/81249/comm /proc/82/comm /proc/82310/comm /proc/82323/comm /proc/82996/comm /proc/83019/comm /proc/84/comm /proc/84058/comm /proc/84973/comm /proc/85/comm /proc/86/comm /proc/864/comm /proc/87/comm /proc/87909/comm /proc/88/comm /proc/89366/comm /proc/89390/comm /proc/89670/comm /proc/89690/comm /proc/89696/comm /proc/89785/comm /proc/89786/comm /proc/89796/comm /proc/9/comm /proc/90/comm /proc/90045/comm /proc/9066/comm /proc/9083/comm /proc/9099/comm /proc/91/comm /proc/9181/comm /proc/92/comm /proc/93/comm /proc/93655/comm /proc/93696/comm /proc/93743/comm /proc/93789/comm /proc/94/comm /proc/94112/comm /proc/94221/comm /proc/94960/comm /proc/96/comm /proc/96391/comm /proc/96392/comm /proc/97/comm /proc/9799/comm /proc/98/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.LjjHo4UY0d.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-re6e8d118625f4989a96f81ad7647d169.scope; invocation ID: 8c64f1a1f64f489eb6e9aa7751b86a39
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQA2z6Zp287GKBAAHx6AM0AaEt04Ri+k5bEZIA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQA2z6Zp287GKBAAHx6AM0AaEt04Ri+k5bEZIA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQA2z6Zp287GKBAAHx6AM0AaEt04Ri+k5bEZIA==
+ cat
+ virsh secret-define --file /tmp/tmp.LjjHo4UY0d.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQA2z6Zp287GKBAAHx6AM0AaEt04Ri+k5bEZIA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.LjjHo4UY0d.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191067
+ kill 191067
+ tail --pid=191067 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rec891bdf803742fd9d80953f2b980574.scope; invocation ID: 466c78b92e0c4ca4998e1cd92387e416