<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Verdana;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
code
        {mso-style-priority:99;
        font-family:"Courier New";}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0in;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:Consolas;}
span.EmailStyle21
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle22
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle23
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Looks like some files exist from (not sure ? ) so I did clean up /etc/Kubernetes and /var/lib ran again and got this error with skuba-update.timer ?
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I0707 15:10:49.618715    5276 states.go:35] === applying state kured.deploy ===<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:49.618820    5276 deployments.go:50] uploading local file "addons/kured/kured.yaml" to remote file "/tmp/kured.d/kured.yaml"<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:49.618911    5276 files.go:29] uploading to remote file "/tmp/kured.d/kured.yaml" with contents<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:49.817280    5276 ssh.go:167] running command: "sudo sh -c 'kubectl --kubeconfig=/etc/kubernetes/admin.conf apply -f /tmp/kured.d'"<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.165124    5276 ssh.go:190] stdout | clusterrole.rbac.authorization.k8s.io/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.185205    5276 ssh.go:190] stdout | clusterrolebinding.rbac.authorization.k8s.io/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.205116    5276 ssh.go:190] stdout | role.rbac.authorization.k8s.io/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.230699    5276 ssh.go:190] stdout | rolebinding.rbac.authorization.k8s.io/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.254912    5276 ssh.go:190] stdout | serviceaccount/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.295535    5276 ssh.go:190] stdout | daemonset.apps/kured created<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.299889    5276 ssh.go:167] running command: "sudo sh -c 'rm -rf /tmp/kured.d'"<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.395094    5276 states.go:40] === state kured.deploy applied successfully ===<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.395120    5276 states.go:35] === applying state skuba-update.start ===<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.396165    5276 ssh.go:167] running command: "sudo sh -c 'systemctl enable --now skuba-update.timer'"<o:p></o:p></p>
<p class="MsoNormal">I0707 15:10:50.519774    5276 ssh.go:190] stderr | <span style="color:red">
Failed to enable unit: Unit file skuba-update.timer does not exist.</span><o:p></o:p></p>
<p class="MsoNormal">F0707 15:10:50.521997    5276 bootstrap.go:48] error bootstraping node: failed to apply state skuba-update.start: Process exited with status 1<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">BR,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">Rushi.</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#FC4F08">I MAY BE ONLY ONE PERSON, BUT I CAN BE ONE PERSON WHO MAKES A DIFFERENCE</span><span style="color:black"><o:p></o:p></span></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:12.0pt;color:black">From: </span></b><span style="font-size:12.0pt;color:black">caasp-beta <caasp-beta-bounces@lists.suse.com> on behalf of Rushi NS <rushi.ns@sap.com><br>
<b>Date: </b>Sunday, July 7, 2019 at 2:58 PM<br>
<b>To: </b>Roger Klorese <roger.klorese@suse.com><br>
<b>Cc: </b>"caasp-beta@lists.suse.com" <caasp-beta@lists.suse.com><br>
<b>Subject: </b>[CAUTION] Re: [caasp-beta] CAASP v4 beta 3<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal">I see this after trying with “v5”<o:p></o:p></p>
<p class="MsoNormal">. I have HA (NGINX as load balancer during the cluster init)
<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:10.527098    5173 deployments.go:50] uploading local file "kubeadm-init.conf" to remote file "/tmp/kubeadm-init.conf"<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:10.527232    5173 files.go:29] uploading to remote file "/tmp/kubeadm-init.conf" with contents<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:10.741276    5173 ssh.go:167] running command: "sudo sh -c 'kubeadm init --config /tmp/kubeadm-init.conf --skip-token-print '"<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:10.866573    5173 ssh.go:190] stdout | [init] Using Kubernetes version: v1.14.1<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:10.866632    5173 ssh.go:190] stdout | [preflight] Running pre-flight checks<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136692    5173 ssh.go:190] stderr | error execution phase preflight: [preflight] Some fatal errors occurred:<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136727    5173 ssh.go:190] stderr |           [ERROR Port-6443]: Port 6443 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136737    5173 ssh.go:190] stderr |           [ERROR Port-10251]: Port 10251 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136795    5173 ssh.go:190] stderr |           [ERROR Port-10252]: Port 10252 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136825    5173 ssh.go:190] stderr |           [ERROR FileAvailable--etc-kubernetes-manifests-kube-apiserver.yaml]: /etc/kubernetes/manifests/kube-apiserver.yaml already exists<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136839    5173 ssh.go:190] stderr |           [ERROR FileAvailable--etc-kubernetes-manifests-kube-controller-manager.yaml]: /etc/kubernetes/manifests/kube-controller-manager.yaml already exists<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136848    5173 ssh.go:190] stderr |           [ERROR FileAvailable--etc-kubernetes-manifests-kube-scheduler.yaml]: /etc/kubernetes/manifests/kube-scheduler.yaml already exists<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136863    5173 ssh.go:190] stderr |           [ERROR FileAvailable--etc-kubernetes-manifests-etcd.yaml]: /etc/kubernetes/manifests/etcd.yaml already exists<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136872    5173 ssh.go:190] stderr |           [ERROR Port-10250]: Port 10250 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136879    5173 ssh.go:190] stderr |           [ERROR Port-2379]: Port 2379 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136886    5173 ssh.go:190] stderr |           [ERROR Port-2380]: Port 2380 is in use<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136894    5173 ssh.go:190] stderr |           [ERROR DirAvailable--var-lib-etcd]: /var/lib/etcd is not empty<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.136910    5173 ssh.go:190] stderr | [preflight] If you know what you are doing, you can make a check non-fatal with `--ignore-preflight-errors=...`<o:p></o:p></p>
<p class="MsoNormal">I0707 14:55:11.138914    5173 ssh.go:167] running command: "sudo sh -c 'rm /tmp/kubeadm-init.conf'"<o:p></o:p></p>
<p class="MsoNormal">F0707 14:55:11.237429    5173 bootstrap.go:48] error bootstraping node: failed to apply state kubeadm.init: Process exited with status 1<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<div>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">BR,</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">Rushi.</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#FC4F08">I MAY BE ONLY ONE PERSON, BUT I CAN BE ONE PERSON WHO MAKES A DIFFERENCE</span><o:p></o:p></p>
</div>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:12.0pt;color:black">From: </span></b><span style="font-size:12.0pt;color:black">Roger Klorese <roger.klorese@suse.com><br>
<b>Date: </b>Sunday, July 7, 2019 at 2:27 PM<br>
<b>To: </b>Rushi NS <rushi.ns@sap.com><br>
<b>Cc: </b>Jeff Price <JPrice@suse.com>, "caasp-beta@lists.suse.com" <caasp-beta@lists.suse.com><br>
<b>Subject: </b>Re: [caasp-beta] CAASP v4 beta 3</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<p class="MsoNormal">Run skuba with “-v5” - you will probably see a clear error message in the verbose messages. 
<o:p></o:p></p>
<div>
<p class="MsoNormal"><br>
<br>
<br>
<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">Roger B.A. Klorese <o:p></o:p></p>
<div>
<p class="MsoNormal">Senior Product Manager<br>
SUSE<br>
<span style="color:black"><a href="x-apple-data-detectors://0/1">705 5th Ave S</a>, <a href="x-apple-data-detectors://0/1">Suite 1000</a><br>
<a href="x-apple-data-detectors://1/0">Seattle WA 98104</a></span><br>
(P)<a href="tel:+1%20206.217.7432">+1 206.217.7432</a><br>
(M)<a href="tel:+1%20425.444.5493">+1 425.444.5493</a><br>
<a href="mailto:roger.klorese@suse.com">roger.klorese@suse.com</a><br>
Schedule a meeting: <a href="https://doodle.com/RogerKlorese">https://doodle.com/RogerKlorese</a><br>
GPG Key: D567 F186 A6AE D244 067E  95E4 E67D 019F 0670 D9CC<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><br>
<br>
<br>
<o:p></o:p></p>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<p class="MsoNormal" style="margin-bottom:12.0pt">On Jul 7, 2019, at 1:55 PM, Ns, Rushi <rushi.ns@sap.com> wrote:<o:p></o:p></p>
</blockquote>
</div>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Hi jeff,<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">Sorry to bother , I see that new CAASP introduced SKUBA (replace of CAASPCTL ) and I started deploying a new cluster with SKUBA and ran into the same issue as before with SSH-agent .<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">I did the ssh-agent and did the copy of ssh-copy-id to all all the nodes and I can ssh without password but after all doing the skube boot strap is failing
<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">Setup ssh-agent</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal" style="background:#F6F8FA"><span style="font-size:10.0pt;font-family:Consolas;color:#24292E;border:none windowtext 1.0pt;padding:0in">eval "$(ssh-agent -s)"</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">add the keys to agent</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">ssh-add</span><o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">skuba node bootstrap --user root --target lv1host lmaster1<o:p></o:p></p>
<p class="MsoNormal">-------<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">** This is a BETA release and NOT intended for production usage. **<o:p></o:p></p>
<p class="MsoNormal">[bootstrap] updating init configuration with target information<o:p></o:p></p>
<p class="MsoNormal">W0707 13:52:59.141264    8016 ssh.go:306]<o:p></o:p></p>
<p class="MsoNormal">The authenticity of host '10.48.164.174:22' can't be established.<o:p></o:p></p>
<p class="MsoNormal">ECDSA key fingerprint is 39:99:33:64:be:7d:a9:db:90:f6:93:67:3b:b9:3e:73.<o:p></o:p></p>
<p class="MsoNormal">I0707 13:52:59.141375    8016 ssh.go:307] accepting SSH key for "lv1host:22"<o:p></o:p></p>
<p class="MsoNormal">I0707 13:52:59.141412    8016 ssh.go:308] adding fingerprint for "lv1host:22" to "known_hosts"<o:p></o:p></p>
<p class="MsoNormal">[bootstrap] writing init configuration for node<o:p></o:p></p>
<p class="MsoNormal">[bootstrap] applying init configuration to node<o:p></o:p></p>
<p class="MsoNormal">F0707 13:53:01.718642    8016 bootstrap.go:48] error bootstraping node: failed to apply state kubeadm.init: Process exited with status 1<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">Do you know what the root cause of the issue now…<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<div>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">BR,</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#00006C">Rushi.</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Verdana",sans-serif;color:#FC4F08">I MAY BE ONLY ONE PERSON, BUT I CAN BE ONE PERSON WHO MAKES A DIFFERENCE</span><o:p></o:p></p>
</div>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:12.0pt;color:black">From: </span></b><span style="font-size:12.0pt;color:black">Jeff Price <JPrice@suse.com><br>
<b>Date: </b>Thursday, May 30, 2019 at 7:05 PM<br>
<b>To: </b>Rushi NS <rushi.ns@sap.com><br>
<b>Cc: </b>"Le Bihan Stéphane (AMUNDI-ITS)" <stephane.lebihan@amundi.com>, Jean Marc Lambert <jean-marc.lambert@suse.com>, "caasp-beta@lists.suse.com" <caasp-beta@lists.suse.com><br>
<b>Subject: </b>Re: [caasp-beta] CAASP v4 beta 3</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt;caret-color: rgb(0, 0, 0);font-variant-caps: normal;orphans: auto;text-align:start;widows: auto;-webkit-text-size-adjust: auto;-webkit-text-stroke-width: 0px;word-spacing:0px">
<div>
<p class="MsoNormal"><span style="color:black">Setup ssh-agent</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<pre style="background:#F6F8FA;background-position:initial initial;background-repeat:initial initial"><code><span style="font-family:Consolas;color:#24292E;border:none windowtext 1.0pt;padding:0in">eval "$(ssh-agent -s)"</span></code><o:p></o:p></pre>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">add the keys to agent</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">ssh-add</span><o:p></o:p></p>
</div>
</blockquote>
<p class="MsoNormal">_______________________________________________<br>
caasp-beta mailing list<br>
caasp-beta@lists.suse.com<br>
http://lists.suse.com/mailman/listinfo/caasp-beta<o:p></o:p></p>
</div>
</blockquote>
</div>
</div>
</body>
</html>