<div dir="ltr"><div>Hello,<br><br>The velum dashboard is still unstable. Does it work well for everyone?</div><div>To SUSE team, do you have any kb or tips for troubleshooting velum?</div><div><br></div><div>I see this error in dashboard container:</div><div>Processing by DashboardController#index as HTML</div><div>Completed 500 Internal Server Error in 60111ms (ActiveRecord: 7.1ms)</div><div>Velum::SaltApi::SaltConnectionException (Net::ReadTimeout):</div><div><br></div><div>In the salt minion container, this repeats with no more clue.</div><div>[ERROR   ] Error while bringing up minion for multi-master. Is master at localhost responding?</div><div><br></div><div>However, I don't see any error in salt master or api container.</div><div><br></div><div>That's pretty much I see in syslog as well.</div><div>It worked well in the beginning, but not so well after a while..<br>Where I should check further?<br></div><div><br></div><div>Jerry</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jan 13, 2018 at 8:00 PM, Jerry Hwang <span dir="ltr"><<a href="mailto:special011@gmail.com" target="_blank">special011@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">I confirmed the admin node reboot (even shutdown) doesn't cause to fail kubectl (I even confirmed while the admin node is down, kubectl still works, and I also checked kubectl conf points to k8s master node), so it must be something related to when the admin node is updated (& subsequently rebooted).<br>I will check more detail next time the admin node is updated and confirm the situation. If you can try, you may also try kubectl soon after you initiated the admin node update (& subsequent auto reboot) in the dashboard during the process..<br><div><br></div><div>Regarding the dashboard loading (taking too long), I see something potentially not clean with salt master connection, and I will check further..<br>Velum::SaltApi::<wbr>SaltConnectionException (Net::ReadTimeout):<br><br>Thanks,<br>Jerry</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jan 13, 2018 at 1:30 PM, Jerry Hwang <span dir="ltr"><<a href="mailto:special011@gmail.com" target="_blank">special011@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Okay, what you described is also what I expected.<div>Thanks for the idea.</div><div><br></div><div>Regards,<br>Jerry</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jan 13, 2018 at 1:23 PM, Liam McCafferty <span dir="ltr"><<a href="mailto:Liam.McCafferty@smartodds.co.uk" target="_blank">Liam.McCafferty@smartodds.co.<wbr>uk</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">




<div dir="ltr" style="font-size:12pt;color:#000000;background-color:#ffffff;font-family:Calibri,Arial,Helvetica,sans-serif">
<p>I have never noticed this before so  I just rebooted my admin node and I can confirm I can still communicate via kubectl to the master node.</p>
<p><br>
</p>
<p>I have also checked my kube config in ~/.kube/config and I can see that the cluster server is set to the master server. does your kubeconfig point to your master node?  Upon checking my admin node I see it also that it has the haproxy k8 containers which
 I believe deal with routing to the k8 api. so if your config is pointed to your admin node that would make sense that you cant reach the api server.
</p>
<p><br>
</p>
<p><br>
</p>
<p>Cheers,</p>
<p><br>
</p>
<p>Liam<br>
</p>
<p><br>
</p>
<p> <br>
</p>
<div style="color:rgb(33,33,33)">
<hr style="display:inline-block;width:98%">
<div id="m_5983730828314551566m_7292756048250560643m_-1772123878887699107divRplyFwdMsg" dir="ltr"><font style="font-size:11pt" color="#000000" face="Calibri, sans-serif"><b>From:</b> Jerry Hwang <<a href="mailto:special011@gmail.com" target="_blank">special011@gmail.com</a>><br>
<b>Sent:</b> 13 January 2018 21:11<br>
<b>To:</b> Liam McCafferty<br>
<b>Cc:</b> <a href="mailto:caasp-beta@lists.suse.com" target="_blank">caasp-beta@lists.suse.com</a><br>
<b>Subject:</b> Re: [caasp-beta] velum troubleshoot</font>
<div> </div>
</div>
<div>
<div dir="ltr">Right, that is also a good point. (I too much focused on the general idea  :))
<div><br>
</div>
<div>And it seems I can't get to k8s cluster via kubectl (from my local machine) during admin node upgrade & reboot, is it expected?</div>
<div><br>
</div>
<div>Thanks,<br>
Jerry<br>
<div class="gmail_extra"><br>
<div class="gmail_quote">On Sat, Jan 13, 2018 at 1:07 PM, Liam McCafferty <span dir="ltr">
<<a href="mailto:Liam.McCafferty@smartodds.co.uk" target="_blank">Liam.McCafferty@smartodds.co.<wbr>uk</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr" style="font-size:12pt;color:rgb(0,0,0);background-color:rgb(255,255,255);font-family:Calibri,Arial,Helvetica,sans-serif">
<p>No Velum runs on standard docker on the caas admin node ( along with a salt master and a mariadb and various other containers ) where as kubernetes only runs on the master and worker nodes.</p>
<p><br>
</p>
<p>Hope this helps <br>
</p>
<p><br>
</p>
<p>Regards,</p>
<p><br>
</p>
<p>Liam<br>
</p>
<div style="color:rgb(33,33,33)">
<hr style="display:inline-block;width:98%">
<div id="m_5983730828314551566m_7292756048250560643m_-1772123878887699107gmail-m_-4341562859467582526divRplyFwdMsg" dir="ltr"><font style="font-size:11pt" color="#000000" face="Calibri, sans-serif"><b>From:</b> Jerry Hwang <<a href="mailto:special011@gmail.com" target="_blank">special011@gmail.com</a>><br>
<b>Sent:</b> 13 January 2018 21:02<br>
<b>To:</b> Liam McCafferty<br>
<b>Cc:</b> <a href="mailto:caasp-beta@lists.suse.com" target="_blank">caasp-beta@lists.suse.com</a><br>
<b>Subject:</b> Re: [caasp-beta] velum troubleshoot</font>
<div> </div>
</div>
<div>
<div dir="ltr">Ah right, all run in container on kubernetes.
<div><br>
</div>
<div>Thanks,<br>
Jerry</div>
</div>
<div class="gmail_extra"><br>
<div class="gmail_quote">On Sat, Jan 13, 2018 at 12:50 PM, Liam McCafferty <span dir="ltr">
<<a href="mailto:Liam.McCafferty@smartodds.co.uk" target="_blank">Liam.McCafferty@smartodds.co.<wbr>uk</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr" style="font-size:12pt;color:rgb(0,0,0);background-color:rgb(255,255,255);font-family:Calibri,Arial,Helvetica,sans-serif">
<p>Hi Jerry,</p>
<p><br>
</p>
<p>I always put this down to the fact the node has just rebooted, However if you wish to view the velum logs it runs inside a container on the admin node  you can find this container via using a docker ps command then use a docker logs command to get the log
 output for the container.</p>
<p><br>
</p>
<p><br>
</p>
<p>Regards,</p>
<p><br>
</p>
<p>Liam<br>
</p>
<div style="color:rgb(33,33,33)">
<hr style="display:inline-block;width:98%">
<div id="m_5983730828314551566m_7292756048250560643m_-1772123878887699107gmail-m_-4341562859467582526m_6761357708518643593divRplyFwdMsg" dir="ltr">
<font style="font-size:11pt" color="#000000" face="Calibri, sans-serif"><b>From:</b>
<a href="mailto:caasp-beta-bounces@lists.suse.com" target="_blank">caasp-beta-bounces@lists.suse.<wbr>com</a> <<a href="mailto:caasp-beta-bounces@lists.suse.com" target="_blank">caasp-beta-bounces@lists.suse<wbr>.com</a>> on behalf of Jerry Hwang <<a href="mailto:special011@gmail.com" target="_blank">special011@gmail.com</a>><br>
<b>Sent:</b> 13 January 2018 18:50<br>
<b>To:</b> <a href="mailto:caasp-beta@lists.suse.com" target="_blank">caasp-beta@lists.suse.com</a><br>
<b>Subject:</b> [caasp-beta] velum troubleshoot</font>
<div> </div>
</div>
<div>
<div dir="ltr">
<div>Hello,</div>
<div><br>
</div>
<div>Does anyone have a general guideline where or how to check velum?</div>
<div><br>
</div>
<div>I always observe this message in the browser after admin node update (v2)</div>
<div>> We're sorry, but something went wrong.</div>
<div>> If you are the application owner check the logs for more information.</div>
<div><br>
</div>
<div>Eventually I can get back to the admin node (velum), but sometimes it takes long, and I thought if I have a list to check or monitor, it'd useful.</div>
<div><br>
</div>
<div>And I noticed I can't get to k8s cluster via kubectl (from my local machine) during admin node upgrade & reboot, is it expected?</div>
<div><br>
</div>
<div>Jerry<br>
</div>
<div><br>
</div>
<div>note: this is to look for some general idea or share, not a support request.<br>
</div>
</div>
<br clear="all">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">
http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately
 by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">
+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 540 Highgate
 Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">
53-79 Highgate Road, London NW5 1TL</a><br>
</div>
</div>
<br clear="all">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">
http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately
 by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">
+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 531 Highgate
 Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">
53-79 Highgate Road, London NW5 1TL</a><br>
</div>
</blockquote>
</div>
<br>
</div>
<br clear="all">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">
http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately
 by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">
+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 540 Highgate
 Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">
53-79 Highgate Road, London NW5 1TL</a><br>
</div>
</div>
<br clear="all">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">
http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately
 by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">
+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 531 Highgate
 Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">
53-79 Highgate Road, London NW5 1TL</a><br>
</div>
</blockquote>
</div>
<br>
</div>
</div>
</div>
<br clear="all">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately
 by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 540
 Highgate Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">53-79 Highgate Road, London NW5 1TL</a><br>
</div>
</div>
<br clear="both">
______________________________<wbr>______________________________<wbr>__________<br>
This email has been scanned by the Symantec Email Security.cloud service.<br>
For more information please visit <a href="http://www.symanteccloud.com" target="_blank">http://www.symanteccloud.com</a><br>
______________________________<wbr>______________________________<wbr>__________<br>
<br>
This e-mail and any files transmitted with it are confidential and may be legally privileged. If you receive it in error or are not the intended recipient you must not copy, distribute or take any action in reliance upon it. Instead, please notify us immediately by telephoning <a href="tel:+44%2020%207482%200077" value="+442074820077" target="_blank">+44 (20) 7482 0077</a> and delete the material from your systems. Smartodds is a business carried on by Smartodds Limited, a company registered with the Registrar of Companies for England and Wales with number 05108548. Registered office: Unit 531 Highgate Studios, <a href="https://maps.google.com/?q=53-79+Highgate+Road,+London+NW5+1TL&entry=gmail&source=g" target="_blank">53-79 Highgate Road, London NW5 1TL</a><br>
</div>

</blockquote></div><br></div>
</blockquote></div><br></div>
</blockquote></div><br></div>