<div dir="ltr">That's interesting.<div>No idea what it means, or where to go from here, but it's certainly interesting.</div><div><br></div><div>Does it happen the exact same time every day?</div><div>Have you tried a ping from the Xymon host to the client at or around the time of the issue? See if there's any oddities?</div><div><br></div><div>Is there anything in the logs?</div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On 14 September 2015 at 15:17, Colin Coe <span dir="ltr"><<a href="mailto:colin.coe@gmail.com" target="_blank">colin.coe@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">OK, looking at this again.  The main view looks fine, but the 'conn'<br>
test on every host is a yellow circle with a question mark (unknown)<br>
in the snapshot report view since September 4, 2015 at 13:32:42.<br>
<br>
September 4, 2015 at 13:32:41 and earlier look fine.<br>
<br>
Thanks<br>
<br>
On Sat, Sep 12, 2015 at 5:48 PM, Vernon Everett<br>
<div class="HOEnZb"><div class="h5"><<a href="mailto:everett.vernon@gmail.com">everett.vernon@gmail.com</a>> wrote:<br>
> Good to know it's not just me that fights with SELinux. :-)<br>
><br>
> Now that it works, what does the snapshot report reveal at the time the<br>
> purple alerts go out?<br>
><br>
> Purples require a "no report" for 30 minutes to trigger.<br>
> You might want to check all your logs at around 30-35 minutes before the<br>
> emails.<br>
><br>
><br>
><br>
><br>
> On 11 September 2015 at 18:13, Colin Coe <<a href="mailto:colin.coe@gmail.com">colin.coe@gmail.com</a>> wrote:<br>
>><br>
>> Almost...<br>
>><br>
>> Turned out to be SELinux, my old nemesis.  :)<br>
>><br>
>><br>
>><br>
>> On Tue, Sep 8, 2015 at 5:37 PM, Vernon Everett <<a href="mailto:everett.vernon@gmail.com">everett.vernon@gmail.com</a>><br>
>> wrote:<br>
>> > That might be a permissions thing.<br>
>> ><br>
>> ><br>
>> ><br>
>> > On 8 September 2015 at 19:15, Colin Coe <<a href="mailto:colin.coe@gmail.com">colin.coe@gmail.com</a>> wrote:<br>
>> >><br>
>> >> Hi Vernon<br>
>> >><br>
>> >> Thanks for the really good info.  The message serial numbers are<br>
>> >> different every day but the messages are sent at the same time (13:45)<br>
>> >> daily for all tests on all hosts.<br>
>> >><br>
>> >> The network is not congested nor is the SAN under any kind of pressure.<br>
>> >><br>
>> >> Interestingly, trying to do the snapshot report gave me "Cannot create<br>
>> >> output directory".<br>
>> >><br>
>> >> Thanks again<br>
>> >><br>
>> >> CC<br>
>> >><br>
>> >> On Tue, Sep 8, 2015 at 3:56 PM, Vernon Everett<br>
>> >> <<a href="mailto:everett.vernon@gmail.com">everett.vernon@gmail.com</a>><br>
>> >> wrote:<br>
>> >> > Hi Colin<br>
>> >> ><br>
>> >> > What do the client hosts share in common?<br>
>> >> > I have seen in the past, a client was overloading their storage<br>
>> >> > system,<br>
>> >> > and<br>
>> >> > were overflowing buffers and exceeding the storage array's ability to<br>
>> >> > process IO requests. Of course this caused a general disk latency,<br>
>> >> > which<br>
>> >> > slowed things down to the point of a purple flood.<br>
>> >> > Was no simple solution to that one, except buy more storage, which<br>
>> >> > they<br>
>> >> > did.<br>
>> >> ><br>
>> >> > Also, check the "serial numbers" on the messages. Is this a repeat of<br>
>> >> > an<br>
>> >> > older message - in which case Xymon might have something fishy going<br>
>> >> > on,<br>
>> >> > or<br>
>> >> > are they new messages every day, as in it really thinks there is a<br>
>> >> > problem.<br>
>> >> ><br>
>> >> > Xymon only updates pages every 2 and 5 minutes, depending on the page<br>
>> >> > you<br>
>> >> > are looking at. Meaning you could wait up to 7 minutes for the real<br>
>> >> > status<br>
>> >> > to appear.<br>
>> >> > A purple takes 30 minutes to trigger.<br>
>> >> > With some unfortunate, and highly improbable timing on whatever is<br>
>> >> > triggering these events, it's possible you might not see the purple.<br>
>> >> > Have you pulled up a "snapshot report" for the exact time of the<br>
>> >> > messages?<br>
>> >> ><br>
>> >> > Something else unlikely, but possible, is the network.<br>
>> >> > The conn test used ping, which is UDP<br>
>> >> > The Xymon agent sends using TCP.<br>
>> >> > Is there anything interesting happening on the network at the time?<br>
>> >> ><br>
>> >> > Regards<br>
>> >> > Vernon<br>
>> >> ><br>
>> >> ><br>
>> >> ><br>
>> >> > On 8 September 2015 at 11:39, Colin Coe <<a href="mailto:colin.coe@gmail.com">colin.coe@gmail.com</a>> wrote:<br>
>> >> >><br>
>> >> >> Hi all<br>
>> >> >><br>
>> >> >> Since Friday September 4, I've started receiving "stopped reporting<br>
>> >> >> (PURPLE)" messages for all tests on all hosts from one of our Xymon<br>
>> >> >> servers.<br>
>> >> >><br>
>> >> >> The host status, as shown in the Main View, is green for all hosts<br>
>> >> >> and<br>
>> >> >> tests.  No purple at all.<br>
>> >> >><br>
>> >> >> The "stopped reporting (PURPLE)" messages are being sent at the same<br>
>> >> >> time every day, 1:45PM.<br>
>> >> >><br>
>> >> >> Any advise on how I should track this down?<br>
>> >> >><br>
>> >> >> Thanks<br>
>> >> >> _______________________________________________<br>
>> >> >> Xymon mailing list<br>
>> >> >> <a href="mailto:Xymon@xymon.com">Xymon@xymon.com</a><br>
>> >> >> <a href="http://lists.xymon.com/mailman/listinfo/xymon" rel="noreferrer" target="_blank">http://lists.xymon.com/mailman/listinfo/xymon</a><br>
>> >> ><br>
>> >> ><br>
>> >> ><br>
>> >> ><br>
>> >> > --<br>
>> >> > "Accept the challenges so that you can feel the exhilaration of<br>
>> >> > victory"<br>
>> >> > - General George Patton<br>
>> ><br>
>> ><br>
>> ><br>
>> ><br>
>> > --<br>
>> > "Accept the challenges so that you can feel the exhilaration of victory"<br>
>> > - General George Patton<br>
><br>
><br>
><br>
><br>
> --<br>
> "Accept the challenges so that you can feel the exhilaration of victory"<br>
> - General George Patton<br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><span>"Accept the challenges so that you can feel the exhilaration of victory"</span><div><span>- General George Patton</span></div></div>
</div>