<div dir="ltr"><div class="gmail_extra"><div class="gmail_quote">On 26 February 2016 at 15:51, Oleksiy Krivoshey <span dir="ltr"><<a href="mailto:oleksiyk@gmail.com" target="_blank">oleksiyk@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div dir="ltr">Yes, AAE is enabled:<div><br></div><div><div>anti_entropy = active</div><div><br></div></div></div></blockquote><div>[...] </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div dir="ltr"><div><div></div><div>However the output of "riak-admin search aae-status" looks like this: <a href="http://oleksiy.sirv.com/misc/search-aae.png" target="_blank">http://oleksiy.sirv.com/misc/search-aae.png</a><br></div></div><div><br></div></div></blockquote><div><br></div><div>Hi Oleksiy,</div><div><br></div><div>there are two partitions on the node that haven't seen their AAE tree rebuilt in a long time. The reason for this is not clear at the moment, although we have seen this happening when a partition contains data that for some reason cannot be indexed with the configured Solr schema.</div><div><br></div><div>Please run on the 'riak attach' console:</div><div><pre style="padding:6px 10px;font-family:Consolas,'Bitstream Vera Sans Mono',Courier,monospace;font-size:12.025px;color:rgb(51,51,51);border-radius:3px;margin-top:15px;margin-bottom:15px;line-height:19px;word-wrap:break-word;white-space:pre-line;border:1px solid rgb(204,204,204);outline:0px;vertical-align:baseline;overflow:auto;background:rgb(248,248,248)"><code style="padding:0px;font-family:Consolas,'Bitstream Vera Sans Mono',Courier,monospace;font-size:12px;color:inherit;border-radius:3px;border:0px;margin:0px;outline:0px;vertical-align:baseline;white-space:pre;background:none">riak_core_util:rpc_every_member_ann(yz_entropy_mgr, expire_trees, [], 5000).</code></pre></div><div>Afterwards exit the console with "Ctrl-G q".</div><div><br></div><div>The AAE trees should start to be rebuilt shortly after. With default settings, on a cluster with ring size 64 the whole process should finish in about 1 day and any missing but indexable data should appear in all assigned Solr instances. During this time you may still observe inconsistent search results due to the way the coverage query is performed. Keep an eye open for any errors from one of the yz_ modules in the logs during this time.</div><div><br></div><div>Please let us know if the Search AAE trees can be rebuilt successfully and if this solved your issue.</div><div><br></div><div>Kind Regards,</div><div><br></div><div>Magnus</div><div><br></div><div><br></div><div>PS: Please consider subscribing to this subscribers only mailing list to avoid your messages being held in the moderation queue. Instructions on how to join can be found at <a href="http://lists.basho.com/mailman/listinfo/riak-users_lists.basho.com">http://lists.basho.com/mailman/listinfo/riak-users_lists.basho.com</a>.</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div dir="ltr"><div></div></div><div><div><br><div class="gmail_quote"><div dir="ltr">On Fri, 26 Feb 2016 at 17:13 Fred Dushin <<a href="mailto:fdushin@basho.com" target="_blank">fdushin@basho.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">I would check the coverage plans that are being used for the different queries, which you can usually see in the headers of the resulting document.  When you run a search query though yokozuna, it will use a coverage plan from riak core to find a minimal set of nodes (and partitions) to query to get a set of results, and the coverage plan may change every few seconds.  You might be hitting nodes that have inconsistencies or are in need of repair.  Do you have AAE enabled?<br>
<br>
-Fred<br>
<br>
> On Feb 26, 2016, at 8:36 AM, Oleksiy Krivoshey <<a href="mailto:oleksiyk@gmail.com" target="_blank">oleksiyk@gmail.com</a>> wrote:<br>
><br>
> Hi!<br>
><br>
> Riak 2.1.3<br>
><br>
> Having a stable data set (no documents deleted in months) I'm receiving inconsistent search results with Yokozuna. For example first query can return num_found: 3000 (correct), the same query repeated in next seconds can return 2998, or 2995, then 3000 again. Similar inconsistency happens when trying to receive data in pages (using start/rows options): sometimes I get the same document twice (in different pages), sometimes some documents are missing completely.<br>
><br>
> There are no errors or warning in Yokozuna logs. What should I look for in order to debug the problem?<br>
><br>
> Thanks!</blockquote></div></div></div></blockquote></div><div><br></div>-- <br><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><font color="#000000">Magnus Kessler</font><div><font color="#000000">Client Services Engineer</font></div><div><font color="#000000">Basho Technologies Limited</font></div><div><font color="#000000"><br></font></div><div><span style="font-family:arial,helvetica,sans-serif;font-size:small"><font color="#000000">Registered Office - 8 Lincoln’s Inn Fields London WC2A 3BP Reg 07970431</font></span><br></div></div></div></div></div></div></div>
</div></div>