[FTS] Bleve bool query using standard analyzer matches more docs than ES

[2016-04-10 08:38:41,387] - [task:1097] INFO - ------------------------------------------------------------------ Query # 1000 -----------------------------------------------------------------

[2016-04-10 08:38:41,435] - [fts_base:1097] INFO - Running query {"from": 0, "indexName": "default_index", "fields": [], "explain": false, "ctl": {"timeout": 60000, "consistency": {"vectors": {}, "level": ""}}, "query": {"must_not": {"disjuncts": [{"field": "revision.text.#text", "match": "Anton Bruckner"}]}, "should": {"disjuncts": [{"field": "title", "match": "Harmonics (music)"}]}}, "size": 10000000} on node: 172.23.107.125

[2016-04-10 08:38:41,524] - [rest_client:2236] INFO - Status: {u'successful': 32, u'failed': 0, u'total': 32}

[2016-04-10 08:38:41,525] - [task:1106] INFO - FTS hits for query: {"must_not": {"disjuncts": [{"field": "revision.text.#text", "match": "Anton Bruckner"}]}, "should": {"disjuncts": [{"field": "title", "match": "Harmonics (music)"}]}} is 92 (took 24.542483ms)

[2016-04-10 08:38:41,652] - [task:1116] INFO - ES hits for query: {"bool": {"must_not": {"match": {"revision.text.#text": "Anton Bruckner"}}, "should": {"match": {"title": "Harmonics (music)"}}}} on es_index is 87 (took 10ms)

[2016-04-10 08:38:41,653] - [task:1121] ERROR - FAIL: FTS hits: 92, while ES hits: 87

[2016-04-10 08:38:41,654] - [task:1136] ERROR - FAIL: Following 5 doc(s) were not returned by ES,but FTS, printing 50: [u'wiki10011000', u'wiki10002461', u'wiki10016995', u'wiki10022399', u'wiki10023911']

FAIL

{

_index: "es_index",

_type: "wiki",

_id: "wiki10011000",

_version: 1,

found: true,

_source: {

mutated: 0,

title: "Category:Music genres",

type: "wiki",

id: "21133",

revision: {

comment: "robot Modifying: [[ml:വർഗ്ഗം:സംഗീതവിഭാഗങ്ങൾ]]",

timestamp: "2010-04-12T09:12:14Z",

text: {

@xml:space: "preserve",

#text: "{{Commonscat|Musical genres}} [[Category:Music]] [[af:Kategorie:Musiekgenres]] [[ar:تصنيف:أنواع موسيقية]] [[an:Categoría:Cheners mosicals]] [[ast:Categoría:Estilos de música]] [[be:Катэгорыя:Музычныя жанры]] [[be-x-old:Катэгорыя:Музычныя жанры]] [[bar:Kategorie:Musikgenre]] [[bg:Категория:Музикални жанрове]] [[ca:Categoria:Gèneres musicals]] [[cs:Kategorie:Hudební styly]] [[cy:Categori:Mathau o gerddoriaeth]] [[da:Kategori:Musikgenrer]] [[de:Kategorie:Musikgenre]] [[et:Kategooria:Muusikastiilid]] [[el:Κατηγορία:Μουσικά είδη]] [[en:Category:Music genres]] [[es:Categoría:Géneros musicales]] [[eo:Kategorio:Muzikaj ĝenroj]] [[eu:Kategoria:Musika motak]] [[fr:Catégorie:Musique par genre]] [[gl:Categoría:Xéneros musicais]] [[ko:분류:음악 장르]] [[hy:Կատեգորիա:Երաժշտական ոճեր]] [[hr:Kategorija:Glazbeni žanrovi]] [[io:Kategorio:Muzikala jenri]] [[id:Kategori:Genre musik]] [[it:Categoria:Generi musicali]] [[pam:Category:Tigtigan genres]] [[ka:კატეგორია:მუსიკალური ჟანრები]] [[sw:Jamii:Mitindo ya muziki]] [[lv:Kategorija:Mūzikas žanri]] [[lt:Kategorija:Muzikos žanrai]] [[hu:Kategória:Zenei stílusok]] [[mk:Категорија:Музички жанрови]] [[ml:വർഗ്ഗം:സംഗീതവിഭാഗങ്ങൾ]] [[ms:Kategori:Genre muzik]] [[nl:Categorie:Muziekgenre]] [[nds-nl:Kattegerie:Meziekstiel]] [[ja:Category:音楽のジャンル]] [[no:Kategori:Musikksjangre]] [[nn:Kategori:Musikksjangrar]] [[oc:Categoria:Genre musical]] [[nds:Kategorie:Musikstil]] [[pl:Kategoria:Gatunki muzyczne]] [[pt:Categoria:Gêneros musicais]] [[ru:Категория:Музыкальные жанры]] [[sk:Kategória:Hudobné žánre]] [[sl:Kategorija:Glasba po zvrsti]] [[sr:Категорија:Музички жанрови]] [[fi:Luokka:Musiikkityylit]] [[sv:Kategori:Musikgenrer]] [[th:หมวดหมู่:แนวดนตรี]] [[tr:Kategori:Tarzlara göre müzik]] [[uk:Категорія:Музичні напрямки]] [[vec:Categoria:Genari muxicałi]] [[vi:Thể loại:Thể loại nhạc]] [[vls:Categorie:Muziekgenre]] [[yi:קאַטעגאָריע:מוזיק זשאנערס]] [[bat-smg:Kateguorėjė:Mozėkas žonrā]] [[zh:Category:音樂類型]]"

},

contributor: {

username: "ArthurBot",

id: "39678"

},

id: "2126777",

minor: null

}

}

}

{

_index: "es_index",

_type: "wiki",

_id: "wiki10002461",

_version: 3,

found: true,

_source: {

mutated: 0,

title: "Category:Music",

type: "wiki",

id: "5874",

revision: {

comment: "robot Modifying: [[lad:Kateggoría:Musika]]",

timestamp: "2010-05-19T01:15:54Z",

text: {

@xml:space: "preserve",

#text: "{{Commonscat|Music}} [[Category:Everyday life]] [[Category:Entertainment]] [[af:Kategorie:Musiek]] [[als:Kategorie:Musik]] [[am:መደብ:ሙዚቃ]] [[ang:Flocc:Glīƿdrēam]] [[ar:تصنيف:موسيقى]] [[an:Categoría:Mosica]] [[ast:Categoría:Música]] [[gn:Ñemohenda:Mba'epu porã]] [[ay:Categoría:Jaylliphust'a]] [[az:Kateqoriya:Musiqi]] [[bn:বিষয়শ্রেণী:সঙ্গীত]] [[zh-min-nan:Category:Im-ga̍k]] [[map-bms:Kategori:Musik]] [[ba:Категория:Музыка]] [[be:Катэгорыя:Музыка]] [[be-x-old:Катэгорыя:Музыка]] [[bar:Kategorie:Musik]] [[bo:Category:རོལ་དབྱངས།]] [[bs:Kategorija:Muzika]] [[br:Rummad:Sonerezh]] [[bg:Категория:Музика]] [[ca:Categoria:Música]] [[cv:Категори:Кĕвĕ]] [[ceb:Kategoriya:Musika]] [[cs:Kategorie:Hudba]] [[cbk-zam:Categoría:Musica]] [[co:Category:Musica]] [[cy:Categori:Cerddoriaeth]] [[da:Kategori:Musik]] [[pdc:Kategorie:Myuusick]] [[de:Kategorie:Musik]] [[dsb:Kategorija:Muzika]] [[et:Kategooria:Muusika]] [[el:Κατηγορία:Μουσική]] [[en:Category:Music]] [[es:Categoría:Música]] [[eo:Kategorio:Muziko]] [[ext:Category:Música]] [[eu:Kategoria:Musika]] [[fa:رده:موسیقی]] [[fo:Bólkur:Tónleikur]] [[fr:Catégorie:Musique]] [[fy:Kategory:Muzyk]] [[fur:Categorie:Musiche]] [[ga:Catagóir:Ceol]] [[gv:Ronney:Kiaull]] [[gd:Category:Ceòl]] [[gl:Categoría:Música]] [[gan:Category:音樂]] [[hak:Category:Yîm-ngo̍k]] [[ko:분류:음악]] [[hy:Կատեգորիա:Երաժշտություն]] [[hi:श्रेणी:संगीत]] [[hsb:Kategorija:Hudźba]] [[hr:Kategorija:Glazba]] [[io:Kategorio:Muziko]] [[ilo:Category:Musica]] [[id:Kategori:Musik]] [[ia:Categoria:Musica]] [[os:Категори:Музыкæ]] [[is:Flokkur:Tónlist]] [[it:Categoria:Musica]] [[he:קטגוריה:מוזיקה]] [[jv:Kategori:Musik]] [[kl:Sumut atassuseq:Nipilersorneq]] [[kn:ವರ್ಗ:ಸಂಗೀತ]] [[pam:Category:Tigtigan]] [[krc:Категория:Музыка]] [[ka:კატეგორია:მუსიკა]] [[kw:Klass:Ylow]] [[sw:Jamii:Muziki]] [[ht:Kategori:Mizik]] [[ku:Kategorî:Muzîk]] [[lad:Kateggoría:Musika]] [[lo:ໝວດ:ດົນຕີ]] [[la:Categoria:Musica]] [[lv:Kategorija:Mūzika]] [[lb:Kategorie:Musek]] [[lt:Kategorija:Muzika]] [[lij:Categorîa:Muxica]] [[li:Categorie:Meziek]] [[ln:Catégorie:Mizíki]] [[jbo:Category:zgike]] [[lmo:Categuria:Müsica]] [[hu:Kategória:Zene]] [[mk:Категорија:Музика]] [[mg:Sokajy:Mozika]] [[ml:വർഗ്ഗം:സംഗീതം]] [[mt:Kategorija:Mużika]] [[mr:वर्ग:संगीत]] [[arz:تصنيف:مزيكا]] [[ms:Kategori:Muzik]] [[cdo:Category:Ĭng-ngŏk]] [[mwl:Catadorie:Música]] [[mn:Ангилал:Хөгжим]] [[nah:Neneuhcāyōtl:Cuīcayōtl]] [[nl:Categorie:Muziek]] [[nds-nl:Kattegerie:Meziek]] [[ne:Category:संगीत]] [[ja:カテゴリ:音楽]] [[nap:Categurìa:Múseca]] [[no:Kategori:Musikk]] [[nn:Kategori:Musikk]] [[nrm:Category:Mûsique]] [[oc:Categoria:Musica]] [[uz:Turkum:Musiqa]] [[pa:ਸ਼੍ਰੇਣੀ:ਸੰਗੀਤ]] [[pap:Category:Músika]] [[nds:Kategorie:Musik]] [[pl:Kategoria:Muzyka]] [[pnt:Κατηγορίαν:Μουσική]] [[pt:Categoria:Música]] [[kaa:Kategoriya:Muzıka]] [[crh:Kategoriya:Muzıka]] [[ksh:Saachjrupp:Mussikk]] [[ro:Categorie:Muzică]] [[rm:Categoria:Musica]] [[ru:Категория:Музыка]] [[sah:Категория:Музыка]] [[se:Category:Musihkka]] [[sc:Categoria:Mùsica]] [[sco:Category:Muisic]] [[stq:Kategorie:Musik]] [[sq:Kategoria:Muzikë]] [[scn:Catigurìa:Mùsica]] [[sk:Kategória:Hudba]] [[sl:Kategorija:Glasba]] [[szl:Kategoria:Muzyka]] [[so:Category:Muusig]] [[sr:Категорија:Музика]] [[sh:Kategorija:Muzika]] [[su:Kategori:Musik]] [[fi:Luokka:Musiikki]] [[sv:Kategori:Musik]] [[tl:Kaurian:Musika]] [[ta:பகுப்பு:இசை]] [[kab:Taggayt:Aẓawan]] [[tt:Төркем:Muzika]] [[tet:Kategoria:Múzika]] [[th:หมวดหมู่:ดนตรี]] [[tg:Гурӯҳ:Мусиқӣ]] [[tr:Kategori:Müzik]] [[uk:Категорія:Музика]] [[ur:زمرہ:موسیقی]] [[vec:Categoria:Mùxega]] [[vi:Thể loại:Âm nhạc]] [[vo:Klad:Musig]] [[fiu-vro:Katõgooria:Muusiga]] [[wa:Categoreye:Muzike]] [[zh-classical:Category:音樂]] [[vls:Categorie:Muziek]] [[war:Category:Musika]] [[wo:Wàll:Woy]] [[wuu:分类:音乐]] [[yi:קאַטעגאָריע:מוזיק]] [[yo:Ẹ̀ka:Orin]] [[zh-yue:Category:音樂]] [[zea:Categorie:Muziek]] [[bat-smg:Kateguorėjė:Mozėka]] [[zh:Category:音乐]]"

},

contributor: {

username: "ArthurBot",

id: "39678"

},

id: "2205115",

minor: null

}

}

}