cindex is silently ignoring some text files and there's no way to tell why

I have a couple of text files (UTF-8, with mostly ASCII and Cyrillic characters) which cindex/csearch ignore.

The worst problem is that I cannot tell why cindex ignores them, there is no "verbose" option to cindex. Maybe there is a character somewhere in the file cindex does not like but how do I tell?

`iconv -f utf-8 -t utf-16 < text/book1.txt > /dev/null` never complains so I presume the book1.txt file is valid UTF-8. But cindex excludes it from search.

codesearch version:
codesearch/oldstable,now 0.0~hg20120502-3+b11 amd64 on Debian 10.

The problem may be related to https://github.com/google/codesearch/issues/26

Inizia dal percorso di indicizzazione di cindex e dal comportamento di csearch, riproducendo il problema con text/book1.txt e il controllo UTF-8/iconv dell’issue. Segui il motivo per cui il file viene escluso e stabilisci una spiegazione verificabile dell’omissione; il lavoro è completato quando la causa e un modo per diagnosticarla sono chiari.

Scritto dal modello di indicizzazione a partire dal testo della issue.