2017年8月6日日曜日

目標インデックスの3分の1に届きそう

おはようございます。
起きてインデックスを確認したら、325万件に増えていました。
今日中に目標である1000万件の3分の1に行けるかな。

インデックスのサイズはレプリカシャードも含めて130GB、
それでもパフォーマンスが落ちないFessやelasticsearchは凄い。

ここまで、チューニングらしいチューニングはしていません。
クローラーの割り当てメモリを1024MBに増やしたぐらいです。
基本の完成度が高いので、下手にパラメーターを変えると、かえって不安定になってしまうことも。

今月末までに1000万件に行けるといいな。

FESSとkuromoji.txt

FESSのtakenizerは、ユーザーが辞書を拡張できるようになっています。 UIの「システム」→「辞書」から「ja/kuromoji.txt」を選ぶと、トークンの登録画面になります。 作業は簡単ですが、同じトークンを多重に登録すると、インデックスが更新できなくなる、けっ...