Elasticsearch のインデックスを全件削除して空にする

Elasticsearch

#!/bin/bash -x SERVER='127.0.0.1' PORT='9200' INDEX='index' TYPE='type' curl -XPOST "http://$SERVER:9200/$INDEX/$TYPE/_delete_by_query?conflicts=proceed&pretty" -d '{ "query": { "match_all": { } } }'

2019-02-18

Elasticsearch 既存のスキーマにフィールドを追加する

Elasticsearch

参考ページ www.elastic.co #!/bin/bash -x SERVER='hoge.hoge.com' PORT='9200' INDEX='index' TYPE='type' curl -X PUT http://$SERVER:$PORT/$INDEX/$TYPE/_mapping?pretty -d ' { "properties" : { "new_field1" : { "type" : "keyword" }, "new_field2"…

2018-11-27

「Python] from size を使って全権取得しようとしたら、1万件までしかムリと言われたので仕方なく scroll を使った時のメモ

Elasticsearch

from + size の合計で 1万が上限らしいパラメータをいじると上限変えられるらしいけど、根本的な解決にならないのでメッセージ通りscrollを使ってみる elasticsearch.exceptions.TransportError: TransportError(500, 'search_phase_execution_exception', …

2016-07-26

を使う

Jython Elasticsearch

Jython の pip を使ってインストール $ sudo /usr/local/jython/bin/pip install elasticsearch $ jython Jython 2.7.0 (default:9987c746f838, Apr 29 2015, 02:25:11) [OpenJDK 64-Bit Server VM (Oracle Corporation)] on java1.7.0_101 Type "help", "co…

2016-07-12

EC2にクラスターを作成するメモ

Elasticsearch

1. n台のEC2を用意し、それぞれに Elasticsearch をインストールする VPC 、セキュリティグループは同じにするアベイラビリティゾーンはコスト優先なら同じにする可用性を優先するならゾーンをまたいだほうがいい 2. セキュリティグループ内で 9300 の相…

2016-07-04

2年半ぶりにインストールしてみたメモ

Elasticsearch Kibana

1. Elasticsearch インストール $ wget https://download.elastic.co/elasticsearch/release/org/elasticsearch/distribution/tar/elasticsearch/2.3.3/elasticsearch-2.3.3.tar.gz $ tar xvfz elasticsearch-2.3.3.tar.gz $ cd elasticsearch-2.3.3/bin $ .…

2014-07-16

オプティマイズ方法

elasticsearch

$ curl -XPOST 'http://localhost:9200/_optimize

2014-07-16

でファイルを開きすぎです ( Too many open files ) になって対応した時のメモ

logstash elasticsearch

logstash を起動するユーザのオープンできるファイル数の上限を変更する $ ulimit -n 1024 <- 現在オープンできるファイル数の上限 # vi /etc/security/limits.conf ユーザ名 soft nofile 32000 <- 追記ユーザ名 hard nofile 32000 <- 追記ログインしなお…