Elasticsearch安装和使用
<p>Elasticsearch 是开源搜索平台的新成员，实时数据分析的神器，发展迅猛，基于 Lucene、RESTful、分布式、面向云计算设计、实时搜索、全文搜索、稳定、高可靠、可扩展、安装＋使用方便，介绍都说的很好听，好不好用拿出来遛一遛。</p><p>做了个简单测试，在两台完全一样的虚拟机上，2000万条左右数据，Elasticsearch 插入数据速度比 MongoDB 慢很多（可以忍受），但是搜索/查询速度快10倍以上，这只是单机情况，多机集群情况下 Elasticsearch 表现更好一些。以下安装步骤在 Ubuntu Server 14.04 LTS 上完成。</p>
<h3>安装 Elasticsearch</h3>
<p>升级系统后安装 Oracle Java 7，既然 Elasticsearch 官方推荐使用 Oracle JDK 7 就不要尝试 JDK 8 和 OpenJDK 了：</p><pre class="brush:bash;toolbar:false">$ sudo apt-get update
$ sudo apt-get upgrade
$ sudo apt-get install software-properties-common
$ sudo add-apt-repository ppa:webupd8team/java
$ sudo apt-get update
$ sudo apt-get install oracle-java7-installer</pre><p>加入 Elasticsearch 官方源后安装 elasticsearch：</p><pre class="brush:bash;toolbar:false">$ wget -O - http://packages.elasticsearch.org/GPG-KEY-elasticsearch | apt-key add -
$ sudo echo "deb http://packages.elasticsearch.org/elasticsearch/1.1/debian stable main" >> /etc/apt/sources.list
$ sudo apt-get update
$ sudo apt-get install elasticsearch</pre><p>加入到系统启动文件并启动 elasticsearch 服务，用 curl 测试一下安装是否成功：</p><pre class="brush:bash;toolbar:false">$ sudo update-rc.d elasticsearch defaults 95 1
$ sudo /etc/init.d/elasticsearch start
$ curl -X GET 'http://localhost:9200'
{
"status" : 200,
"name" : "Fer-de-Lance",
"version" : {
"number" : "1.1.1",
"build_hash" : "f1585f096d3f3985e73456debdc1a0745f512bbc",
"build_timestamp" : "2014-04-16T14:27:12Z",
"build_snapshot" : false,
"lucene_version" : "4.7"
},
"tagline" : "You Know, for Search"
}</pre><p>Elasticsearch 的集群和数据管理界面 Marvel 非常赞，可惜只对开发环境免费，如果这个工具也免费就无敌了，安装很简单，完成后重启服务访问 http://192.168.2.172:9200/_plugin/marvel/ 就可以看到界面：</p><pre class="brush:bash;toolbar:false">$ sudo /usr/share/elasticsearch/bin/plugin -i elasticsearch/marvel/latest
$ sudo /etc/init.d/elasticsearch restart
* Stopping Elasticsearch Server [ OK ]
* Starting Elasticsearch Server [ OK ]</pre><p></p>
<div id="attachment_8242" class="wp-caption alignnone"><img src="https://zhuji.jb51.net/uploads/img/20230517/243df8230a53b55a6fa99df8fcb378b2.jpg" width="550" height="473"><p class="wp-caption-text">elasticsearch</p>
</div>
<h3>安装 Python 客户端驱动</h3>
<p>和 MongoDB 一样，我们一般用程序和 Elasticsearch 交互，Elasticsearch 也支持多种语言的客户端驱动，这里仅安装 Python 驱动，其他语言可以参考官方文档。</p><pre class="brush:bash;toolbar:false">$ sudo apt-get install python-pip
$ sudo pip install elasticsearch</pre><p>写个简单程序把 gene_info.txt 的数据导入到 Elasticsearch：</p><pre class="brush:bash;toolbar:false">#!/usr/bin/python
# -*- coding: UTF-8 -*-
import os, os.path, sys, re
import csv, time, string
from datetime import datetime
from elasticsearch import Elasticsearch
def import_to_db():
data = csv.reader(open('gene_info.txt', 'rb'), delimiter='\t')
data.next()
es = Elasticsearch()
for row in data:
doc = {
'tax_id': row,
'GeneID': row,
'Symbol': row,
'LocusTag': row,
'Synonyms': row,
'dbXrefs': row,
'chromosome': row,
'map_location': row,
'description': row,
'type_of_gene': row,
'Symbol_from_nomenclature_authority': row,
'Full_name_from_nomenclature_authority': row,
'Nomenclature_status': row,
'Other_designations': row,
'Modification_date': row
}
res = es.index(index="gene", doc_type='gene_info', body=doc)
def main():
import_to_db()
if __name__ == "__main__":
main()</pre><p>Kibana 是一个功能强大的数据显示客户端，通过插件方式和 Elasticsearch 集成在一起，安装很容易，下载解压就可以了，然后重启 Elasticsearch 服务访问 http://192.168.2.172:9200/_plugin/kibana/ 就能看到界面：</p><pre class="brush:bash;toolbar:false">$ wget https://download.elasticsearch.org/kibana/kibana/kibana-3.0.1.tar.gz
$ tar zxvf kibana-3.0.1.tar.gz
$ sudo mv kibana-3.0.1 /usr/share/elasticsearch/plugins/_site
$ sudo /etc/init.d/elasticsearch restart</pre><p></p>
<div id="attachment_8243" class="wp-caption alignnone"><img src="https://zhuji.jb51.net/uploads/img/20230517/eca562254b21bd16befcc55f1ef64bac.jpg" width="550" height="473"><p class="wp-caption-text">elasticsearch</p>
</div>
<p> </p>
<p>转自：http://www.vpsee.com/2014/05/install-and-play-with-elasticsearch/</p>
<p>官网：http://www.elasticsearch.org/overview/elasticsearch/</p>
頁:
[1]