SOLR总结
一、介绍
A.Zookeeper介绍
Zookeeper 分布式服务框架是Apache Hadoop 的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。本文将从使用者角度详细介绍Zookeeper 的安装和配置文件中各个配置项的意义，以及分析Zookeeper 的典型的应用场景（配置文件的管理、集群管理、同步锁、Leader 选举、队列管理等），用Java 实现它们并给出示例代码。
B.SOLR介绍
Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文件，生成索引；也可以通过Http Get操作提出查找请求，并得到XML格式的返回结果。
Solr是一个高性能，采用Java5开发，基于Lucene的全文搜索服务器。同时对其进行了扩展，提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。
文档通过Http利用XML 加到一个搜索集合中。查询该集合也是通过http收到一个XML/JSON响应来实现。它的主要特性包括：高效、灵活的缓存功能，垂直搜索功能，高亮显示搜索结果，通过索引复制来提高可用性，提供一套强大Data Schema来定义字段，类型和设置文本分析，提供基于Web的管理界面等。
SOLR逻辑运行图如下
图一
图二
基本可以用图二这幅图来概述，这是一个拥有4个Solr节点的集群，索引分布在两个Shard 里面，每个Shard包含两个Solr节点，一个是Leader节点，一个是Replica节点，此外集群中有一个负责维护集群状态信息的Overseer节点，它是一个总控制器。集群的所有状态信息都放在Zookeeper集群中统一维护。从图中还可以看到，任何一个节点都可以接收索引更新的请求，然后再将这个请求转发到文档所应该属于的那个Shard的Leader节点，Leader节点更新结束完成，最后将版本号和文档转发给同属于一个Shard的replicas节点。
二、Zookeeper 的安装
A.软件
1. 下载https://www.doczj.com/doc/2518229.html,/zookeeper/
单机安装非常简单，只要获取到Zookeeper 的压缩包并解压到某个目录如：/home/zookeeper-3.2.2 下，Zookeeper 的启动脚本在bin 目录下，Linux 下的启动脚本是zkServer.sh，在 3.2.2 这个版本Zookeeper 没有提供windows 下的启动脚本，所以要想在windows 下启动Zookeeper 要自己手工写一个，如清单 1 所示：
?tickTime：这个时间是作为Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime 时间就会发送一个心跳。
?dataDir：顾名思义就是Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
?clientPort：这个端口就是客户端连接Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
当这些配置项配置好后，你现在就可以启动Zookeeper 了，启动后要检查Zookeeper 是否已经在服务，可以通过netstat – ano 命令查看是否有你配置的clientPort 端口号在监听服务。
?initLimit：这个配置项是用来配置Zookeeper 接受客户端（这里所说的客户端不是用户连接Zookeeper 服务器的客户端，而是Zookeeper 服务器集群中连接到Leader 的Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过10 个心跳的时间（也就是
tickTime）长度后Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是5*2000=10 秒
?syncLimit：这个配置项标识Leader 与Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个tickTime 的时间长度，总的时间长度就是2*2000=4 秒
?server.A=B：C：D：其中A 是一个数字，表示这个是第几号服务器；B 是这个服务器的ip 地址；C 表示的是这个服务器与集群中的Leader 服务器交换信息的端口；D 表示的是万一集群中的Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就
是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于 B 都是一样，所以
不同的Zookeeper 实例通信端口号不能一样，所以要给它们分配不同的端口号。
除了修改zoo.cfg 配置文件，集群模式下还要配置一个文件myid，这个文件在dataDir 目录下，这个文件里面就有一个数据就是 A 的值，Zookeeper 启动时会读取这个文件，拿到里面的数据与zoo.cfg 里面的配置信息比较从而判断到底是那个server。
数据模型
Zookeeper 会维护一个具有层次关系的数据结构，它非常类似于一个标准的文件系统，如图1 所示：
图1 Zookeeper 数据结构
Zookeeper 这种数据结构有如下这些特点：
1. 每个子目录项如NameService 都被称作为znode，这个znode 是被它所在的路径唯一标识，
如Server1 这个znode 的标识为/NameService/Server1
2. znode 可以有子节点目录，并且每个znode 可以存储数据，注意EPHEMERAL 类型的目录节
点不能有子节点目录
3. znode 是有版本的，每个znode 中存储的数据可以有多个版本，也就是一个访问路径中可以存
储多份数据
4. znode 可以是临时节点，一旦创建这个znode 的客户端与服务器失去联系，这个znode 也将
自动删除，Zookeeper 的客户端和服务器通信采用长连接方式，每个客户端和服务器通过心跳来保持连接，这个连接状态称为session，如果znode 是临时节点，这个session 失效，znode 也就删除了
5. znode 的目录名可以自动编号，如App1 已经存在，再创建的话，将会自动命名为App2
6. znode 可以被监控，包括这个目录节点中存储的数据的修改，子节点目录的变化等，一旦变化可
以通知设置监控的客户端，这个是Zookeeper 的核心特性，Zookeeper 的很多功能都是基于这个特性实现的，后面在典型的应用场景中会有实例介绍
如何使用
Zookeeper 作为一个分布式的服务框架，主要用来解决分布式集群中应用系统的一致性问题，它能提供基于类似于文件系统的目录节点树方式的数据存储，但是Zookeeper 并不是用来专门存储数据的，它的作用主要是用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化，从而可以达到基于数
除了以上这些上表中列出的方法之外还有一些重载方法，如都提供了一个回调类的重载方法以及可以设置特定Watcher 的重载方法，具体的方法可以参考org.apache.zookeeper. ZooKeeper 类的API 说明。基本操作
下面给出基本的操作ZooKeeper 的示例代码，这样你就能对ZooKeeper 有直观的认识了。下面的清单包括了创建与ZooKeeper 服务器的连接以及最基本的数据操作：
清单2. ZooKeeper 基本的操作示例
// 创建一个与服务器的连接
ZooKeeper zk = new ZooKeeper("localhost:" + CLIENT_PORT,
ClientBase.CONNECTION_TIMEOUT, new Watcher() {
// 监控所有被触发的事件
public void process(WatchedEvent event) {
System.out.println("已经触发了" + event.getType() + "事件！");
}
});
// 创建一个目录节点
zk.create("/testRootPath", "testRootData".getBytes(), Ids.OPEN_ACL_UNSAFE,
CreateMode.PERSISTENT);
// 创建一个子目录节点
zk.create("/testRootPath/testChildPathOne", "testChildDataOne".getBytes(),
Ids.OPEN_ACL_UNSAFE,CreateMode.PERSISTENT);
System.out.println(new String(zk.getData("/testRootPath",false,null)));
// 取出子目录节点列表
System.out.println(zk.getChildren("/testRootPath",true));
// 修改子目录节点数据
zk.setData("/testRootPath/testChildPathOne","modifyChildDataOne".getBytes(),-1);
当对目录节点监控状态打开时，一旦目录节点的状态发生变化，Watcher 对象的process 方法就会被调用。
ZooKeeper 典型的应用场景
Zookeeper 从设计模式角度来看，是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper 就将负责通知已经在Zookeeper 上注册的那些观察者做出相应的反应，从而实现集群中类似Master/Slave 管理模式，关于Zookeeper 的详细架构等内部细节可以阅读Zookeeper 的源码
下面详细介绍这些典型的应用场景，也就是Zookeeper 到底能帮我们解决那些问题？下面将给出答案。统一命名服务（Name Service）
分布式应用中，通常需要有一套完整的命名规则，既能够产生唯一的名称又便于人识别和记住，通常情况下用树形的名称结构是一个理想的选择，树形的名称结构是一个有层次的目录结构，既对人友好又不会重复。说到这里你可能想到了JNDI，没错Zookeeper 的Name Service 与JNDI 能够完成的功能是差不多的，它们都是将有层次的目录结构关联到一定资源上，但是Zookeeper 的Name Service 更加是广泛意义上的关联，也许你并不需要将名称关联到特定资源上，你可能只需要一个不会重复名称，就像数据库中产生一个唯一的数字主键一样。
Name Service 已经是Zookeeper 内置的功能，你只要调用Zookeeper 的API 就能实现。如调用create 接口就可以很容易创建一个目录节点。
配置管理（Configuration Management）
配置的管理在分布式应用环境中很常见，例如同一个应用系统需要多台PC Server 运行，但是它们运行的应用系统的某些配置项是相同的，如果要修改这些相同的配置项，那么就必须同时修改每台运行这个应用系统的PC Server，这样非常麻烦而且容易出错。
像这样的配置信息完全可以交给Zookeeper 来管理，将配置信息保存在Zookeeper 的某个目录节点中，然后将所有需要修改的应用机器监控配置信息的状态，一旦配置信息发生变化，每台应用机器就会收到Zookeeper 的通知，然后从Zookeeper 获取新的配置信息应用到系统中。
图2. 配置管理结构图
集群管理（Group Membership）
Zookeeper 能够很容易的实现集群管理的功能，如有多台Server 组成一个服务集群，那么必须要一个“总管”知道当前集群中每台机器的服务状态，一旦有机器不能提供服务，集群中其它集群必须知道，从而做出调整重新分配服务策略。同样当增加集群的服务能力时，就会增加一台或多台Server，同样也必须让“总管”知道。
Zookeeper 不仅能够帮你维护当前的集群中机器的服务状态，而且能够帮你选出一个“总管”，让这个总管来管理集群，这就是Zookeeper 的另一个功能Leader Election。
它们的实现方式都是在Zookeeper 上创建一个EPHEMERAL 类型的目录节点，然后每个Server 在它们创建目录节点的父目录节点上调用getChildren(String path, boolean watch) 方法并设置watch 为true，由于是EPHEMERAL 目录节点，当创建它的Server 死去，这个目录节点也随之被删除，所以Children 将会变化，这时getChildren上的Watch 将会被调用，所以其它Server 就知道已经有某台Server 死去了。新增Server 也是同样的原理。
Zookeeper 如何实现Leader Election，也就是选出一个Master Server。和前面的一样每台Server 创建一个EPHEMERAL 目录节点，不同的是它还是一个SEQUENTIAL 目录节点，所以它是个EPHEMERAL_SEQUENTIAL 目录节点。之所以它是EPHEMERAL_SEQUENTIAL 目录节点，是因为我们可以给每台Server 编号，我们可以选择当前是最小编号的Server 为Master，假如这个最小编号的Server 死去，由于是EPHEMERAL 节点，死去的Server 对应的节点也被删除，所以当前的节点列表中
又出现一个最小编号的节点，我们就选择这个节点为当前Master。这样就实现了动态选择Master，避免了传统意义上单Master 容易出现单点故障的问题。
图3. 集群管理结构图
共享锁（Locks）
共享锁在同一个进程中很容易实现，但是在跨进程或者在不同Server 之间就不好实现了。Zookeeper 却很容易实现这个功能，实现方式也是需要获得锁的Server 创建一个EPHEMERAL_SEQUENTIAL 目录节点，然后调用getChildren方法获取当前的目录节点列表中最小的目录节点是不是就是自己创建的目录节点，如果正是自己创建的，那么它就获得了这个锁，如果不是那么它就调用exists(String path,
boolean watch) 方法并监控Zookeeper 上目录节点列表的变化，一直到自己创建的节点是列表中最小编号的目录节点，从而获得锁，释放锁很简单，只要删除前面它自己所创建的目录节点就行了。
图4. Zookeeper 实现Locks 的流程图
同步锁的实现代码如下，完整的代码请看附件：
队列管理
Zookeeper 可以处理两种类型的队列：
1. 当一个队列的成员都聚齐时，这个队列才可用，否则一直等待所有成员到达，这种是同步队列。
2. 队列按照FIFO 方式进行入队和出队操作，例如实现生产者和消费者模型。
同步队列用Zookeeper 实现的实现思路如下：
创建一个父目录/synchronizing，每个成员都监控标志（Set Watch）位目录/synchronizing/start 是否存在，然后每个成员都加入这个队列，加入队列的方式就是创建/synchronizing/member_i 的临时目录节点，然后每个成员获取/ synchronizing 目录的所有目录节点，也就是member_i。判断i 的值是否已经是成
员的个数，如果小于成员个数等待/synchronizing/start 的出现，如果已经相等就创建/synchronizing/start。用下面的流程图更容易理解：
图5. 同步队列流程图
当队列没满是进入wait()，然后会一直等待Watch 的通知，Watch 的代码如下：
Zookeeper 作为Hadoop 项目中的一个子项目，是Hadoop 集群管理的一个必不可少的模块，它主要用来控制集群中的数据，如它管理Hadoop 集群中的NameNode，还有Hbase 中Master Election、Server 之间状态同步等。
本文介绍的Zookeeper 的基本知识，以及介绍了几个典型的应用场景。这些都是Zookeeper 的基本功能，最重要的是Zoopkeeper 提供了一套很好的分布式集群管理的机制，就是它这种基于层次型的目录树的数据结构，并对树中的节点进行有效管理，从而可以设计出多种多样的分布式的数据管理模型，而不仅仅局限于上面提到的几个常用应用场景。
三、SOLR安装配置
A.软件
1.下载Solr-4.x https://www.doczj.com/doc/2518229.html,/solr/downloads.html
2. 下载T omcat https://www.doczj.com/doc/2518229.html,/download-70.cgi
B.单机安装
1. 安装好tomcat，确保可以正确运行。具体操作略。我这里的路径是：
F:\dev\apache-tomcat-7.0.11
2. 解压下载下来的apache-solr-4.0.0.tgz 到apache-solr-4.0.0。
3. 将apache-solr-
4.0.0\example\webapps\solr.war 复制到
F:\dev\apache-tomcat-7.0.1\webapps 下。
4. 启动tomcat，这里会有报错：
5.这个错误的意思是说没有找到solr home，所以这一步需要做的就是配置一个solr
home。操作如下：关闭tomcat。进入F:\dev\apache-tomcat-7.0.1\webapps\solr
\WEB-INF 下，打开web.xml。增加如下配置
F:/dev/apache-tomcat-7.0.11/webapps/solr/solr_home
6. 在F:\dev\apache-tomcat-
7.0.1\webapps\solr 下新建文件夹solr_home，并把
apache-solr-4.0.0\example\solr 文件夹下所有东西都复制到solr_home文件夹下。
7. 到这一步，单一solr服务的tomcat已经可以正常启动啦。你可以通过这个链接访
问下solr服务器。http://localhost:8080/solr
C.集群安装
配置基于zookeeper 的分布式的solr服务。分三种情况
1)一台zookeeper服务器，一台solr服务器。
2)一台zookeeper服务器，多台solr服务器。
3)多台zookeeper服务器，多台solr服务器。
1)一台zookeeper服务器，一台solr服务器
由于是只有一台solr服务器，也就是说只有一个leader节点，不存在follower节点。
这种模式比较简单。操作步骤如下：
1、到F:\dev\apache-tomcat-7.0.11\webapps\solr\solr_home目录下，修改solr.xml文件。
将cores节点中的hostPort修改为tomcat的对外服务端口：8080
2、到F:\dev\apache-tomcat-7.0.11\bin目录下。编辑catalina.bat文件。在文件最开始增
加：
set JAVA_OPTS=-Dbootstrap_confdir=../webapps/solr/solr_home/collection1/conf -Dcollection.configName=clusterconf -DzkRun -DzkHost=localhost:9080 -DnumShards=1 如图：
这里zkHost的端口是9080是因为solrCloud中内嵌的zookeeper对外服务端口是tomcat端口+1000。而tomcat端口是在第三步中的配置的。
3、到此为止，相关配置全部完成，此时启动tomcat，访问
http://localhost:8080/solr/#/~cloud即可得到如下图：
2)一台zookeeper服务器，多台solr服务器
因没有那么多的服务器，用一台机器跑多个tomcat服务器的方式模拟集群时的配置。我先复制了两个，于是现在有三个服务器，路径为：
F:\dev\apache-tomcat-7.0.11-solr_1
F:\dev\apache-tomcat-7.0.11-solr_2
F:\dev\apache-tomcat-7.0.11-solr_3
我这里的tomcat是绿色版的，需要为每个tomcat指定CATALINA_HOME，于是进入F:\dev\apache-tomcat-7.0.11-solr_1\bin目录下，在最开头增加下列一句：
set CATALINA_HOME=F:\dev\apache-tomcat-7.0.11-solr_1
同理为apache-tomcat-7.0.11-solr_2, apache-tomcat-7.0.11-solr_3增加CATALINA_HOME的设置。按下来是具体的操作步骤：
1、更改tomcat 的对外服务端口：
apache-tomcat-7.0.11-solr_1 : 8001
apache-tomcat-7.0.11-solr_2 : 8002
apache-tomcat-7.0.11-solr_3 : 8003
tomcat的其他服务端口也需要更改，因为对我们来讲没有用，所以就不细说。只
要保证端口不会重复占用即可。
2、更改F:\dev\apache-tomcat-7.0.11-solr_1\webapps\solr\solr_home目录下的solr.xml
文件，将hostPort端口更新为8001；
3、F:\dev\apache-tomcat-7.0.11-solr_2\webapps\solr\solr_home目录下的solr.xml文件，
将hostPort端口更新为8002；
4、F:\dev\apache-tomcat-7.0.11-solr_3\webapps\solr\solr_home目录下的solr.xml文件，
将hostPort端口更新为8003；
5、到F:\dev\apache-tomcat-7.0.11-solr_1\bin目录下，编辑catalina.bat文件，修改最开
头的set JAVA_OPTS内容为：
set JAVA_OPTS=-Dbootstrap_confdir=../webapps/solr/solr_home/collection1/conf -Dcollection.configName=clusterconf -DzkRun -DzkHost=localhost:9001 -DnumShards=1 如图：
6、到F:\dev\apache-tomcat-7.0.11-solr_2\bin目录下，编辑catalina.bat文件，修改最开
头的set JAVA_OPTS内容为：
set JAVA_OPTS= -DzkHost=localhost:9001
如图：
7、到F:\dev\apache-tomcat-7.0.11-solr_3\bin目录下，编辑catalina.bat文件，修改最开
头的set JAVA_OPTS内容为：
set JAVA_OPTS= -DzkHost=localhost:9001
如图：
8、删除F:\dev\apache-tomcat-7.0.11-solr_1\webapps\solr\solr_home\zoo_data下的所有
文件。结果如图：
9、到此全部配置完成，访问http://localhost:8001/solr/#/~cloud可以看到如下结果：
Apache Solr 初级教程 （介绍、安装部署、Java接口、中文分词）Apache Solr 介绍 Solr 是什么？ Solr 是一个开源的企业级搜索服务器，底层使用易于扩展和修改的Java 来实现。服务器通信使用标准的HTTP 和XML，所以如果使用Solr 了解Java 技术会有用却不是必须的要求。 Solr 主要特性有：强大的全文检索功能，高亮显示检索结果，动态集群，数据库接口和电子文档（Word ，PDF 等）的处理。而且Solr 具有高度的可扩展，支持分布搜索和索引的复制。 Lucene 是什么？ Lucene 是一个基于 Java 的全文信息检索工具包，它不是一个完整的搜索应用程序，而是为你的应用程序提供索引和搜索功能。Lucene 目前是 Apache Jakarta 家族中的一个开源项目。也是目前最为流行的基于 Java 开源全文检索工具包。 目前已经有很多应用程序的搜索功能是基于 Lucene ，比如 Eclipse 帮助系统的搜索功能。Lucene 能够为文本类型的数据建立索引，所以你只要把你要索引的数据格式转化的文本格式，Lucene 就能对你的文档进行索引和搜索。 Solr VS Lucene Solr 与Lucene 并不是竞争对立关系，恰恰相反Solr 依存于Lucene ，因为Solr 底层的核心技术是使用Apache Lucene 来实现的，简单的说Solr 是Lucene 的服务器化。需要注意的是Solr 并不是简单的对Lucene 进行封装，它所提供的大部分功能都区别于Lucene 。 安装搭建Solr
安装Java 虚拟机 Solr 必须运行在Java1.5 或更高版本的Java 虚拟机中，运行标准Solr 服务只需要安装JRE 即可，但如果需要扩展功能或编译源码则需要下载JDK 来完成。可以通过下面的地址下载所需JDK 或JRE ： ?OpenJDK （https://www.doczj.com/doc/2518229.html,/j2se/downloads.html） ?Sun （https://www.doczj.com/doc/2518229.html,/j2se/downloads.html） ?IBM （https://www.doczj.com/doc/2518229.html,/developerworks/java/jdk/） ?Oracle （https://www.doczj.com/doc/2518229.html,/technology/products/jrockit/index.html）安装步骤请参考相应的帮助文档。 安装中间件 Solr 可以运行在任何Java 中间件中，下面将以开源Apache Tomcat 为例讲解Solr 的安装、配置与基本使用。本文使用Tomcat5.5 解压版进行演示，可在下面地址下载最新版本https://www.doczj.com/doc/2518229.html,/download-55.cgi 安装Apache Solr 下载最新的Solr 本文发布时Solr1.4 为最新的版本，下文介绍内容均针对该版本，如与Solr 最新版本有出入请以官方网站内容为准。Solr官方网站下载地址： https://www.doczj.com/doc/2518229.html,/dyn/closer.cgi/lucene/solr/ Solr 程序包的目录结构 ?build ：在solr 构建过程中放置已编译文件的目录。 ?client ：包含了一些特定语言调用Solr 的API 客户端程序，目前只有Ruby 可供选择，Java 客户端叫SolrJ 在src/solrj 中可以找到。 ?dist ：存放Solr 构建完成的JAR 文件、WAR 文件和Solr 依赖的JAR 文件。 ?example ：是一个安装好的Jetty 中间件，其中包括一些样本数据和Solr 的配置信息。 o example/etc ：Jetty 的配置文件。 o example/multicore ：当安装Slor multicore 时，用来放置多个Solr 主目录。 o example/solr ：默认安装时一个Solr 的主目录。 o example/webapps ：Solr 的WAR 文件部署在这里。
全文检索技术Solr 讲师：任亮
1课程计划 1、站内搜索技术的选型 2、什么是Solr 3、Solr的安装及配置，solr整合tomcat。 4、Solr对索引库的维护，基于solr的后台管理界面 a)增加文档 b)删除文档 c)修改文档 5、Solr查询索引，基于solr的后台管理界面 6、Solr的客户端SolrJ a)索引的维护 b)索引的查询 7、综合案例，电商网站的搜索功能 2站内搜索技术的选型 1、Lucene实现站内搜索。开发工作量大，还要对索引库的维护投入大量的工作，索引的优化查询的优化，大并发量的考虑。不推荐使用。 2、可以使用搜索搜索引擎提供站内搜索功能。索引库放在搜索引擎上，不能维护。优点就非常简单。 3、solr技术，solr是基于lucene开发的一个全文检索服务器，提供了全套的全文检索解决方案。推荐使用的技术。 3什么solr 3.1 Solr的概念 Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。 Solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用POST 方法向Solr 服务器发送一个描述Field 及其内容的XML 文档，Solr 根据xml文档添加、删除、更新索引。Solr 搜索只需要发送HTTP GET 请求，然后对Solr 返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr不提供构建UI的功能，Solr提供了一个管理界面，通过管理界面可以查询Solr的配置和运行情况。
Solr技术方案 一用户需求 以前的互动平台只能对固定表的固定字段做like这样的数据库层面的索引，性能低下，用户体验很差，很难满足业务提出的简化搜索的需求。 需求原型： 业界通用的做全站搜索的基本上两种： 1 选择googleAPI，百度API做。同第三方搜索引擎绑定太死，无法满足后期业务扩展需要，而且全站的SEO做的也不是很好，对于动态的很多ajax请求需要做快照，所以暂时不采用。 2 选择现有成熟的框架。
这里我们选择使用solr。 Solr是一个基于Lucene的Java搜索引擎服务器。Solr 提供了层面搜索、命中醒目显示并且支持多种输出格式（包括XML/XSLT 和JSON 格式）。它易于安装和配置，而且附带了一个基于HTTP 的管理界面。Solr已经在众多大型的网站中使用，较为成熟和稳定。Solr 包装并扩展了Lucene，所以Solr的基本上沿用了Lucene的相关术语。更重要的是，Solr 创建的索引与Lucene 搜索引擎库完全兼容。通过对Solr 进行适当的配置，某些情况下可能需要进行编码，Solr 可以阅读和使用构建到其他Lucene 应用程序中的索引。此外，很多Lucene 工具（如Nutch、Luke）也可以使用Solr 创建的索引。 这里我们主要需要以下几种功能： 1 可用性及成熟性。 2 中文分词。 3 词库与同义词的管理（比如我们使用最高的：股票代码）。 4 高亮显示。 5 方便的导入数据。 6 Facet的轻松配置 7 扩展性。 二Solr的体系结构 体系结构 Solr体系，功能模块介绍及配置。
以上是solr的架构图。具体应用时需要理解一下模块的作用及配置。 RequestHandler：接受请求，分发请求。另外也包含导入数据，如importhandler。UpdateHandlers –处理索引请求。 Search Components：作为handlder的成员变量。处理请求。 Facet：分类搜索 Tika：apache下处理文件的一个项目。 Filter，spelling ：处理字符串 Http query/update Database/html importhandler 默认基本可以满足要求。如果不够则扩展相应的handler和component。
目录树引言：一个”非专职运维人员“的烦恼 Salt快速入门 1. 安装配置 2. 安装管理端(master) 3. 安装被管理端(minion) 4. 接受minion的托管请求 5. 测试 Salt的强大功能 1. 批量操作(targeting) 2. 节点分组（nodegroups） 3. 命令执行（execution） 4. 节点信息(grains) 5. 配置管理（state) 6. 小结 Salt state实例解析 1. 目录结构 2. apache/init.sls 3. ssh/init.sls 4. ssh/server.sls 5. ssh/custom-server.sls 引言：一个”非专职运维人员“的烦恼加入到某证券公司的IT部门，尽管所在的部门挂了一个“研发部”的名字，但是我发现有大概40%的时间是在做运维工作。
这来自两种情况： 1. 自主开发的应用，需要持续的改进，不断的更新、发布、部署、调整配置，这不是运维部门喜欢的状态。 2. 软件商提供的“产品”无法满足运维部门的要求：无法通过简单的 Q&A 文档保证系统的正常运行，经常需要有一定技术能力的人员解决系统运行过程中各种稀奇古怪的问题。 这种情况下只能自己做一个“非专职运维人员”，需要频繁的登录各种服务器，执行一些命令来查看状态或者更改配置（包括配置文件的变更和软件包的安装部署）。很多操作都是不断的重复，日复一日，让人厌烦。 ”重复的工作应该交给程序去做“，所以我自己写过一些脚本。为了避免将脚本上传到几十台服务器并且不时进行更改，我使用Fabric来进行服务器的批量操作。 尽管避免了”批量的人工操作“，但我还是在进行”人工的批量操作“。远远没有实现自动管理。将有限的生命解放出来，投入到更有意义的编码工作是一个奔四程序员应有的追求，所以我又睁大红肿的眼睛，迷茫的搜索这个世界。 我发现了Puppet，Chef和CFEngine，但是并不满意。直到我发现了Salt,我的眼前一亮：这正是我所需要的东西。 如果说Salt有什么独特之处打动了我，那就是： 简单：可能是源于python的简约精神，Salt的安装配置和使用简单到了令人发 指的地步。任何稍有经验的linux使用者可以在10分钟之内搭建一个测试环境并跑通一个例子（相比之下，puppet可能需要30--60分钟）。 高性能：Salt使用大名鼎鼎的ZeroMQ作为通讯协议，性能极高。可以在数秒钟之内完成数据的传递 可伸缩：基于ZeroMQ通信，具备很强的扩展性；可以进行分级管理，能够管理分布在广域网的上万台服务器。 尽管twitter、豆瓣、oracle、等著名网站的运维团队都在使用puppet，但是我相信，他们切换到salt只是一个时间问题。毕竟不是所有的人都喜欢操纵傀儡(puppet)，但是谁又能离开盐(salt)呢？ 关于Salt和Puppet的对比，可以参考这里，或者看看中文版。
1Een 项目描述 基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构：内容管理系统（门户、博客、论坛、问答等）、统一支付中心（微信、支付宝、在线网银等）、用户权限管理系统（RBAC细粒度用户权限、统一后台、单点登录、会话管理）、微信管理系统、第三方登录系统、会员系统、存储系统 https://www.doczj.com/doc/2518229.html,/zhengAdmin/src/ 2项目组织结构
3项目模块图 4项目使用到的技术4.1后端技术 Spring Framework SpringMVC: MVC框架
Spring secutity|Shiro: 安全框架 Spring session: 分布式Session管理MyBatis: ORM框架 MyBatis Generator: 代码生成 Druid: 数据库连接池 Jsp|Velocity|Thymeleaf: 模板引擎ZooKeeper: 协调服务 Dubbo: 分布式服务框架 TBSchedule|elastic-job: 分布式调度框架Redis: 分布式缓存数据库 Quartz: 作业调度框架 Ehcache: 缓存框架 ActiveMQ: 消息队列 Solr|Elasticsearch: 分布式全文搜索引擎FastDFS: 分布式文件系统 Log4J: 日志管理 Swagger2: 接口文档 sequence: 分布式高效ID生产 https://www.doczj.com/doc/2518229.html,/yu120/sequence AliOSS|Qiniu: 云存储 Protobuf|json: 数据传输 Jenkins: 持续集成工具 Maven|Gradle: 项目构建管理
非常经典的solr教程，照着上面做完全能成功！ duogemajia Solr 3.5 入门配置应用 机器上已安装: Tomcat 6.0 jdk1.7 mysql 5.0 1 访问https://www.doczj.com/doc/2518229.html,/dyn/closer.cgi/lucene/solr , 在这个网址里选择一个路径, 下载solr 3.5 的版本 2 solr3.5 在本机解压缩以后, 把apache-solr-3.5.0\example\webapps 目录下 的solr.war 文件拷贝到Tomcat 6.0 的webapps 目录下 3 在Tomcat 6.0\webapps\solr 目录里新建一个文件夹conf 4 把solr3. 5 本机解压缩文件夹apache-solr-3.5.0\example 下的multicore 文件夹 考本到Tomcat 6.0\webapps\solr\conf 目录下 5 在Tomcat 6.0\conf\Catalina\localhost 目录下新建一个solr.xml 文件, 里面的内容如下
SolrCloud使用教程、原理介绍 发布于2013 年 8 月 24 日，属于搜索分类，7,446 浏览数 SolrCloud 是基于 Solr 和 Zookeeper 的分布式搜索方案，是正在开发中的 Solr4.0 的核心组件之一，它的主要思想是使用 Zookeeper 作为集群的配置信息中心。 它有几个特色功能：①集中式的配置信息②自动容错③近实时搜索④查询时自动负载均衡。
下面看看 wiki 的文档： 1、SolrCloud SolrCloud 是指 Solr 中一套新的潜在的分发能力。这种能力能够通过参数让你建立起一个高可用、 容错的 Solr 服务集群。当你需要大规模，容错，分布式索引和检索能力时使用 SolrCloud(solr 云)。 看看下面“启动”部分内容，快速的学会怎样启动一个集群。后面有 3 个快速简单的例子， 它们展现怎样启动一个逐步越来越复杂的集群。检出例子之后，需要翻阅后面的部分了解 更加细节的信息。 2、关于 SolrCores 和 Collections 的一点儿东西 对于单独运行的 Solr 实例，它有个东西叫 SolrCore(Solr.xml 中配置的),它是本质上独立的 索引块。如果你打算多个索引块，你就创建多个 SolrCores。当同时部署SolrCloud 的时， 独立的索引块可以跨越多个 Solr 实例。这意味着一个单独的索引块能由不同服务器设备上多个 SolrCore 的索引块组成。我们把组成一个逻辑索引块的所有 SolrCores 叫做一个独立 索引块儿(collection)。一个独立索引块是本质上一个独立的跨越多个 SolrCore 索引块的索 引块，同时索引块尽可能随着多余的设备进行缩放。如果你想把你的两个 SolrCore Solr 建 立成 SolrCloud,你将有 2 个独立索引块，每个有多个独立里的 SolrCores 组成。 3、启动 下载 Solr4-Beta 或更高版本。 如果你还没了解，通过简单的Solr 指南让自己熟悉Solr。注意：在通过指南了解云特点前，重设所有的配置和移除指南的文档.复制带有预先存在的 Solr 索引的例子目录将导致文档计数关闭Solr 内嵌使用了Zookeeper 作为集群配置和协调运作的仓储。协调考虑作为一个包 含所有 Solr 服务信息的分布式文件系统。 如果你想用一个其他的而不是 8983 作为 Solr 端口，去看下面’ Parameter Reference’部分下 的关于solr.xml 注解 例 A:简单的 2 个 shard 集群 这个例子简单的创建了一个代表一个独立索引块的两个不同的 shards 的两个 solr 服务组成
基于solr的异构数据融合检索技术 梁 艳1 刘双广1 劳定雄2 (1.重庆邮电大学通信与信息工程学院，重庆 400065；2.高新兴科技集团股份有限公司研发中心，广东 广州 510530) 摘 要：针对企业异构数据融合检索的需求，介绍了异构数据整合的常用方法和企业级搜索服务器solr的基本功能，结合xml异构数据整合、中文分词技术和友好的用户界面搭建了基于solr的异构数据融合检索系统，实现了对xml文件的索引和检索，为异构数据融合检索提供了解决方案。 关键词：solr；异构数据；XML；融合；检索 The Retrieval Technology of Heterogeneous Data Integration Based on Solr Abstract:For the need of enterprise heterogeneous data integration retrieval, this thesis introduces the common method of heterogeneous data integration and the basic function of Solr which is enterprise search server. Combined the XML heterogeneous data integration with the Chinese word segmentation technology and the friendly user interface，this paper built the heterogeneous data integration retrieval system based on Solr, realized the indexing and retrieval of XML document and provided solutions for heterogeneous data integration retrieval. Key words:solr； Heterogeneous data；xml；integration；retrieval 作者简介： 梁艳（1988-），女，汉族，重庆市潼南县人，重庆邮电大学硕士在读，研究方向：信息检索；刘双广（1965-），男，汉族，广东省广州人，重庆邮电大学硕士生导师，EMBA，研究方向：物联网；劳定熊（1976-），汉族，男，广东省广州人，高新兴科技集团股份有限公司架构师，硕士，研究方向：云计算。 1 背景 互联网技术的发展，使得信息数据爆炸式增长。特别是在企业信息中，其非结构数据占到了增长数据的80%，包括PDF、word文档，图像、音频和视频等。企业在不同的应用平台拥有不同的检索系统，这给用户检索信息带来了诸多不便。如何构建一个统一的检索平台，使得用户在海量的异构数据中实现统一检索，一直是研究人员研究的热点。 2 异构数据融合技术 异构数据是指数据格式不同，内容不一，描述不同内容的数据，包括结构化数据（如数据库）、半结构化数据（如HTML、 XML）和非结构化数据（如文本、图片）[1] 。数据的统一访问的基 础在于数据融合集成，目前对于解决异构数据融合的研究有数据仓库、数据抽取和数据转换。 数据仓库是指不同来源的数据在进入数据仓库之前，转换为统一的格式为复杂的查询提供统一的视图，实现数据的统一访问[2]。其代表性的成果是ETL集成工具，ETL [3]允许提取、转换和加载异构数据到数据仓库中和实现数据迁移任务。但数据仓库主要是针对不同数据库中的结构化数据的整合，很难应用于非结构化数据的集成、实现非结构化数据的统一访问[4]。 数据抽取是指将无结构的的文本结构化处理，即输入原始文本输出固定格式[5]。部分数据库管理系统自带有数据抽取工具，能够低成本的解决异构数据整合问题，但在实际应用中有一定的局限性。 XML整合是数据转换技术的代表，即将各种异构数据转换为统一的xml文本格式，实现异构数据整合。XML(eXtensible Markup Language，扩展标记语言)是互联网下的一个关键技术，它能很好地实现来源极端异构的数据描述和传输。XML能独立于应用系统,不受任何特殊的软件或者硬件平台限制,并且这些数据能重复使用,简单易懂,成为交换各种结构化、半结构化、非结构化信息的良好方式[6]。因此,采用XML文档作为底层数据的融合与集成技术,实现了异构数据源间数据共享并且更有效地利用信息资源。XML整合数据的一般模型为下图一所示： 3 solr搜索引擎 3.1 solr简介 Solr （Searching on Lucene Replication）[7] 是Apache 软件基金会下的一个开源子项目，它是一个高性能的、采用java5开发的、基于lucene全文搜索库的企业搜索服务器。提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。 3.2 solr体系架构 Solr的系统结构图[8]如图2所示，solr主要分为3层，solr 在lucene的基础上进行了大量的改进，其中solr的底层为对lucene一些功能的改进封装。中间层为solr的核心层，搜索引 擎的主要功能都是在这一层实现的，包括对文档进行分析、建立索引、配置solr运行文件和保存索引文件等。最顶层包括HTTP接口，负责通过HTTP传入和返回XML文档；管理界面和索引更新模块。另外，索引复制功能是一个独立的模块，它是由一个主索引和多个从索引构成，从索引从主索引复制索引，主索引负 图一 xml数据整合模型
美团O2O的CRM系统架构设计 众所周知，O2O（Online To Offline），是指将线下的商务机会与互联网结合，让互联网成为线下交易的前台。但是O2O平台自身并不提供用户最终享受的商品、服务，这些服务都来自线下商户提供的服务，换句话说平台只是服务的搬运工。 线上风景固然靓丽，但是并不像看到的那样风光，就拿“团购”来讲，美团、点评、百度糯米的APP在功能布局、操作体验等方面差异化越来越小，这样极大的降低了用户使用门槛，作为理性逐利的C端用户来讲，最长见的结果谁便宜就会用谁。那么问题来了，如何在这场纷争中抓住用户，最终胜出呢? 对，线下能力! 线下的能力包括线下资源的控制能力和线下服务品质的控 制能力。线下能力最终决定了平台能够提供给线上用户的服务和服务品质,只有能够提供丰富、实惠、高品质的服务，来能够帮助平台在线上赢得用户，取得成功。美团之所以成功，就在于强大的地面、运营团队所建立起的线下能力。而这些团队背后所依赖的，就是我们称之为秘密武器的B端产品。CRM，就是其中之一。CRMCRM系统，立足于帮助美团解决线下资源控制的能力。CRM通过商家关系的建立和维系客户
关系，同时借助于新技术、和方法改进来提升工作效率，从而达成链接美团和商户的使命! 接下来我会从两大维度四个方面来介绍一下美团CRM的特点:合作篇 销售(建立合作)、运营(持续合作) 效能篇 信息之战(数据)、移动办公(场景支持)销售（建立合作）众所周知，在CRM系统中线索是非常重要的资源，提供丰富、有价值的线索是CRM系统的首要职责。在美团，线索对象通常指商家门店(POI)，通过对门店关键人物(KP)的拜访和机会转化，最终为美团提供合作商家(可上单的商家)。 线索通过多种渠道获得： 网上数据爬取(初期) BD(业务拓展人员)采集 商家创建 众包采集 美团数据中心(MDC)将信息收集完成后，POI将会进入审核环节，未经校准的POI会经由人工(运营审核、众包采集)、机器审核进行校准、去重工作，通过反向拉取、消息队列通知等方式，线索数据最终会同步到CRM。 基于美团的大数据服务，在CRM中的POI数据将会被标记分类(300大商家、头部商家、竞对在线、券、多、免)和信息
Solr调研总结 1. Solr 是什么？ Solr它是一种开放源码的、基于Lucene Java 的搜索服务器，易于加入到Web 应用程序中。Solr 提供了层面搜索(就是统计)、命中醒目显示并且支持多种输出格式（包括XML/XSLT 和JSON等格式）。它易于安装和配置，而且附带了一个基于HTTP 的管理界面。可以使用Solr 的表现优异的基本搜索功能，也可以对它进行扩展从而满足企业的需要。Solr的特性包括： ?高级的全文搜索功能 ?专为高通量的网络流量进行的优化 ?基于开放接口（XML和HTTP）的标准 ?综合的HTML管理界面 ?可伸缩性－能够有效地复制到另外一个Solr搜索服务器 ?使用XML配置达到灵活性和适配性 ?可扩展的插件体系 2. Lucene 是什么？ Lucene是一个基于Java的全文信息检索工具包，它不是一个完整的搜索应用程序，而是为你的应用程序提供索引和搜索功能。Lucene 目前是Apache Jakarta(雅加达)家族中的一个开源项目。也是目前最为流行的基于Java开源全文检索工具包。目前已经有很多应用程序的搜索功能是基于Lucene ，比如Eclipse 帮助系统的搜索功能。Lucene能够为文本类型的数据建立索引，所以你只要把你要索引的数据格式转化的文本格式，Lucene 就能对你的文档进行索引和搜索。
3. Solr vs Lucene Solr与Lucene 并不是竞争对立关系，恰恰相反Solr 依存于Lucene，因为Solr底层的核心技术是使用Lucene 来实现的，Solr和Lucene的本质区别有以下三点：搜索服务器，企业级和管理。Lucene本质上是搜索库，不是独立的应用程序，而Solr是。Lucene专注于搜索底层的建设，而Solr专注于企业应用。Lucene 不负责支撑搜索服务所必须的管理，而Solr负责。所以说，一句话概括Solr: Solr 是Lucene面向企业搜索应用的扩展。 Solr与Lucene架构图: Solr使用Lucene并且扩展了它！ ?一个真正的拥有动态字段(Dynamic Field)和唯一键(Unique Key)的数据模式(Data Schema) ?对Lucene查询语言的强大扩展！ ?支持对结果进行动态的分组和过滤 ?高级的，可配置的文本分析 ?高度可配置和可扩展的缓存机制 ?性能优化
Solr全文检索服务 一、企业站内搜索技术选型 ?在一些大型门户网站、电子商务网站等都需要站内搜索功能，使用传统的数据库查 询方式实现搜索无法满足一些高级的搜索需求，比如：搜索速度要快、搜索结果按 相关度排序、搜索内容格式不固定等，这里就需要使用全文检索技术实现搜索功能。 1.使用Lucene实现？什么是Lucene ? ?Lucene是一个基于Java的全文信息检索工具包，它不是一个完整 的搜索应用程序，而是为你的应用程序提供索引和搜索功能。Lucene 目前是Apache Jakarta(雅加达) 家族中的一个开源项目。也是目前 最为流行的基于Java开源全文检索工具包。目前已经有很多应用程 序的搜索功能是基于Lucene ，比如Eclipse 帮助系统的搜索功能。 Lucene能够为文本类型的数据建立索引，所以你只要把你要索引的 数据格式转化的文本格式，Lucene 就能对你的文档进行索引和搜索 ●单独使用Lucene实现站内搜索需要开发的工作量较大，主要表现在：索 引维护、索引性能优化、搜索性能优化等，因此不建议采用。 2.使用Google或Baidu接口？ ●通过第三方搜索引擎提供的接口实现站内搜索，这样和第三方引擎系统依 赖紧密，不方便扩展，不建议采用。 3.使用Solr实现？ Solr是什么？ ?Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于 Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语 言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。 ?Solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中， Solr 索引的实现方法很简单，用 POST 方法向 Solr 服务器发送一 个描述 Field 及其内容的 XML 文档，Solr根据xml文档添加、删 除、更新索引。Solr 搜索只需要发送 HTTP GET 请求，然后对 Solr 返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr
目标： 在本人的T450笔记本win7操作系统环境下熟悉云计算环境基于开源项目nutch实现大量文本内容的快速分词及检索. Hadoop、HBase、ZooKeep、Solr、Nutch 上一篇完成了Linux基础环境的搭建和集群内SSH无密码登录的设置 这一篇完成Hadoop软件安装 一、创建集群目录 mkdir -p /data/cluster cd /data/cluster mkdirtmp mkdir-p hdfs/data mkdir-p hdfs/name mkdir-p hdfs/journal 二、zookeep安装 在MNODE节点上执行： 把zookeeper-3.4.9.tar.gz拷贝到/data/cluster目录下 cd /data/cluster tarvzxf zookeeper-3.4.9.tar.gz cd /data/cluster/zookeeper-3.4.9/conf cpzoo_sample.cfgzoo.cfg 修改zoo.cfg，修改后内容如下： # The number of milliseconds of each tick tickTime=2000 # The number of ticks that the initial # synchronization phase can take initLimit=10 # The number of ticks that can pass between # sending a request and getting an acknowledgement syncLimit=5 # the directory where the snapshot is stored. # do not use /tmp for storage, /tmp here is just # example sakes. dataDir=/data/cluster/zookeeper-3.4.9/data # the port at which the clients will connect clientPort=2181 server.1=MNODE :2888:3888 server.2=SNODE :2888:3888 # the maximum number of client connections. # increase this if you need to handle more clients #maxClientCnxns=60
solr入门 课程计划： 1、solr服务介绍 2、solr服务的安装 3、solrhome的目录结构 4、自定义索引库 5、将数据库数据导入索引库 6、solrj对索引库的维护 7、solr案例 1solr服务介绍 1.1什么是solr Solr is the popular, blazing-fast, open source enterprise search platform built on Apache Lucene?. Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene 的全文搜索服务。 Solr可以独立运行在Jetty、Tomcat等这些Servlet容器中。 Solr提供了比Lucene更为丰富的查询语言， 同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。 1.2solr与Lucene区别 Lucene是一个开放源代码的全文检索引擎工具包，它不是一个完整的全文检索应用。Lucene仅提供了完整的查询引擎和索引引擎，目的是为软件开发人员提供一个简单易用的工具包，以方便的在目标系统中实现全文检索的功能，或者以Lucene为基础构建全文检索应用。
Solr的目标是打造一款企业级的搜索引擎系统，它是基于Lucene一个搜索引擎服务，可以独立运行，通过Solr可以非常快速的构建企业的搜索引擎，通过Solr也可以高效的完成站内搜索功能。 2solr服务安装与运行 2.1下载 地址：https://www.doczj.com/doc/2518229.html,/solr/ 2.2安装 解压solr-4.10.3后的目录结构： 2.3运行 执行example目录下的start.jar即可。 2.4访问 http://localhost:8983/solr/
人世间Solr为何物 下面的几张图熟悉吗？ 图(1) 图(2) 图(3)
?高扩展的Java搜索服务器 ?基于Lucene搜索库 ?通过HTTP接收XML/JSON格式的文档(轻量级的"REST"形式) ?没有内建的索引蜘蛛，可以与Nutch等爬虫集成 ?使用Lucene文档解析器解析HTML, OpenOffice, Microsoft Word, Excel, PowerPoint, IMAP, RTF, PDF等格式的文件 ?不仅支持字段数据模式定义, 也支持Lucene 动态字段 ?自定义分词器(Tokenizer)、过滤器(Filter)、分析器(Analyzer)以便控制索引和查询进程
?除了支持富文本字段(rich text)和元数据(metadata)外,对数字和日期等进行了很好的区分 ?能合并多个文本字段为一个全文类型(full text)的字段，方便搜索(copy field) ?可以基于性能的考虑调节各种参数(option tuning) ?支持所有的Lucene查询语法,包括Internet查询操作符(+, -, "") ?各种自定义查询处理选项 ?能够跨越多个字段搜索 ?可配置同义词(synonym words)和过滤词(stop words)文本文件 ?支持拼写检查(spell check)器 ?支持高亮(high light)显示搜索结果中的匹配关键字 ?复杂、强大的结果排序选项 ?Faceted metadata搜索结果 ?能够动态分组搜索结果 ?可配置的缓存选项，加速查询响应速度 ?可为扩展性和容灾配置索引复制(replication),like mysql replication? ?基于web浏览器的管理接口,提供统计、报告、调试等 ?丰富的操作客户端：Client for Ruby, PHP,Java, Python等 How To Get Solr UP And Running? 实际上，得到Solr并且使其运行起来是件很容易的事。首先，从apache的官方网站上下载Solr 的Package。下载后解压zip(for windows)或者tar.gz(for linux)，当前最新稳定版本为1.3.0。 Solr包结构图 打开example文件夹，如图：
我终于深入参与了一个分布式系统了，好多想法不一样了！ 原文出处：Turbo Zhang 的博客前言 过去两个月深入的参与了一个分布式系统的开发，记得之前有人说过“想成为架构师之前，都是从微观架构开始的”。尽 管我从没想过将来的某一天要成为一个架构师，或者领域专家，我只是想萌萌哒的编码，写着自己喜欢的Code，和一 群志同道合的朋友做出大家喜欢的商品和产品。但是工作久了慢慢的搭架子的事情还是会来到你的面前，因为时间总会把一部分人慢慢推向海边，使得他们成为最早见到阳光的人。不扯淡了，为什么要说阳光呢，还是因为过去的两（三）个月可能过的太充实也太痛苦了，完成之后，曙光来临的时候整个人是会发光的哦。“深度”参与是因为我终于有机会在搭 架子的过程中有了话语权和选择权，同时也会承担70%以上的编码工作。 之前我的自我认知是我可能在软件方面的积累还可以，比如设计模式，架构分层，程序解耦，API入手等方面，但是总觉得我在硬件网络方面积累的太少，太薄了。 比如： 不同操纵系统之间的特点；
网络端口管理与分发； 哪些网络协议可以帮助我们更好的完成工作，监控虚拟机的时候是在虚机上加代理好还是用协议去控制； 硬件是否支持分布式，在扩展过程中对于.net C#的兼容怎么样； 什么时候使用多线程，在把线程交给程序调度的时候我们怎么控制和捕捉线程的异常； 日志系统对于整个分散的系统是多么的重要； 何时使用关系数据库，什么时候使用Nosql； 消息队列用擅长的MSMQ还是RabbitMQ. 怎样有效的和其他部门的同事沟通； 用什么样的方式去有效调度不同语言开发的系统； 测试用例对于大系统从零散到完整是多么的重要； 系统标准，代码原则对于后期的维护余扩展是多么的重要；等； 项目简介 首先项目详细内容不便多说，简答的说，就是为国内某大型厂商建立一套协调其自身搭建的私有云以及其购买的公有 云的一套系统。说牛X一点就是：一套混合云系统。 使用Restful
Solr 全文检索技术
1.Solr介绍 15 2.Solr安装配置-SolrCore配置 15 3.Solr安装配置-Solr工程部署 10 4.Solr安装配置-Solr工程测试 15 5.Solr安装配置-多SorlCore配置 10 6.Solr入门--schema 20 7.Solr入门-安装中文分词器 15 8.Solr入门-自定义业务系统Field 20 9.Solr入门-SolrJ介绍10 10.Solr入门-SolrJ索引维护 20 11.Solr入门-数据导入处理器20 12.Solr入门-搜索语法 10 13.Solr入门-SolrJ-搜索 20 14.Solr案例-需求分析 10 15.Solr案例-架构设计 15 16.Solr案例-Service 20 17.Solr案例-Controller 20 18.Solr案例-主体调试 20 19.Solr案例-功能完善
1【Solr介绍】 1.1S olr是什么 Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。 Solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用 POST 方法向 Solr 服务器发送一个描述 Field 及其内容的 XML 文档，Solr根据xml文档添加、删除、更新索引。Solr 搜索只需要发送 HTTP GET 请求，然后对 Solr 返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr不提供构建UI的功能，Solr提供了一个管理界面，通过管理界面可以查询Solr的配置和运行情况。 1.2S olr与Lucene的区别 Lucene是一个开放源代码的全文检索引擎工具包，它不是一个完整的全文检索引擎，Lucene提供了完整的查询引擎和索引引擎，目的是为软件开发人员提供一个简单易用的工具包，以方便的在目标系统中实现全文检索的功能，或者以Lucene为基础构建全文检索引擎。 Solr的目标是打造一款企业级的搜索引擎系统，它是一个搜索引擎服务，可以独立运行，通过Solr可以非常快速的构建企业的搜索引擎，通过Solr也可以高效的完成站内搜索功能。 1.3Solr下载 从Solr官方网站（https://www.doczj.com/doc/2518229.html,/solr/ ）下载Solr4.10.3，根据Solr的运行环境，Linux下需要下载lucene-4.10.3.tgz，windows下需要下载lucene-4.10.3.zip。 Solr使用指南可参考：https://https://www.doczj.com/doc/2518229.html,/solr/FrontPage。