最新博客
  • 修改Solr的源码使SolrCloud支持多分片的索引集合进行Join查询 摘要: 背景：关于Solr的Join可以见：https://wiki.apache.org/solr/Join支持两个索引集合进行关联搜索。语法大概为：{!join fromIndex=collectionName from=fromid to=toid}*:*，但Join有很多的限制：Fields or other... 22222.jpg    发表于 2017-03-21 20:30 阅读(2960) 评论(0)
  • SolrCloud使用implict路由规则创建Shard（分片） 摘要: SolrCloud有两种创建Shard的路由规则：compositeId和implict。1.使用http://localhost:8983/solr/admin/collections?action=CREATE&name=collection&numShards=3&replicationFactor=2... 发表于 2017-03-07 23:15 阅读(1861) 评论(0)
  • kafka相关命令 摘要: #创建消费者kafka-console-consumer.sh --zookeeper collector1:2181,collector2:2181,collector3:2181 --from-beginning --topic pad_report_data#查看topic详情kafka-topics.... 发表于 2017-02-24 22:13 阅读(1738) 评论(0)
  • 修改Solr的源码解决DIH导入数据一个Entity创建一个连接不释放的问题 摘要: 第一步：使用Jetty的JNDI配置数据源$SOLR_HOME/server/contexts/solr-jetty-context.xml jdbc/dmp... 33333.jpg    44444.jpg    发表于 2017-01-19 01:27 阅读(1662) 评论(0)
  • 修改solr源码优化multiValued字段的DIH导入速度 摘要: 问题：有一亿的数据，分100个mysql表存储，每一个表使用DIH分批导入到Solr。表中有一个标签的字段，多个标签使用逗号隔开，在solr中定义的字段设置multiValued="true"，原来的配置是： 发表于 2017-01-15 15:41 阅读(1703) 评论(0)
  • 使用DIH将Mysql数据库中数据批量导入solr5.5.3 摘要: 第一步：创建一个配置Mysql数据源的XML文件db-data-config.xml放在和solrconfig.xml同目录下，内容： 发表于 2017-01-14 22:30 阅读(1686) 评论(0)
  • Solr5.5.3配置IK版的中文分词器 摘要: 测试于：Solr 5.5.3, IKAnalyzer5.3.1, JDK 1.8.0_111, CentOS 6.7IK下载地址：https://pan.baidu.com/s/1geXUDaV 提取码：h62d下载后将ik-analyzer-solr5-5.x.jar上传到$SOLR_HOME/server... 发表于 2017-01-14 13:00 阅读(1709) 评论(0)
  • Flume Kafka Zookeeper整合安装手册 摘要: Flume Kafka Zookeeper整合安装手册一、JDK安装1.1 JDK1.8下载到oracle官网下载jdk8u101linuxx64.tar.gz先查找并卸载自带openJDKrpm ‐qa |grep openjdkyum ‐y remove *openjdk*解压jdk8u101linuxx... 发表于 2017-01-04 21:14 阅读(1506) 评论(0)
  • Zookeeper集群安装步骤 摘要: 1.1.1. 机器部署安装到3台虚拟机上安装好JDK 1.1.2. 上传上传用工具。1.1.3. 解压su – hadoop（切换到hadoop用户）tar -zxvf zookeeper-3.4.5.tar.gz（解压）1.1.4. 重命名mv zookeeper-3.4.5 zookee... 发表于 2017-01-03 20:07 阅读(1389) 评论(0)
  • 多台Linux主机自动化部署脚本：配置Java环境&配置无密码登录 摘要: 配置Java环境：#!/bin/bashBASE_SERVER=172.16.203.100yum install -y wgetwget $BASE_SERVER/soft/jdk-7u45-linux-x64.tar.gztar -zxvf jdk-7u45-linux-x64.tar.gz -C /us... 发表于 2016-12-25 22:28 阅读(1573) 评论(0)
博主信息
仧尐
用专业的技术，做有益的事情
按日志类别
按日志日期
友情链接
Powered by IMZHANGJIE.CN Copyright © 2015-2025 粤ICP备14056181号