创建索引源码

//创建索引
    @Test
    public void createIndex() throws Exception{
        //1.创建一个Directory对象,指定索引库保存保存的位置
        /*把索引库保存在内存中
        Directory directory = new RAMDirectory();
        */
        //把索引库保存在磁盘
        Directory directory = FSDirectory.open(new File("E:\\Java_Study\\Lucene\\index").toPath());
        //2.基于Directory对象,创建一个IndexWriter对象
        IndexWriterConfig config = new IndexWriterConfig(new IKAnalyzer());
        IndexWriter indexWriter = new IndexWriter(directory,config);
        //3.读取磁盘上的文件,对应每个文件创建一个文档对象
        File dir = new File("F:\\searchsource");
        File[] files = dir.listFiles();
        for(File f:files) {
            //取文件名
            String fileName = f.getName();
            //文件的路径
            String filePath = f.getPath();
            //文件的内容
            String fileContent = FileUtils.readFileToString(f, "utf-8");
            //文件的大小
            long fileSize = FileUtils.sizeOf(f);
            //创建field
            //参数1:域的名称  参数2:域的内容  参数3:是否存储
            Field fieldName = new TextField("name", fileName, Field.Store.YES);
            //Field fieldPath = new TextField("path", filePath, Field.Store.YES);
            StoredField fieldPath = new StoredField("path",filePath);
            Field fieldContent = new TextField("content", fileContent, Field.Store.YES);
            //Field fieldSize = new TextField("size", fileSize + "", Field.Store.YES);
            LongPoint fieldSizeValue = new LongPoint("size",fileSize);
            Field fieldSizeStore = new StoredField("size",fileSize);
            //创建文档对象
            Document document = new Document();
            //向文档对象中添加域
            document.add(fieldName);
            document.add(fieldPath);
            document.add(fieldContent);
            //document.add(fieldSize);
            document.add(fieldSizeValue);
            document.add(fieldSizeStore);
            //5.把文档对象写入索引库
            indexWriter.addDocument(document);
        }
        //6.关闭IndexWriter对象
        indexWriter.close();
    }
Elasticsearch 创建索引源码流程主要包括以下几个步骤: 1. 创建索引请求:客户端向 Elasticsearch 发送创建索引的请求,包括索引名称、配置和映射等信息。 2. 验证索引名称:Elasticsearch 首先会验证索引名称是否合法,如果不合法则返回错误信息。 3. 创建索引元数据:Elasticsearch 接着会根据请求中的配置信息创建索引的元数据,包括分片和副本数、索引设置和映射等。 4. 创建索引文件夹:Elasticsearch 会在磁盘上为新索引创建一个文件夹,用于存储索引数据和元数据文件。 5. 初始化索引结构:Elasticsearch 会调用 Lucene 的 IndexWriter 创建索引结构,包括倒排索引、文档存储和字段映射等。 6. 创建分片:Elasticsearch 接着会为新索引创建分片,根据分片数将索引数据分散到不同的节点上。 7. 分配副本:Elasticsearch 会为每个分片分配指定数量的副本,将数据复制到其他节点上以提高容错性和可用性。 8. 返回响应结果:创建索引成功后,Elasticsearch 会返回索引的元数据信息和状态信息给客户端。 对于以上流程,具体的源码实现可以参考 Elasticsearch 的 `IndicesService` 和 `IndexShard` 等相关类。在 `IndicesService` 中,`createIndex` 方法用于处理创建索引请求,它会调用 `IndexService` 的 `create` 方法创建索引元数据和分片等,然后将索引信息保存到集群的元数据中。在 `IndexService` 中,`create` 方法会创建索引的元数据和分片信息,包括调用 Lucene 的 `IndexWriter` 创建索引结构,创建分片和分配副本等。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值