elasticsearch 데이터 가져오기 내보내기

7119 단어
1,elasticsearch에서 json 형식의 데이터를 가져옵니다. 코드는 다음과 같습니다.
try {
    // ES 
    BufferedReader br = new BufferedReader(new FileReader("D:/item6.json"));
    String json = null;
    int count = 0;
    // 
    BulkRequestBuilder bulkRequest = client.prepareBulk();
    while ((json = br.readLine()) != null) {
        //setId index _Id , ,es id, 
        bulkRequest.add(client.prepareIndex("6", "item6").setId("0000"+count).setSource(json));
        // 100 
        if (count% 100==0) {
            bulkRequest.execute().actionGet();
            System.out.println(" :" + count);
        }
        count++;
    }
    bulkRequest.execute().actionGet();
    System.out.println(" ");
    br.close();
} catch (FileNotFoundException e) {
    e.printStackTrace();
} catch (IOException e) {
    // TODO Auto-generated catch block
    e.printStackTrace();
}

json 데이터는 한 줄에 데이터를 놓아야 합니다. 나비캣 도구를 사용하여 mysql에서 조회 결과를 내보낸 다음 ue 편집기를 사용하여 형식 교체 처리를 할 수 있습니다. 다음과 같습니다.
{'item_name':'gugu','brand_name':'시멘스','c_name':'웹캠'} {'item_name':'소니(SONY) HDR-PJ670 HD 디지털 카메라','brand_name':'시멘스','c_name':'웹캠'} {'item_name':'llb1008 테스트 상품','brand_name':'Netskys','c_name':'안방'}
2, elasticsearch는 json 형식의 데이터를 내보냅니다. 코드는 다음과 같습니다.
SearchResponse response = client.prepareSearch("6").setTypes("item6")
        .setQuery(QueryBuilders.matchAllQuery()).setSize(10000).setScroll(new TimeValue(600000))
        .setSearchType(SearchType.SCAN).execute().actionGet();
String scrollid = response.getScrollId();
try {
    // JSON 
    BufferedWriter out = new BufferedWriter(new FileWriter("D:/item6_export.json", true));

    // 10000 。 
    while (true) {
        SearchResponse response2 = client.prepareSearchScroll(scrollid).setScroll(new TimeValue(1000000)).execute().actionGet();
        SearchHits searchHit = response2.getHits();
        // 
        if (searchHit.getHits().length == 0) {
            break;
        }
        System.out.println("  :" + searchHit.getHits().length);
        for (int i = 0; i < searchHit.getHits().length; i++) {
            String json = searchHit.getHits()[i].getSourceAsString();
            out.write(json);
            out.write("\r
"); } } System.out.println(" "); out.close(); } catch (FileNotFoundException e) { // TODO Auto-generated catch block e.printStackTrace(); } catch (IOException e) { // TODO Auto-generated catch block e.printStackTrace(); }

좋은 웹페이지 즐겨찾기