11시 config든, 어떤 방식으로든 데이터 추가 (자동화) redis 공식 문서

CommandLineRunner 인터페이스를 구현한 클래스에 @Component 어노테이션을 선언해두면 컴포넌트 스캔이 되고 구동 시점에 run 메소드의 코드가 실행된다.

• 아래는 기존에 사용하던 코드(5만 개의 데이터를 넣으려면 30초 이내로 걸림)

@Component
public class DummyDataInitializer implements CommandLineRunner {

    @Autowired
    private RedisTemplate<String, String> redisTemplate;

    @Override
    public void run(String... args) throws Exception {
        for (int i = 1; i <= 10000; i++) {
            String key = "dummyKey" + i + "1";
            String value = "1";

            // Set the key-value pair in Redis
            redisTemplate.opsForValue().set(key, value);

            // Set the TTL (Time-To-Live) for 5 minutes
            redisTemplate.expire(key, 5, TimeUnit.MINUTES);
        }
    }
}

• 기존 initializeData에 추가.

public void initializeData() {
        // 여기에서 원하는 초기 데이터를 Redis에 삽입
        //redisCacheService.setWithExpiration("key1", "value1");

        for (int i = 0; i < 70000; i++) {
            String key = "dummyKey" + i;
            String value = "dummyValue" + i;

            // Adjust the expiration time as needed
            redisCacheService.setWithExpiration(key, value, 10L);
        }
    }
}

1. Redis는 mass insert라는 api를 제공해서 데이터를 빠르게 넣을 수 있다
2. reference를 보면 Jedis와 Lettuce 두 가지 방법의 더미 데이터 생성이 있다

   	@Bean
    public ZSetOperations<String, String> zSetOperations(RedisTemplate<String, String> redisTemplate) {
        return redisTemplate.opsForZSet();
    }

    @Bean
    public void populateDummyData(RedisTemplate<String, String> redisTemplate, ZSetOperations<String, String> zSetOperations) {
        String KEY_PREFIX = "product"; // Adjust the key prefix based on your needs

        for (int i = 1; i <= 7000000; i++) {
            String productName = KEY_PREFIX + i;

            HashMap<String, String> hashMap = new HashMap<>();
            hashMap.put("name", productName);
            hashMap.put("score", String.valueOf(i * (int) (Math.random() * 100) + 1));

            zSetOperations.add(KEY_PREFIX, productName, Double.parseDouble(hashMap.get("score")));
            redisTemplate.opsForHash().putAll(productName, hashMap);
        }
    }

• 피그마(디렉터리 구조 및 설명) 작업

https://www.figma.com/embed?embed_host=notion&url=https%3A%2F%2Fwww.figma.com%2Ffile%2FELYYlf6BuEJ5nbziPKqwP6%2F시놀%3Ftype%3Ddesign%26node-id%3D0%3A1%26mode%3Ddesign%26t%3D6DCE7T4sEta3Y75z-1

@Mia

<aside> 💡 피드백

1. 대상 및 목적
   • 대상: 누구를 위한 도식인지
     • 이해 관계자 (stakeholders)
     • 협력 업체 (co-workers)
     • 프로젝트 당사자 (developers)
   • 목적: 무엇을 위한 도식인지
     • 사업 수주, PT
     • 개발 진행상황 관리, 인수인계 등
2. 내용 수준
   • (1)의 목적에 따라 결정: 필요한 부분만 공개하면 됨 (추상화, 캡슐화)
     • For 이해 관계자: 프로젝트에 적용된 핵심 기술을 통해 비즈니스 가치가 창출되는 부분에 집중한다.
     • For 협력 업체: 협력 업체와의 상호작용이 필요한 부분에 집중한다.
     • For 프로젝트 개발자
       • 단순한 형태로 시작해서, 참여 개발자들의 의견을 받아서 발전시킨다. ex. 이거 모르겠어요!하면 내용 추가하기
       • 일반적으로 팀원들 간의 원활한 소통이 주된 목표지만, 인수인계를 위한 업무 메뉴얼 작성 등 목표와 대상에 따른 경우의 수가 너무 많기 때문에 명확한 방향성을 제시하기 어려움
3. 표현 수준
   • (1)의 대상이 이해할 수 있는 수준
   • (1)의 목적과 (2)의 내용에 대한 핵심 키워드를 반드시 포함
     • ex. 개발의 관점에서는 호출하는 메서드가 중요할 수도 있음 </aside>

Reference

• Jedis Client를 이용(pipeline api를 제공)

[Redis] Jedis를 활용한 Redis Dummy Data 넣기

• mass insertion를 이용