linux 폴더안에 있는 이미지 줄이기

Question

리눅스에 년/월/일/시/분/초 폴더가 있고초 폴더 안에 이미지들이 있습니다.서버 용량이 부족해서 파일들의 용량을 줄이도록개발 했습니다. 일 batch 로 돌리는데파일수가 1,000만건 정도라서 24시간안에 처리가 안되네요.혹시 유료도 괜찮으니 좋은 솔루션 없을까요? ㅠㅠ아래는 이미지 용량 줄이는 소스 입니다.Thumbnails.of(imageFile) .scale(1.0) // 크기 유지 (0.5로 하면 가로세로 절반) .outputQuality(0.7) // 품질 설정 (0.0 ~ 1.0) .toFile(imageFile); // 원본에 덮어쓰기 (또는 경로 변경 가능)

카스마당 · Answer

용량을 줄여서 근근이 버티는 것보다 NAS를 추가해 쾌적한 환경에서 관리하는 게 좋아 보입니다.

월급은나의빛 · Answer

Thumbnailator는 사용하기 편리하지만, 내부적으로 Java의 기본 ImageIO와 Java 2D 그래픽스를 사용합니다. 이 방식은 이미지 전체를 메모리(Heap)에 비트맵으로 로드(BufferedImage)한 뒤 처리하기 때문에, 고해상도 이미지나 대량 처리를 할 때 속도가 느리고 메모리 부하가 큽니다.현재 코드처럼 크기 변경 없이(scale 1.0) 압축률만 조정하는 경우라면 더 빠른 대안들이 있습니다.속도를 높일 수 있는 3가지 단계별 솔루션을 제안합니다.1. [가장 쉬운 방법] TwelveMonkeys 라이브러리 추가 (Java 레벨 최적화)코드를 거의 바꾸지 않고 성능을 높이는 방법입니다. TwelveMonkeys ImageIO 플러그인은 JDK 기본 JPEG/PNG 처리기보다 성능이 뛰어나고 호환성이 좋은 코덱을 제공합니다.원리: Thumbnailator가 내부적으로 ImageIO를 호출할 때, 기본 JDK 코덱 대신 최적화된 TwelveMonkeys 코덱이 가로채서 작업을 수행합니다.적용: 의존성(Gradle/Maven)만 추가하면 됩니다.Gradle:Groovyimplementation 'com.twelvemonkeys.imageio:imageio-jpeg:3.10.1' // JPEG 최적화 implementation 'com.twelvemonkeys.imageio:imageio-tiff:3.10.1' // 필요 시 implementation 'com.twelvemonkeys.servlet:servlet:3.10.1' // 웹 환경일 경우 참고: 이 방법은 드라마틱한 속도 향상보다는 안정성 확보와 소폭의 속도 개선에 가깝습니다.2. [추천] 병렬 처리 (Parallel Stream) 도입만약 여러 장의 이미지를 반복문으로 처리하고 있다면, CPU 코어를 모두 사용하지 못하고 있을 확률이 높습니다. 순차 처리를 병렬 처리로 바꾸는 것만으로도 처리 속도가 코어 수만큼 빨라집니다.변경 전 (순차 처리):JavaList<File> images = ...; for (File file : images) { Thumbnails.of(file).scale(1.0).outputQuality(0.7).toFile(file); } 변경 후 (병렬 처리):Javaimages.parallelStream().forEach(file -> { try { Thumbnails.of(file) .scale(1.0) .outputQuality(0.7) .toFile(file); } catch (IOException e) { e.printStackTrace(); } }); 3. [가장 빠른 방법] Native 라이브러리 사용 (Libvips 등)Java의 힙 메모리 오버헤드를 완전히 벗어나고 싶다면, C/C++ 기반의 네이티브 라이브러리를 사용하는 것이 압도적으로 빠릅니다. 특히 **libvips**는 메모리를 적게 쓰고 속도가 매우 빠르기로 유명합니다.옵션 A: JDeli (상용/유료)Java로 작성되었지만 ImageIO를 쓰지 않고 자체 엔진을 써서 매우 빠릅니다. 하지만 유료 라이브러리입니다.옵션 B: libvips (무료/오픈소스, 추천)Java에서 ProcessBuilder로 CLI를 호출하거나, JNI 래퍼(JVips)를 사용합니다. 단순히 압축률만 조정하는 것이라면 CLI 호출이 구현하기 가장 쉽고 성능도 확실합니다.Java에서 CLI 호출 예시:Java// vips가 서버에 설치되어 있어야 합니다 (apt install libvips 등) ProcessBuilder pb = new ProcessBuilder( "vips", "jpegsave", sourcePath, destPath, "--Q", "70", // 품질 70 (0.7) "--optimize-coding", "--strip" // 메타데이터 제거로 용량 추가 확보 ); pb.start().waitFor(); 요약 및 선택 가이드방법난이도속도 향상추천 상황TwelveMonkeys하 (의존성 추가만)소폭코드를 건드리기 싫고, 약간의 개선이 필요할 때병렬 처리 (Parallel)중 (코드 수정)대폭 (코어 수 비례)여러 장의 이미지를 동시에 처리해야 할 때Libvips (Native)상 (서버 설치 필요)압도적대용량/고화질 이미지를 실시간으로 처리해야 할 때어떤 환경(OS, 웹 서버 여부 등)에서 구동 중이신가요? 환경에 맞춰 구체적인 코드 예시를 더 작성해 드릴 수 있습니다.

kenu,전독시 · Answer

webp 로 바꾸는 방법도 고려해보세요.https://developers.google.com/speed/webp?hl=ko병렬로 실행시킬 수 있을 겁니다.

linux 폴더안에 있는 이미지 줄이기

3개의 답변

기술 목록