Node.js 유튜브 크롤링하던중 fs.read에 대하여 궁금한 점이 있습니다.

Question

현재 노드에서 유튜브 링크를 받으면 동영상, mp3로 변환한뒤에 저장을 받고 zip파일로 압축하여 응답으로 zip파일을 주는 형식을 하고있는데 문제가 fs.readFile로 읽어오면 다 읽어오지 못하고 동영상이 짤리게 됩니다.다운을 받을때는 충분히 전부 다운이 받아지는데 zip파일로 압축할려고 버퍼의 용량을 충분히 얻어오지 못합니다.. fs.readFileSync메소드로 읽어오는 파일의 buffer 값을 비교해보니 큰차이가 없는데 왜 이런 형식이 나오는지 잘 모르겠네요.. 아직 부족한 코드지만 한번 봐주시면 감사하겠습니다.그리고 아직 부족한 코드라 충고 달게 받겠습니다.let router = require('express').Router(); let fs = require('fs'); let path = require('path'); let zip = require('node-zip')(); let youtebe = require('youtube-dl'); router.route('/search').get((req, res) => { console.log('다운 시작'); let url = req.query.url; //동영상 주소 배열로 들어갑니다 let arr = JSON.parse(url); let type = req.query.type; // mp4인지 mp3인지 비교합니다. let fileType; if (type == 'mp4') { fileType = ['--format=18']; } else if (type == 'mp3') { fileType = ['-x', '--audio-format', 'mp3'] } var nameArr = new Array(); var count = 0; console.log(fileType); for (var i = 0; i < arr.length; i++) { let dUrl = arr[i]; let download = youtebe(dUrl, fileType, { cwd: __dirname }); download.on('info', (info) => { //다운로드시 info이벤트 발생시 let name = info._filename.substring(0, info._filename.length - 4); nameArr.push(name); download.once('end', function() { if (i == arr.length && count == 0) afterEnd(nameArr, type, res); count++; }); download.pipe(fs.createWriteStream(name + '.' + type)); // 파일 다운로드 입니다 여기서 받은 파일은 완벽히 재생됩니다. }); } }); function afterEnd(nameArr, type, res) { console.log('시작'); for (let i = 0; i < nameArr.length; i++) { (function(i) { console.log(nameArr[i] + '.' + type); // 이부분에서 파일을 읽어와도 부족하게 읽어오네요 let data = fs.readFileSync(nameArr[i] + '.' + type); console.log(data); zip.file(nameArr[i] + '.' + type, data); }(i)); } let root = path.join(__dirname, '..', nameArr[2] + '.' + type); //테스트용입니다. let data = zip.generate({ base64: false, compression: 'DEFLATE' }); fs.writeFileSync('Ziptube.zip', data, 'binary'); res.download(root); // 요청한곳으로 zip파일을 보낼 예정입니다. } module.exports = router;

르베르크 · Accepted Answer

사용하시는 모듈의 함수가 동기함수인지 비동기함수인지 정확히 확인하시고 사용하셔야 합니다비동기 함수일경우 콜백 받아서 처리하셔야 합니다.만약 비동기 함수인데 for 문 돌리셔야 하면 async-foreach 모듈로 돌리시면됩니다

Dayzen · Answer

혹시나해서 동기식 함수, 비동기식 함수둘다 테스트해봤지만 결국 오류는 똑같이나오더군요...

Node.js 유튜브 크롤링하던중 fs.read에 대하여 궁금한 점이 있습니다.

2개의 답변

#buffer 목록