mirror of
https://github.com/NeteaseCloudMusicApiEnhanced/api-enhanced.git
synced 2026-03-21 11:03:15 +00:00
refactor(cloud): 重构文件处理逻辑并提取辅助函数
- 将文件大小、MD5计算等逻辑提取到 fileHelper 工具模块 - 使用统一的文件扩展名和文件名处理函数 - 简化临时文件处理和清理逻辑 - 统一文件上传数据获取方式 - 移除重复的文件操作代码并提高可维护性
This commit is contained in:
parent
1ad8ab088f
commit
92df6e13a0
104
module/cloud.js
104
module/cloud.js
@ -1,23 +1,24 @@
|
|||||||
const uploadPlugin = require('../plugins/songUpload')
|
const uploadPlugin = require('../plugins/songUpload')
|
||||||
const crypto = require('crypto')
|
|
||||||
const fs = require('fs')
|
|
||||||
const createOption = require('../util/option.js')
|
const createOption = require('../util/option.js')
|
||||||
const logger = require('../util/logger.js')
|
const logger = require('../util/logger.js')
|
||||||
|
const {
|
||||||
|
isTempFile,
|
||||||
|
getFileSize,
|
||||||
|
getFileMd5,
|
||||||
|
cleanupTempFile,
|
||||||
|
getFileExtension,
|
||||||
|
sanitizeFilename,
|
||||||
|
} = require('../util/fileHelper')
|
||||||
|
|
||||||
let mm
|
let mm
|
||||||
module.exports = async (query, request) => {
|
module.exports = async (query, request) => {
|
||||||
mm = require('music-metadata')
|
mm = require('music-metadata')
|
||||||
let ext = 'mp3'
|
|
||||||
if (query.songFile.name.includes('.')) {
|
query.songFile.name = Buffer.from(query.songFile.name, 'latin1').toString('utf-8')
|
||||||
ext = query.songFile.name.split('.').pop()
|
const ext = getFileExtension(query.songFile.name)
|
||||||
}
|
const filename = sanitizeFilename(query.songFile.name)
|
||||||
query.songFile.name = Buffer.from(query.songFile.name, 'latin1').toString(
|
|
||||||
'utf-8',
|
|
||||||
)
|
|
||||||
const filename = query.songFile.name
|
|
||||||
.replace('.' + ext, '')
|
|
||||||
.replace(/\s/g, '')
|
|
||||||
.replace(/\./g, '_')
|
|
||||||
const bitrate = 999000
|
const bitrate = 999000
|
||||||
|
|
||||||
if (!query.songFile) {
|
if (!query.songFile) {
|
||||||
return Promise.reject({
|
return Promise.reject({
|
||||||
status: 500,
|
status: 500,
|
||||||
@ -28,55 +29,14 @@ module.exports = async (query, request) => {
|
|||||||
})
|
})
|
||||||
}
|
}
|
||||||
|
|
||||||
const useTempFile = !!query.songFile.tempFilePath
|
const useTemp = isTempFile(query.songFile)
|
||||||
let fileSize = query.songFile.size
|
let fileSize = await getFileSize(query.songFile)
|
||||||
let fileMd5 = query.songFile.md5
|
let fileMd5 = await getFileMd5(query.songFile)
|
||||||
|
|
||||||
const cleanupTempFile = async () => {
|
|
||||||
if (useTempFile) {
|
|
||||||
try {
|
|
||||||
await fs.promises.unlink(query.songFile.tempFilePath)
|
|
||||||
} catch (e) {
|
|
||||||
logger.info('临时文件清理失败:', e.message)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
try {
|
|
||||||
if (useTempFile) {
|
|
||||||
try {
|
|
||||||
const stats = await fs.promises.stat(query.songFile.tempFilePath)
|
|
||||||
fileSize = stats.size
|
|
||||||
} catch (e) {
|
|
||||||
logger.error('获取临时文件状态失败:', e.message)
|
|
||||||
return Promise.reject({
|
|
||||||
status: 500,
|
|
||||||
body: {
|
|
||||||
code: 500,
|
|
||||||
msg: '临时文件访问失败',
|
|
||||||
detail: e.message,
|
|
||||||
},
|
|
||||||
})
|
|
||||||
}
|
|
||||||
if (!fileMd5) {
|
|
||||||
fileMd5 = await new Promise((resolve, reject) => {
|
|
||||||
const hash = crypto.createHash('md5')
|
|
||||||
const stream = fs.createReadStream(query.songFile.tempFilePath)
|
|
||||||
stream.on('data', (chunk) => hash.update(chunk))
|
|
||||||
stream.on('end', () => resolve(hash.digest('hex')))
|
|
||||||
stream.on('error', reject)
|
|
||||||
})
|
|
||||||
}
|
|
||||||
} else {
|
|
||||||
if (!fileMd5) {
|
|
||||||
fileMd5 = crypto.createHash('md5').update(query.songFile.data).digest('hex')
|
|
||||||
}
|
|
||||||
fileSize = query.songFile.data.byteLength
|
|
||||||
}
|
|
||||||
|
|
||||||
query.songFile.md5 = fileMd5
|
query.songFile.md5 = fileMd5
|
||||||
query.songFile.size = fileSize
|
query.songFile.size = fileSize
|
||||||
|
|
||||||
|
try {
|
||||||
const res = await request(
|
const res = await request(
|
||||||
`/api/cloud/upload/check`,
|
`/api/cloud/upload/check`,
|
||||||
{
|
{
|
||||||
@ -89,33 +49,26 @@ module.exports = async (query, request) => {
|
|||||||
},
|
},
|
||||||
createOption(query),
|
createOption(query),
|
||||||
)
|
)
|
||||||
|
|
||||||
let artist = ''
|
let artist = ''
|
||||||
let album = ''
|
let album = ''
|
||||||
let songName = ''
|
let songName = ''
|
||||||
|
|
||||||
try {
|
try {
|
||||||
let metadata
|
let metadata
|
||||||
if (useTempFile) {
|
if (useTemp) {
|
||||||
metadata = await mm.parseFile(query.songFile.tempFilePath)
|
metadata = await mm.parseFile(query.songFile.tempFilePath)
|
||||||
} else {
|
} else {
|
||||||
metadata = await mm.parseBuffer(
|
metadata = await mm.parseBuffer(query.songFile.data, query.songFile.mimetype)
|
||||||
query.songFile.data,
|
|
||||||
query.songFile.mimetype,
|
|
||||||
)
|
|
||||||
}
|
}
|
||||||
const info = metadata.common
|
const info = metadata.common
|
||||||
|
if (info.title) songName = info.title
|
||||||
if (info.title) {
|
if (info.album) album = info.album
|
||||||
songName = info.title
|
if (info.artist) artist = info.artist
|
||||||
}
|
|
||||||
if (info.album) {
|
|
||||||
album = info.album
|
|
||||||
}
|
|
||||||
if (info.artist) {
|
|
||||||
artist = info.artist
|
|
||||||
}
|
|
||||||
} catch (error) {
|
} catch (error) {
|
||||||
logger.info('元数据解析错误:', error.message)
|
logger.info('元数据解析错误:', error.message)
|
||||||
}
|
}
|
||||||
|
|
||||||
const tokenRes = await request(
|
const tokenRes = await request(
|
||||||
`/api/nos/token/alloc`,
|
`/api/nos/token/alloc`,
|
||||||
{
|
{
|
||||||
@ -189,6 +142,7 @@ module.exports = async (query, request) => {
|
|||||||
},
|
},
|
||||||
createOption(query),
|
createOption(query),
|
||||||
)
|
)
|
||||||
|
|
||||||
return {
|
return {
|
||||||
status: 200,
|
status: 200,
|
||||||
body: {
|
body: {
|
||||||
@ -198,6 +152,8 @@ module.exports = async (query, request) => {
|
|||||||
cookie: res.cookie,
|
cookie: res.cookie,
|
||||||
}
|
}
|
||||||
} finally {
|
} finally {
|
||||||
await cleanupTempFile()
|
if (useTemp) {
|
||||||
|
await cleanupTempFile(query.songFile.tempFilePath)
|
||||||
|
}
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|||||||
@ -3,7 +3,10 @@ const fs = require('fs')
|
|||||||
var xml2js = require('xml2js')
|
var xml2js = require('xml2js')
|
||||||
|
|
||||||
const createOption = require('../util/option.js')
|
const createOption = require('../util/option.js')
|
||||||
|
const { getFileExtension, readFileChunk } = require('../util/fileHelper')
|
||||||
|
|
||||||
var parser = new xml2js.Parser()
|
var parser = new xml2js.Parser()
|
||||||
|
|
||||||
function createDupkey() {
|
function createDupkey() {
|
||||||
var s = []
|
var s = []
|
||||||
var hexDigits = '0123456789abcdef'
|
var hexDigits = '0123456789abcdef'
|
||||||
@ -15,11 +18,9 @@ function createDupkey() {
|
|||||||
s[8] = s[13] = s[18] = s[23] = '-'
|
s[8] = s[13] = s[18] = s[23] = '-'
|
||||||
return s.join('')
|
return s.join('')
|
||||||
}
|
}
|
||||||
|
|
||||||
module.exports = async (query, request) => {
|
module.exports = async (query, request) => {
|
||||||
let ext = 'mp3'
|
const ext = getFileExtension(query.songFile.name)
|
||||||
if (query.songFile.name.indexOf('flac') > -1) {
|
|
||||||
ext = 'flac'
|
|
||||||
}
|
|
||||||
const filename =
|
const filename =
|
||||||
query.songName ||
|
query.songName ||
|
||||||
query.songFile.name
|
query.songFile.name
|
||||||
@ -66,15 +67,10 @@ module.exports = async (query, request) => {
|
|||||||
|
|
||||||
const useTempFile = !!query.songFile.tempFilePath
|
const useTempFile = !!query.songFile.tempFilePath
|
||||||
let fileSize = query.songFile.size
|
let fileSize = query.songFile.size
|
||||||
let fileData
|
|
||||||
|
|
||||||
if (useTempFile) {
|
if (useTempFile) {
|
||||||
const stats = await fs.promises.stat(query.songFile.tempFilePath)
|
const stats = await fs.promises.stat(query.songFile.tempFilePath)
|
||||||
fileSize = stats.size
|
fileSize = stats.size
|
||||||
fileData = query.songFile.tempFilePath
|
|
||||||
} else {
|
|
||||||
fileSize = query.songFile.data.length
|
|
||||||
fileData = query.songFile.data
|
|
||||||
}
|
}
|
||||||
|
|
||||||
const blockSize = 10 * 1024 * 1024
|
const blockSize = 10 * 1024 * 1024
|
||||||
@ -86,11 +82,7 @@ module.exports = async (query, request) => {
|
|||||||
while (offset < fileSize) {
|
while (offset < fileSize) {
|
||||||
let chunk
|
let chunk
|
||||||
if (useTempFile) {
|
if (useTempFile) {
|
||||||
const fd = await fs.promises.open(query.songFile.tempFilePath, 'r')
|
chunk = await readFileChunk(query.songFile.tempFilePath, offset, Math.min(blockSize, fileSize - offset))
|
||||||
const buffer = Buffer.alloc(Math.min(blockSize, fileSize - offset))
|
|
||||||
await fd.read(buffer, 0, buffer.length, offset)
|
|
||||||
await fd.close()
|
|
||||||
chunk = buffer
|
|
||||||
} else {
|
} else {
|
||||||
chunk = query.songFile.data.slice(offset, Math.min(offset + blockSize, fileSize))
|
chunk = query.songFile.data.slice(offset, Math.min(offset + blockSize, fileSize))
|
||||||
}
|
}
|
||||||
|
|||||||
@ -1,17 +1,13 @@
|
|||||||
const { default: axios } = require('axios')
|
const { default: axios } = require('axios')
|
||||||
const fs = require('fs')
|
|
||||||
const createOption = require('../util/option.js')
|
const createOption = require('../util/option.js')
|
||||||
const logger = require('../util/logger.js')
|
const logger = require('../util/logger.js')
|
||||||
|
const { getUploadData, getFileExtension, sanitizeFilename } = require('../util/fileHelper')
|
||||||
|
|
||||||
module.exports = async (query, request) => {
|
module.exports = async (query, request) => {
|
||||||
let ext = 'mp3'
|
const ext = getFileExtension(query.songFile.name)
|
||||||
if (query.songFile.name.includes('.')) {
|
const filename = sanitizeFilename(query.songFile.name)
|
||||||
ext = query.songFile.name.split('.').pop()
|
|
||||||
}
|
|
||||||
const filename = query.songFile.name
|
|
||||||
.replace('.' + ext, '')
|
|
||||||
.replace(/\s/g, '')
|
|
||||||
.replace(/\./g, '_')
|
|
||||||
const bucket = 'jd-musicrep-privatecloud-audio-public'
|
const bucket = 'jd-musicrep-privatecloud-audio-public'
|
||||||
|
|
||||||
const tokenRes = await request(
|
const tokenRes = await request(
|
||||||
`/api/nos/token/alloc`,
|
`/api/nos/token/alloc`,
|
||||||
{
|
{
|
||||||
@ -72,14 +68,6 @@ module.exports = async (query, request) => {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
const useTempFile = !!query.songFile.tempFilePath
|
|
||||||
let uploadData
|
|
||||||
if (useTempFile) {
|
|
||||||
uploadData = fs.createReadStream(query.songFile.tempFilePath)
|
|
||||||
} else {
|
|
||||||
uploadData = query.songFile.data
|
|
||||||
}
|
|
||||||
|
|
||||||
try {
|
try {
|
||||||
await axios({
|
await axios({
|
||||||
method: 'post',
|
method: 'post',
|
||||||
@ -90,7 +78,7 @@ module.exports = async (query, request) => {
|
|||||||
'Content-Type': query.songFile.mimetype || 'audio/mpeg',
|
'Content-Type': query.songFile.mimetype || 'audio/mpeg',
|
||||||
'Content-Length': String(query.songFile.size),
|
'Content-Length': String(query.songFile.size),
|
||||||
},
|
},
|
||||||
data: uploadData,
|
data: getUploadData(query.songFile),
|
||||||
maxContentLength: Infinity,
|
maxContentLength: Infinity,
|
||||||
maxBodyLength: Infinity,
|
maxBodyLength: Infinity,
|
||||||
timeout: 300000,
|
timeout: 300000,
|
||||||
|
|||||||
@ -1,6 +1,6 @@
|
|||||||
const { default: axios } = require('axios')
|
const { default: axios } = require('axios')
|
||||||
const fs = require('fs')
|
|
||||||
const createOption = require('../util/option.js')
|
const createOption = require('../util/option.js')
|
||||||
|
const { getUploadData } = require('../util/fileHelper')
|
||||||
|
|
||||||
module.exports = async (query, request) => {
|
module.exports = async (query, request) => {
|
||||||
const data = {
|
const data = {
|
||||||
@ -12,20 +12,11 @@ module.exports = async (query, request) => {
|
|||||||
return_body: `{"code":200,"size":"$(ObjectSize)"}`,
|
return_body: `{"code":200,"size":"$(ObjectSize)"}`,
|
||||||
type: 'other',
|
type: 'other',
|
||||||
}
|
}
|
||||||
// 获取key和token
|
|
||||||
const res = await request(
|
const res = await request(
|
||||||
`/api/nos/token/alloc`,
|
`/api/nos/token/alloc`,
|
||||||
data,
|
data,
|
||||||
createOption(query, 'weapi'),
|
createOption(query, 'weapi'),
|
||||||
)
|
)
|
||||||
// 上传图片
|
|
||||||
const useTempFile = !!query.imgFile.tempFilePath
|
|
||||||
let uploadData
|
|
||||||
if (useTempFile) {
|
|
||||||
uploadData = fs.createReadStream(query.imgFile.tempFilePath)
|
|
||||||
} else {
|
|
||||||
uploadData = query.imgFile.data
|
|
||||||
}
|
|
||||||
|
|
||||||
const res2 = await axios({
|
const res2 = await axios({
|
||||||
method: 'post',
|
method: 'post',
|
||||||
@ -34,13 +25,10 @@ module.exports = async (query, request) => {
|
|||||||
'x-nos-token': res.body.result.token,
|
'x-nos-token': res.body.result.token,
|
||||||
'Content-Type': query.imgFile.mimetype || 'image/jpeg',
|
'Content-Type': query.imgFile.mimetype || 'image/jpeg',
|
||||||
},
|
},
|
||||||
data: uploadData,
|
data: getUploadData(query.imgFile),
|
||||||
})
|
})
|
||||||
|
|
||||||
return {
|
return {
|
||||||
// ...res.body.result,
|
|
||||||
// ...res2.data,
|
|
||||||
// ...res3.body,
|
|
||||||
url_pre: 'https://p1.music.126.net/' + res.body.result.objectKey,
|
url_pre: 'https://p1.music.126.net/' + res.body.result.objectKey,
|
||||||
imgId: res.body.result.docId,
|
imgId: res.body.result.docId,
|
||||||
}
|
}
|
||||||
|
|||||||
90
util/fileHelper.js
Normal file
90
util/fileHelper.js
Normal file
@ -0,0 +1,90 @@
|
|||||||
|
const fs = require('fs')
|
||||||
|
const crypto = require('crypto')
|
||||||
|
const path = require('path')
|
||||||
|
const logger = require('./logger')
|
||||||
|
|
||||||
|
function isTempFile(file) {
|
||||||
|
return !!(file && file.tempFilePath)
|
||||||
|
}
|
||||||
|
|
||||||
|
async function getFileSize(file) {
|
||||||
|
if (isTempFile(file)) {
|
||||||
|
const stats = await fs.promises.stat(file.tempFilePath)
|
||||||
|
return stats.size
|
||||||
|
}
|
||||||
|
return file.data ? file.data.byteLength : file.size || 0
|
||||||
|
}
|
||||||
|
|
||||||
|
async function getFileMd5(file) {
|
||||||
|
if (file.md5) {
|
||||||
|
return file.md5
|
||||||
|
}
|
||||||
|
|
||||||
|
if (isTempFile(file)) {
|
||||||
|
return new Promise((resolve, reject) => {
|
||||||
|
const hash = crypto.createHash('md5')
|
||||||
|
const stream = fs.createReadStream(file.tempFilePath)
|
||||||
|
stream.on('data', (chunk) => hash.update(chunk))
|
||||||
|
stream.on('end', () => resolve(hash.digest('hex')))
|
||||||
|
stream.on('error', reject)
|
||||||
|
})
|
||||||
|
}
|
||||||
|
|
||||||
|
if (file.data) {
|
||||||
|
return crypto.createHash('md5').update(file.data).digest('hex')
|
||||||
|
}
|
||||||
|
|
||||||
|
throw new Error('无法计算文件MD5: 缺少文件数据')
|
||||||
|
}
|
||||||
|
|
||||||
|
function getUploadData(file) {
|
||||||
|
if (isTempFile(file)) {
|
||||||
|
return fs.createReadStream(file.tempFilePath)
|
||||||
|
}
|
||||||
|
return file.data
|
||||||
|
}
|
||||||
|
|
||||||
|
async function cleanupTempFile(filePath) {
|
||||||
|
if (!filePath) return
|
||||||
|
try {
|
||||||
|
await fs.promises.unlink(filePath)
|
||||||
|
} catch (e) {
|
||||||
|
logger.info('临时文件清理失败:', e.message)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
async function readFileChunk(filePath, offset, length) {
|
||||||
|
const fd = await fs.promises.open(filePath, 'r')
|
||||||
|
const buffer = Buffer.alloc(length)
|
||||||
|
await fd.read(buffer, 0, length, offset)
|
||||||
|
await fd.close()
|
||||||
|
return buffer
|
||||||
|
}
|
||||||
|
|
||||||
|
async function getFileExtension(filename) {
|
||||||
|
if (!filename) return 'mp3'
|
||||||
|
if (filename.includes('.')) {
|
||||||
|
return filename.split('.').pop().toLowerCase()
|
||||||
|
}
|
||||||
|
return 'mp3'
|
||||||
|
}
|
||||||
|
|
||||||
|
function sanitizeFilename(filename) {
|
||||||
|
if (!filename) return 'unknown'
|
||||||
|
const ext = getFileExtension(filename)
|
||||||
|
return filename
|
||||||
|
.replace(/\.[^.]+$/, '')
|
||||||
|
.replace(/\s/g, '')
|
||||||
|
.replace(/\./g, '_')
|
||||||
|
}
|
||||||
|
|
||||||
|
module.exports = {
|
||||||
|
isTempFile,
|
||||||
|
getFileSize,
|
||||||
|
getFileMd5,
|
||||||
|
getUploadData,
|
||||||
|
cleanupTempFile,
|
||||||
|
readFileChunk,
|
||||||
|
getFileExtension,
|
||||||
|
sanitizeFilename,
|
||||||
|
}
|
||||||
Loading…
x
Reference in New Issue
Block a user