java - 怎樣優(yōu)化接口返回大體量數(shù)據(jù)?
問題描述
需求描述:
外圍平臺調(diào)用接口根據(jù)手機號查詢用戶的歌單推薦信息,每個用戶會有一千條左右的推薦信息,每條推薦信息包括了,歌曲ID、歌曲名稱、版權ID、試聽地址字段。
我需要關聯(lián)多張表查詢,每次查詢時間大概4s左右,查詢出來后還需要組裝數(shù)據(jù),然后才返回接口。
返回格式是json。這樣的話接口返回會比較慢。
想過提前將數(shù)據(jù)放redis集群,但是后來否定了,因為用戶量大概是500多萬,每個用戶的推薦信息大小大概200kb,存redis的話會耗費大量的內(nèi)存,所以否定了。但是想不到其它給好的處理方法,請各位大神幫忙看看這樣一個需求有什么好的處理建議嗎?感謝!
問題解答
回答1:瓶頸出在查詢很多張表需要4秒上,這里面的邏輯有可以優(yōu)化的點嗎?如果沒有那么這4秒必須花費,其他的數(shù)據(jù)傳輸格式,網(wǎng)絡通信時間再優(yōu)化也無法小于4秒了。要么在客戶端在某個用戶無感知的情況下發(fā)推薦請求,要么優(yōu)化查詢邏輯。
回答2:你鏈表查詢,把你的sql貼出來,另外為什么不分開查詢呢?估計你耗時在SQ
回答3:1.一次返回一千條?一次50條會不會快點呢?多次分頁請求呢?2.覺得直接把緩存方案否了不妥,500多w的用戶,并不都是活躍用戶,估算出活躍用戶的量的redis可以接受不?3
回答4:在【推薦信息】上添加ID屬性,保存在redis,這個量應該不會大。
每個用戶推薦的信息也存在redis上,但是只保存1000個【推薦信息】的ID。
這樣的話就不會造成每個用戶的推薦信息有200kb了。
相關文章:
1. Docker for Mac 創(chuàng)建的dnsmasq容器連不上/不工作的問題2. javascript - 求賜教:網(wǎng)易郵箱Web端模擬登錄看信的加密參數(shù)_ntes_nnid、_ntes_nuid3. javascript - 使用angular 的ui-sref 中出現(xiàn)了中文參數(shù),點擊跳轉后瀏覽器的地址欄里出現(xiàn)轉義后的%AE....%a%44. java - ConcurrentHashMap中的get()方法為什么可以不加鎖?5. javascript - QWebEngineView 如何爬 angular 的動態(tài)數(shù)據(jù)?6. html5 - 這個代碼顯示功能如何實現(xiàn)?7. javascript - 用JS 七牛上傳圖片出現(xiàn)文件已存在的錯誤(file exists)8. 工作近5年,3年Java Web ,近2年前端,未來何去何從?9. css3 - 圖片等比例縮放10. java - 字節(jié)流轉成字符串之后,在通過字符串轉成字節(jié)流后的文件為什么會不一樣?
