java - 怎樣優(yōu)化接口返回大體量數(shù)據(jù)?
問題描述
需求描述:
外圍平臺調(diào)用接口根據(jù)手機號查詢用戶的歌單推薦信息,每個用戶會有一千條左右的推薦信息,每條推薦信息包括了,歌曲ID、歌曲名稱、版權(quán)ID、試聽地址字段。
我需要關(guān)聯(lián)多張表查詢,每次查詢時間大概4s左右,查詢出來后還需要組裝數(shù)據(jù),然后才返回接口。
返回格式是json。這樣的話接口返回會比較慢。
想過提前將數(shù)據(jù)放redis集群,但是后來否定了,因為用戶量大概是500多萬,每個用戶的推薦信息大小大概200kb,存redis的話會耗費大量的內(nèi)存,所以否定了。但是想不到其它給好的處理方法,請各位大神幫忙看看這樣一個需求有什么好的處理建議嗎?感謝!
問題解答
回答1:瓶頸出在查詢很多張表需要4秒上,這里面的邏輯有可以優(yōu)化的點嗎?如果沒有那么這4秒必須花費,其他的數(shù)據(jù)傳輸格式,網(wǎng)絡(luò)通信時間再優(yōu)化也無法小于4秒了。要么在客戶端在某個用戶無感知的情況下發(fā)推薦請求,要么優(yōu)化查詢邏輯。
回答2:你鏈表查詢,把你的sql貼出來,另外為什么不分開查詢呢?估計你耗時在SQ
回答3:1.一次返回一千條?一次50條會不會快點呢?多次分頁請求呢?2.覺得直接把緩存方案否了不妥,500多w的用戶,并不都是活躍用戶,估算出活躍用戶的量的redis可以接受不?3
回答4:在【推薦信息】上添加ID屬性,保存在redis,這個量應(yīng)該不會大。
每個用戶推薦的信息也存在redis上,但是只保存1000個【推薦信息】的ID。
這樣的話就不會造成每個用戶的推薦信息有200kb了。
相關(guān)文章:
1. MySQL 使用 group by 之后然后 IFNULL(COUNT(*),0) 為什么還是會獲得 null2. mysql 為什么主鍵 id 和 pid 都市索引, id > 10 走索引 time > 10 不走索引?3. wordpress里,這樣的目錄列表是屬于小工具還是啥?4. 我的怎么不顯示啊,話說有沒有QQ群什么的5. 常量在外面不加引號會報錯。6. 一直報這個錯誤7. mysql federated引擎無法開啟8. sublime text3安裝package control失敗9. mysql - 大部分?jǐn)?shù)據(jù)沒有行溢出的text字段是否需要拆表10. 語法錯誤,意外’:’
