av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁技術文章
文章詳情頁

redis - 如何給輕量python程序、腳本制作緩存?

瀏覽:96日期:2022-06-30 14:23:37

問題描述

運維菜鳥,最近在做公司日志進行簡單處理之后,按一定數(shù)量加入一個list,然后使用ES的接口將數(shù)據批量添加到另外一臺ElasticSearch上,再通過一些方式進行展示。這里遇到一個問題,如果數(shù)據插入時,發(fā)生異常。比如要插入的es主機崩潰等,但是數(shù)據源沒有問題。這樣就應該把已經處理完的數(shù)據移到緩存中,然后停止程序。(數(shù)據源是kafka,即便停止了程序,重新啟動后仍可以消費之前沒有消費的)那么想問一下,對于比較輕量的python程序或者腳本,應該使用怎樣的方式存儲這些異常狀況發(fā)生時要先存儲下來的數(shù)據呢?

問題解答

回答1:

可以在es異常時, py腳本捕獲到異常后, 使用cPickle或者pickle 將處理好的數(shù)據序列化后保存到一個文件上(你可以理解成寫入一個文件, 不同在于cPickle和pickle能夠將字典或者列表這樣的對象直接寫入文件), 然后等你es恢復了, 重新啟動該py腳本, 那么該腳本優(yōu)先去檢測是否存在這個臨時文件, 如果有, 并非空, 則把里面的數(shù)據取出, 寫入es

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 久久亚洲一区二区 | 中文成人在线 | 久久99视频 | 亚洲一区在线日韩在线深爱 | 九七午夜剧场福利写真 | 日日干夜夜操天天操 | 视频在线一区二区 | 色爱综合网| 亚洲 精品 综合 精品 自拍 | 欧美精品区 | 中文字幕乱码一区二区三区 | 一区在线免费视频 | 中文字幕成人av | 久久精品国产一区二区三区不卡 | 日韩在线视频免费观看 | www国产成人 | 日韩精品久久久久久 | 精品国产乱码久久久久久图片 | 国产激情精品视频 | 99精品欧美一区二区三区综合在线 | 国产伦精品一区二区三区在线 | 久热电影 | 日韩三级一区 | 欧美a级网站 | 玖玖视频国产 | 国产精品一区二区在线播放 | 在线观看午夜视频 | 成人精品一区二区三区四区 | 天天干精品 | 日韩一二区在线 | 成人在线小视频 | 中文字幕视频在线 | 久久香蕉网 | 亚洲成人一二三 | 91精品久久久久久久久中文字幕 | 日本一本视频 | 亚洲一区二区网站 | 亚洲欧洲日韩精品 中文字幕 | 国产日韩久久久久69影院 | 国产精品福利一区二区三区 | 亚洲精品在线免费观看视频 |