期刊文献+
共找到1篇文章
< 1 >
每页显示 20 50 100
基于海量数据的个人网盘笔记搜索实践
1
作者 黄珊珊 丁小波 蔡茂贞 《网络安全技术与应用》 2022年第8期64-66,共3页
个人网盘笔记搜索包含了笔记后台的数据同步及相关搜索前端的查询逻辑。单个用户的笔记数量及单个笔记大小等因素增加了业务处理的难度,如何保证笔记数据的完整、安全、一致?如何提升服务的并发处理能力?如何对数据进行容错和扩展性保证... 个人网盘笔记搜索包含了笔记后台的数据同步及相关搜索前端的查询逻辑。单个用户的笔记数量及单个笔记大小等因素增加了业务处理的难度,如何保证笔记数据的完整、安全、一致?如何提升服务的并发处理能力?如何对数据进行容错和扩展性保证?笔记搜索选择了实现难度复杂、查询写入性能高、分页性能高、并发处理能力高的ES+Mysql+Redis方案,运用kafka数据本地硬盘持久化、中英文分词使用等机制,从数据的读写出发,把每日的热点数据独立出来读写,查询时结合存量数据做增量合并的方式得到最终查询结果。通过可靠的算法及各种容错机制最终提升整个笔记搜索服务的安全性、可靠性、易扩展性,并最终提升用户笔记搜索体验。 展开更多
关键词 kafka数据本地硬盘持久化 IK分词 拼音分词 易构数据 全文搜索
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部