互联网公司常用四大中间件 | 搜索中间件&缓存中间件

过段时间 2022-09-21 09:13:55  49851

分类专栏：资讯

互联网公司常用四大类中间件之搜索中间件与缓存中间件

1. 搜索中间件：Solr，ELK（ElasticSearch，Logstash，Kibana）达成近实时搜索。

底层均基于Lucence。如果能考到ELK认证（当前很少人获得），高薪无悬念。

大型互联网公司项目请求响应处理：

远端通过访问Web->检索->缓存->HBase->MapReduce->HDFS

2. 缓存中间件：

Redis缓存常用方法大家都比较清楚：

Ehcached：轻量级Java缓存框架，通过在接口服务里跑一个Ehcached，如果Ehcached有就取出，没有再去请求数据库，数据库返回并存在Ehcached中，这样就仅在一台服务器进程内。减少了Redis的繁琐步骤，缺点是，如果服务器挂了，Ehcached也挂了，因此解耦性没有Redis好。当用户访问时，快速返回结果，速度最快。

Memcached：和Ehcached很类似，2000年即存在了。在数据库MySQL中增加memcached，减少了数据库查询，MySQL内部检测该SQL是否在memcached中存在，如果不存在，则访问数据库，否则访问memcached即可。这样就将缓存放在数据库层面，来确保数据一致性。

当我们修改数据库时，需要同步更新Redis，如果中间通过消息中间件MQ提供消费，消费者可能还需更新Redis缓存。

客户端浏览器上的cookie，jwt->token缓存来自服务器的信息，比如用户名等信息。

除了浏览器上可以做缓存，我们添加Nginx也可以做缓存。我们知道，用Nginx做网关时可以提高整体性能，提升并发量；还可以用Nginx做动静分离，把服务器的一些后端数据前置到Nginx上；另外Nginx可以缓存静态文件，也可以缓存动态文件，比如Nginx内部也支持编程开发，也可以开发出来一些组件，比如resty_luacache(Lua语言实现)，shareddict（C语言实现）。