最近接手了一个改造多平台日志服务的需求，经过梳理，我认为之前服务在设计上存在缺陷。经过一段时间的技术方案调研，最终我们决定选择使用 Flink 重构该服务。目前重构后的服务已成功经受了国庆节流量洪峰的考验，今日特来总结回顾，和大家分享一下经验。业务需求及背景在了解改造服务的需求前，我们首先要明确，要解决什么问题以及目前的服务是如何解决的。当前的业务逻辑还是比较清晰的：采集同一时段不同数据源的日志；...

 soゝso 2020-11-23 21:11:49 4350

“能用表情包解决的问题，绝不多说一个字。”“当不知道回复什么的时候，甩过去一个表情包就好了。”放眼望去，谁的 QQ/微信 收藏中没有几页代表性的表情包，那真的是 out 了。在当代网络社交生活中，当出现“只可意会不可言传”的情绪和内涵时，表情包大概是最合适的载体。常见的表情包有静态图片和动态图片两种。静态图片最常见的格式是 jpg/png，动态图片则是 gif。在平常工作生活中，不仅仅表情包，图片...

 soゝso 2020-11-23 20:59:37 6575

从   HTTP   的进化历史讲起，细说使用协议的变迁，了解原因发现问题，解码   QUIC   在 HTTP3 中的支撑作用，共同探讨 HTTP3 的未来。HTTP、HTTP2 和 HTTP3回顾先和大家来回顾一下   HTT...

 soゝso 2020-06-23 12:52:15 13389

当页面内容发生了更新，CDN需要刷新缓存才能看到更新的内容，本站使用的是又拍云（upyun）做CDN及云存储，看过几次API，没怎么看懂所以一直手动刷新，这次尝试了下调用又拍云API刷新，测试成功后分享下。又拍云刷新API文档说明当源站的资源发生变更后，可以调用该 API 接口告知又拍云刷新缓存，缓存更新后，用户访问时会获取到更新后的资源。特别地，使用又拍云存储会在资源变更后，自动刷新缓存，省去使...

 soゝso 2019-07-20 19:55:00 7609

首先小吐槽一下upyun（又拍云)的日志管理下载。不能一次性加载全天的日志。批量下载的时候，不能批量下载。解除浏览器弹窗拦截还被浏览器拦截，而且没有任何友情提示，还好客服给力，告诉了下方法。解除浏览器拦截。就是在全选下载的时候，会只下载了第24个小时的日志，其他的都被拦截了，看下浏览器右上角被拦截，选择始终允许，如上图所示。比较痛苦的是，把24小时分成了24个*.gz文件。我们来合并gz文件。GZ...

 soゝso 2019-04-10 12:11:20 3606

 一、SOJSON 有什么？1.动态请求。2.短时间内更新的页面。3.大量的 API 请求（目前达到每天2000万次左右）。4.万年不变的页面。5.动态输出的   JS  。6.不定期更新的页面。二、SOJSON 需要解决什么？1.动态请求及时回源。2.短时间内更新的链接按规则更新缓存页面。3.API 链接全回源，并且阻断一些类似攻击的请求。4.万...

 soゝso 2018-01-22 23:21:07 4210

最近在使用又拍云，今天搞这个缓存刷新搞了一会，是我的粗心导致，下面就说下这个刷新 URL API吧，已经咨询过客服，已弃用的意思是不再维护了，还可以用。也确认了，刷新只有这一个 API。要不只有手动刷新了。登陆又拍云后，手动刷新链接地址：https://console.upyun.com/purge/purge_url/具体操作自己琢磨，没难度。下面看看官方描述的 API。缓存刷新（已弃...

 soゝso 2018-01-22 22:52:33 9110

我最近在使用  又拍云  ，在使用又拍云的   CDN   加速的时候，遇到问题了，部分用户反馈请求SOJSON 的页面返回connection reset by peer，全部信息是如下。{"msg":"connection reset by peer","code":"50302005","id":"xx...

 soゝso 2018-01-13 16:26:13 11670