最近接手了一个改造多平台日志服务的需求,经过梳理,我认为之前服务在设计上存在缺陷。经过一段时间的技术方案调研,最终我们决定选择使用 Flink 重构该服务。目前重构后的服务已成功经受了国庆节流量洪峰的考验,今日特来总结回顾,和大家分享一下经验。业务需求及背景在了解改造服务的需求前,我们首先要明确,要解决什么问题以及目前的服务是如何解决的。当前的业务逻辑还是比较清晰的:采集同一时段不同数据源的日志;...
“能用表情包解决的问题,绝不多说一个字。”“当不知道回复什么的时候,甩过去一个表情包就好了。”放眼望去,谁的 QQ/微信 收藏中没有几页代表性的表情包,那真的是 out 了。在当代网络社交生活中,当出现“只可意会不可言传”的情绪和内涵时,表情包大概是最合适的载体。常见的表情包有静态图片和动态图片两种。静态图片最常见的格式是 jpg/png,动态图片则是 gif。在平常工作生活中,不仅仅表情包,图片...
从 HTTP 的进化历史讲起,细说使用协议的变迁,了解原因发现问题,解码 QUIC 在 HTTP3 中的支撑作用,共同探讨 HTTP3 的未来。HTTP、HTTP2 和 HTTP3回顾先和大家来回顾一下 HTT...
当页面内容发生了更新,CDN需要刷新缓存才能看到更新的内容,本站使用的是又拍云(upyun)做CDN及云存储,看过几次API,没怎么看懂所以一直手动刷新,这次尝试了下调用又拍云API刷新,测试成功后分享下。又拍云刷新API文档说明当源站的资源发生变更后,可以调用该 API 接口告知又拍云刷新缓存,缓存更新后,用户访问时会获取到更新后的资源。特别地,使用又拍云存储会在资源变更后,自动刷新缓存,省去使...
首先小吐槽一下upyun(又拍云)的日志管理下载。不能一次性加载全天的日志。批量下载的时候,不能批量下载。解除浏览器弹窗拦截还被浏览器拦截,而且没有任何友情提示,还好客服给力,告诉了下方法。解除浏览器拦截。就是在全选下载的时候,会只下载了第24个小时的日志,其他的都被拦截了,看下浏览器右上角被拦截,选择始终允许,如上图所示。比较痛苦的是,把24小时分成了24个*.gz文件。我们来合并gz文件。GZ...
一、SOJSON 有什么?1.动态请求。2.短时间内更新的页面。3.大量的 API 请求(目前达到每天2000万次左右)。4.万年不变的页面。5.动态输出的 JS 。6.不定期更新的页面。二、SOJSON 需要解决什么?1.动态请求及时回源。2.短时间内更新的链接按规则更新缓存页面。3.API 链接全回源,并且阻断一些类似攻击的请求。4.万...
最近在使用又拍云,今天搞这个缓存刷新搞了一会,是我的粗心导致,下面就说下这个刷新 URL API吧,已经咨询过客服,已弃用的意思是不再维护了,还可以用。也确认了,刷新只有这一个 API。要不只有手动刷新了。登陆又拍云后,手动刷新链接地址:https://console.upyun.com/purge/purge_url/具体操作自己琢磨,没难度。下面看看官方描述的 API。缓存刷新(已弃...
我最近在使用 又拍云 ,在使用又拍云的 CDN 加速的时候,遇到问题了,部分用户反馈请求SOJSON 的页面返回connection reset by peer,全部信息是如下。{"msg":"connection reset by peer","code":"50302005","id":"xx...
综合技术交流:点击加入--> [SO JSON官方交流①群][收费]
综合技术交流:点击加入--> [SO JSON官方交流②群][免费]
要求:不能发广告、暴力、政治、付费教程,违者直接踢出。
备注:入群费用5元,没有QQ钱包,可以先支付宝
or 微信
扫码支付5元赞助后,我拉您进去。QQ联系我。
扫码赞助:赞助二维码。
技术交流QQ群:①群259217951,②群166848545
站长邮箱:so@sojson.com
对页面内容有任何疑问和建议,请联系我们。
所有赞助/开支都讲公开明细,用于网站维护:赞助名单查看
正在加载... ...