SOJSON

在开发过程中，可能会遇到这样的需求，我们需要从本地的 Excel 或 CSV 等文件中解析出信息，这些信息可能是考勤打卡记录，可能是日历信息，也可能是近期账单流水。但是它们共同的特点是数据多且繁杂，人工录入的工作量庞大容易出错，需要花费大量时间。那有没有什么方法能自动解析文件并获取有用信息呢？当这个文件数据量也不是很多的时候，有很多前端工具可供选择。例如 SheetJS，就提供了从&nb...

随着网络技术的逐渐改善，各类视频消息成为媒体传播的主要选择手段。但其实支撑着视频传播的并不单单是网络技术，还有视频转码与压缩技术。这类技术下分很多，比如曾经被频繁提到的 H.265，比如时下热门的窄带高清，比如与元宇宙密不可分的 AI 视频云，他们都有些什么差别，在选择时我们该选择什么？窄带高清我们通常所说的窄带高清，指的是在视频编码率保持不变的前提下，平均降低视频大小的方法。以又拍云窄带高清为例...

想必只要是熟悉   Python   的同学对装饰模式一定不会陌生，这类   Python   从语法上原生支持的装饰器，大大提高了装饰模式在   Python   中的应用。尽管   Go...

大家好，我是来自又拍云的张召，今天主要分享又拍云多数据源日志处理选型 Flink 的考量，以及 Flink 落地过程中遇到的问题和解决方案。一、为什么用 Flink 做批处理在选用 Flink 前，我们对日志批处理的整个业务需求分为三步：数据源采集、日志处理、结果的保存。我们的日志量在 100G/h，单机服务处理速度慢、扩容不方便，一些相似的需求都是以编码形式完成的。另外，数据处理流程复杂，需要在...

日前，由又拍云举办的大数据与 AI 技术实践｜Open Talk 杭州站沙龙在杭州西溪科创园顺利举办。本次活动邀请了有赞、个推、方得智能、又拍云等公司核心技术开发者，现场分享各自领域的大数据技术经验和心得。以下内容整理自个推资深算法工程师令狐冲现场分享：令狐冲（花名），个推资深算法工程师，目前负责个推深度学习相关研发工作，对 AI 算法有深入的了解及丰富的实践经验，擅长将大数据分析与深度学习神经网...

作为   TCP  /IP 中两个最具有代表性的传输层协议，  TCP   和   UDP   经常被拿出来相互比较。这些协议具体有什么区别，又是什么作用呢？在 IT 圈混迹多年的小伙伴们，对   TCP &n...

当我们的  URL  中包含中文、或者说包含一些非英文字母、数字、符号的时候，就会出现一堆百分号加字符串数字的内容，而且很长。比如这张图片地址：http://fileupload-upyun.test.upcdn.net/images/%E5%90%91%E6%97%A5%E8%91%B51.jpg实际是：http://fileupload-upyun.test.up...

作为我们网上冲浪最为常见，也经常被人忽视的 HTTP 已经更新换代到了 HTTP/3。本文简单明了的带你认识 HTTP/3 的作用。最近二狗子看到自己存储女神婷婷照片所用的云服务商——又拍云推出了 HTTP/3 尝鲜功能。作为爱好学习的二狗子同学既惊喜又好奇，他对 HTTPS、HTTP/2 非常熟悉，但是对于 HTTP/3 却是少了一些了解。“HTTP/2 都还没普及，没想到又拍云竟然连 HTTP...

最近接手了一个改造多平台日志服务的需求，经过梳理，我认为之前服务在设计上存在缺陷。经过一段时间的技术方案调研，最终我们决定选择使用 Flink 重构该服务。目前重构后的服务已成功经受了国庆节流量洪峰的考验，今日特来总结回顾，和大家分享一下经验。业务需求及背景在了解改造服务的需求前，我们首先要明确，要解决什么问题以及目前的服务是如何解决的。当前的业务逻辑还是比较清晰的：采集同一时段不同数据源的日志；...

“能用表情包解决的问题，绝不多说一个字。”“当不知道回复什么的时候，甩过去一个表情包就好了。”放眼望去，谁的 QQ/微信 收藏中没有几页代表性的表情包，那真的是 out 了。在当代网络社交生活中，当出现“只可意会不可言传”的情绪和内涵时，表情包大概是最合适的载体。常见的表情包有静态图片和动态图片两种。静态图片最常见的格式是 jpg/png，动态图片则是 gif。在平常工作生活中，不仅仅表情包，图片...