• 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏吧

标签:大数据

开发技术

.Net Core HttpClient处理响应压缩 24小时内最新

.Net Core HttpClient处理响应压缩
    在上篇文章[ASP.NET Core中的响应压缩]中我们谈到了在ASP.NET Core服务端处理关于响应压缩的请求,服务端的主要工作就是根据Content-Encoding头信息判断采用哪种方式压缩并返回。之前在群里有人问道过,现在的网络带宽这么高了还有必要在服务端针对请求进行压缩吗?确实,如今分布式和负载均衡技术这么成熟,很多需要处理高并发大数据……继续阅读 »

开发技术 7小时前 4浏览 0个赞

开发技术

Flink状态妙用 24小时内最新

Flink状态妙用
本文主要介绍福布湿在flink实时流处理中,state使用的一些经验和心得。本文默认围观的大神已经对flink有一定了解,如果围观过程中发现了有疑问的地方,欢迎在评论区留言。 ……继续阅读 »

开发技术 11小时前 5浏览 0个赞

开发技术

数据结构中的树(二叉树、二叉搜索树、AVL树)

数据结构中的树(二叉树、二叉搜索树、AVL树)
数据结构动图展示网站树(英语:tree)是一种抽象数据类型(ADT)或是实作这种抽象数据类型的数据结构,用来模拟具有树状结构性质的数据集合。它是由n(n>=1)个有限节点组成一个具有层次关系的集合。把它叫做“树”是因为它看起来像一棵倒挂的树,也就是说它是根朝上,而叶朝下的。它具有以下的特点: ……继续阅读 »

开发技术 1天前 6浏览 0个赞

开发技术

【Canal】互联网背景下有哪些数据同步需求和解决方案?看完我知道了!!

【Canal】互联网背景下有哪些数据同步需求和解决方案?看完我知道了!!
在当今互联网行业,尤其是现在分布式、微服务开发环境下,为了提高搜索效率,以及搜索的精准度,会大量使用Redis、Memcached等NoSQL数据库,也会使用大量的Solr、Elasticsearch等全文检索服务。那么,这个时候,就会有一个问题需要我们来思考和解决:那就是数据同步的问题!如何将实时变化的数据库中的数据同步到Redis/Memcached或者……继续阅读 »

开发技术 3天前 9浏览 0个赞

开发技术

【高并发】亿级流量场景下如何实现分布式限流?看完我彻底懂了!!(文末有福利)

【高并发】亿级流量场景下如何实现分布式限流?看完我彻底懂了!!(文末有福利)
在互联网应用中,高并发系统会面临一个重大的挑战,那就是大量流高并发访问,比如:天猫的双十一、京东618、秒杀、抢购促销等,这些都是典型的大流量高并发场景。关于秒杀,小伙伴们可以参见我的另一篇文章《【高并发】高并发秒杀系统架构解密,不是所有的秒杀都是秒杀!》 ……继续阅读 »

开发技术 4天前 8浏览 0个赞

开发技术

Spark Streaming高吞吐、高可靠的一些优化

Spark Streaming高吞吐、高可靠的一些优化
分享一些Spark Streaming在使用中关于高吞吐和高可靠的优化。目录1. 高吞吐的优化方式1.1 更改序列化的方式1.2 修改Receiver接受到的数据的存储级别1.3 广播配置变量1.4 调大接收器的个数1.5 设置合理的批处理间隔1.6 多给点资源1.7 内存比例管理1.8 垃圾回收机制1.9 使用合适的算子1.10 反压机制2. 高可靠的保障……继续阅读 »

开发技术 4天前 10浏览 0个赞

开发技术

MySQL选错索引导致的线上慢查询事故

MySQL选错索引导致的线上慢查询事故
又和大家见面了!又两周过去了,我的云笔记里又多了几篇写了一半的文章草稿。有的是因为质量没有达到预期还准备再加点内容,有的则完全是一个灵感而已,内容完全木有。羡慕很多大佬们,一周能产出五六篇文章,给我两个肝我都不够。好了,不多说废话了… ……继续阅读 »

开发技术 5天前 10浏览 0个赞

开发技术

大数据技术栈浅述

大数据技术栈浅述
最近在做企业安全建设,企业安全建设中最常见的一项就是做监控,监控的种类多种多样,但是底层的技术栈却基本是一致的————大数据技术,下面我记录一下我最近学习到的一些大数据技术,下文只是描述个脉络而已。 ……继续阅读 »

开发技术 6天前 10浏览 0个赞