高并发架构设计经验
发布于 2023-04-20
我的《高并发架构设计经验》原文链接 一、高并发的说明和背景 高并发解决的核心问题是在同一时间上有大量的请求过来,然后我们的系统要怎么抗住这些请求带来的压力。比如在线直播服务,同时有上百万甚至上千万人观看。比如秒杀品,同时有大量用户涌入。 高并发是从业务角度去描述系统的能力,实现高...
阅读(2017)赞 (0)
发布于 2023-04-20
我的《高并发架构设计经验》原文链接 一、高并发的说明和背景 高并发解决的核心问题是在同一时间上有大量的请求过来,然后我们的系统要怎么抗住这些请求带来的压力。比如在线直播服务,同时有上百万甚至上千万人观看。比如秒杀品,同时有大量用户涌入。 高并发是从业务角度去描述系统的能力,实现高...
阅读(2017)赞 (0)
发布于 2023-04-13
最近,或许是因为天寒地冻,风吹雨淋—— 着装日益臃肿,上下眼皮之间开合阻力不断增大,已严重影响各位码农实现代码自由! 事已至此,是时候奉上这份为大家早早备好的独家内幕,让独属于数据库技术人员的知识能量,再次绽放光彩! 是的!DB・洞见 11月场来啦! 作为国内领先的数据库厂商,腾...
阅读(2050)赞 (0)
发布于 2023-04-11
目录 一、背景 二、概念 三、特性 四、工作原理 五、快速开始 1.数据同步任务模版 kafka to kudu mysql to hive 2.数据同步执行命令 flinkx老版本命令参数: flinkx老版本执行命令: chunjun新版本执行命令:(明显看出命令还是减少...
阅读(635)赞 (0)
发布于 2023-04-04
Hbase简介 HBase是一个开源的非关系型分布式数据库( NoSQL),它参考了谷歌的BigTable建模,实现的编程语言为 Java。 HBase是一个分布式存储系统,具有高可靠性、高性能、面向列、可伸缩(增加或减少硬件的数量)的特点。 高可靠:1.底层文件存储采用的是HD...
阅读(2252)赞 (0)
发布于 2022-12-02
大家好,又见面了,我是你们的朋友全栈君。 云计算、大数据和物联网代表了IT领域最新的技术发展趋势,三者既有区别又有联系。 云计算最初主要包含了两类含义: 一类是以谷歌的GFS和MapReduce为代表的大规模分布式并行计算技术; 另一类是以亚马逊的虚拟机和对象存储为代表的“按需租...
阅读(901)赞 (0)
发布于 2022-11-27
目录 1.概述 2.windows分布式部署 2.1单节点多磁盘 2.1.1.创建目录 2.1.2启动脚本 2.1.3测试 2.2.多节点 2.2.1目录结构 2.2.2脚本 2.2.3启动测试 2.2.4nginx负载均衡 2.2.5测试 3.linux分布式部署 3.1 单节...
阅读(2443)赞 (0)
发布于 2022-11-25
业务场景 最近需要实现一个功能,根据页面选择的星期,默认是凌晨执行,生成cron表达式,然后定时执行定时程序 环境准备 开发环境 JDK 1.8 SpringBoot2.2.1 Maven 3.2+ 开发工具 IntelliJ IDEA smartGit Navicat15 在I...
阅读(1015)赞 (0)
发布于 2022-11-24
首先,来看两张图。 其中一张,回顾了本次“第二期Techo Day腾讯技术开放日”关于云原生开发与实践的活动课程。另外一张,则是截自某云原生博客主的文章热门标签。 管中窥豹一番,云原生涉及到的技术和场景确实是海纳百川的。 提到云原生,笔者作为一个developer,其实长期是处于...
阅读(737)赞 (0)
发布于 2022-11-24
一、Django 的路由 路由,既 URL 地址,每个 URL 都表示不同的页面,每个 URL 都会 views.py 中的一个视图函数。Django 项目根目录中的 urls.py 是根路由,可以集合所有应用的路由,每个应用下可以创建自己的 urls.py,这个 urls.py...
阅读(1416)赞 (0)
发布于 2022-11-23
大家好,又见面了,我是你们的朋友全栈君。 Saga分布式事务解决方案与实践 我先介绍一下我自己,我叫姜宁,来自于华为开源研究中心,现在负责的是ServiceComb这个开源项目。ServiceComb这个项目已经进到Apache孵化,应该是去年11月份时进到Apache孵化的,这...
阅读(2447)赞 (0)
发布于 2022-11-22
Kafka的主要特点 Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一个分布式的,可划分的,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。 kafka的主要特点: 同时为发布和订阅提供高吞吐量。据...
阅读(1116)赞 (0)
发布于 2022-11-18
B/S即:Browser与Server,中文意思:浏览器端与服务器端架构,这种架构是从用户层面来划分的,Browser浏览器,其实也是一种Client客户端,只是这个客户端不需要大家去安装什么应用程序,只需在浏览器上通过HTTP请求服务器端相关的资源(网页资源),客户端Brows...
阅读(2736)赞 (0)
发布于 2022-11-18
一、什么是Alluxio Alluxio(之前名为Tachyon)是世界上第一个以内存为中心的虚拟的分布式存储系统。它统一了数据访问的方式,为上层计算框架和底层存储系统构建了桥梁。应用只需要连接Alluxio即可访问存储在底层任意存储系统中的数据。此外,Alluxio的以内存为中...
阅读(2568)赞 (0)
发布于 2022-11-15
大家好,又见面了。 JAVA中有很多的开源框架都有提供类似的能力支持,比如Ehcache或者Guava Cache、Caffeine Cache等,可以通过简单的添加注解的方式就实现上述需要的缓存效果。比如使用Ehcache来实现接口接口缓存的时候,代码使用方式如下(这里先简单的...
阅读(2505)赞 (0)
发布于 2022-11-10
一. 简介 工作流引擎 LiteFlow 需要提前定义好执行流程,不支持分布式执行,支持xml,json,yml,支持逻辑执行 AirFlow ***** 支持分布式算子执行,不支持java算子执行,支持python DolphinScheduler ***** Azkaban ...
阅读(2515)赞 (0)
发布于 2022-11-03
hadoop+spark分布式集群部署 1.环境准备 环境的准备基于我写的初始化脚本,自用7.x系列的CentOS,老版本的就支持CentOS/Redhat6,7,8但是有点不完善,需要可以邮箱或者博客留言。 os\ip hostname block centos7.9 192....
阅读(1632)赞 (0)