大数据

发布于 2023-09-11

随着云计算、大数据、互联网等技术的发展，消防管理领域已经引入了很多的先进管理系统，提高了消防自动化和智能化水平。消防管理最为关键的工作是预防，因此许多住宅楼、商超写字楼等场所都安装了监控器材，这些监控器材可以利用传感器技术进行开发和实现，实时的采集监控场所的数据信息，比如烟雾数据...

阅读(991)赞 (0)标签：大数据 / 物联网

发布于 2023-09-11

✅作者简介：人工智能专业本科在读，喜欢计算机与编程，写博客记录自己的学习历程。 🍎个人主页：小嗷犬的博客 🍊个人信条：为天地立心，为生民立命，为往圣继绝学，为万世开太平。 🥭本文内容：Python 数据处理：NumPy库 在多维数组中，如果省略了后面的索引，则返回对象会是一个维度...

阅读(2468)赞 (0)标签：Python / 大数据 / 数据分析 / 数据处理

发布于 2023-09-11

MySQL BLOB类型 MySQL中，BLOB是一个二进制大型对象，是一个可以存储大量数据的容器，它能容纳不同大小的数据。 插入BLOB类型的数据必须使用PreparedStatement，因为BLOB类型的数据无法使用字符串拼接写的。 MySQL的四种BLOB类型(除了在存储...

阅读(525)赞 (0)标签：SQL / 云数据库 SQL Server / 大数据 / 存储 / 数据库

发布于 2023-09-11

??‍?博主介绍：大家好，我是芝士味的椒盐，一名在校大学生，热爱分享知识，很高兴在这里认识大家? ?擅长领域：Java、大数据、运维、电子 ??如果本文章各位小伙伴们有帮助的话，?关注+??点赞+?评论+?收藏，相应的有空了我也会回访，互助！！！ ?另本人水平有限，旨在创作简单易...

阅读(2697)赞 (0)标签：Hive / Java / SQL / 大数据 / 数据库

发布于 2023-09-11

文章目录 概述 特点 应用场景 Flink VS Spark Streaming Flink是什么？ Apache Flink 是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。 A...

阅读(3076)赞 (0)标签：API / Flink / 大数据 / 数据分析 / 数据结构

发布于 2023-09-08

【云计算】知识汇总 1. 云计算基础 1.1 云计算的定义 1.2 云计算的分类 1.3云计算的组成 1.4 云计算的关键技术 1.5 怎样才算是云计算系统？ 1.6云计算的特点 1.7 大数据的定义及特点 1.8 大数据研究的挑战及基本途径 2.并行计算 2.1为什么需要并行计...

阅读(2460)赞 (0)标签：DevOps 解决方案 / 大数据 / 大数据存储 / 存储 / 虚拟化

发布于 2023-09-08

【刷题】uva10954 Add All【3】 一、题目 1.题目描述 二、解题报告 1.思路分析 2.代码详解 3.注意事项 一、题目 1.题目描述 题目：Fahim likes to solve mathematical problems. But sometimes it ...

阅读(242)赞 (0)标签：大数据 / 编程算法

发布于 2023-04-20

一、引言 随着互联网、物联网、大数据等新技术的不断发展，网络空间暴露的资产和服务日益增多，国内外网络安全形势也日益复杂，安全事件发生频率也逐渐增加。此外，安全事件提及的资产情报作为网络空间测绘研究的重要输入，通过对事件中关联到的资产进行广谱测绘，可以进一步看到其影响范围，无论是对...

阅读(3048)赞 (0)标签：SQL / 大数据 / 安全 / 数据处理 / 数据库

发布于 2023-04-20

一、引言 随着数字经济时代的到来，数据已成为一种基础性资源。然而，数据的泄漏、滥用或非法传播均会导致严重的安全问题。因此，对数据进行隐私保护是现实需要，也是法律要求。隐私集合求交（Private Set Intersection, PSI）作为解决数据隐私保护的方案之一，受到广泛...

阅读(2045)赞 (0)标签：大数据 / 编程算法

发布于 2023-04-17

【进程间通信】常用方式汇总 在系统中，随着我们的进程越来越多，难免不同进程之间要互相传输一些数据，那么这个时候该怎么办呢？ 下面主要简单了解一下，进程间通信（InterProcess Communication，IPC）的几种实现方式！ 1、管道模型 管道模型与软件生命周期模型—...

阅读(2587)赞 (0)标签：Bash / Kafka / 大数据 / 消息队列 CMQ 版

发布于 2023-04-17

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住给大家分享一下。点击跳转到网站：https://www.captainai.net/dongkelun 前言 上篇文章Flink SQL操作Hudi并同步Hive使用总结总结了如何使用Flink SQL读写Hudi...

阅读(3023)赞 (0)标签：Flink / Hive / spark / SQL / 大数据

发布于 2023-04-17

大家好，我是独孤风。 近期Datahub进行了一次大的版本更新，从0.9版本以后Datahub也正式发布了列级别数据血缘的功能。 0.9.1版本又增加了，列的影响分析这个功能。 这样Datahub对于列级别数据血缘的功能支撑就非常完善了。 目前Datahub支持列级别数据血缘的主...

阅读(340)赞 (0)标签：大数据 / 编程算法

发布于 2023-04-17

Hadoop面试题汇总 HDFS部分 1、请描述HDFS的写流程。 答： 首先由客户端向 NameNode 发起文件上传请求，NameNode 检查文件要上传的目录，并鉴权。 如果上传用户对此目录有权限，则允许客户端进行上传操作。客户端接收到允许指令后，将要上传的文件切分为 Bl...

阅读(2813)赞 (0)标签：Node.js / Yarn / 大数据 / 文件存储 / 缓存

发布于 2023-04-17

施耐德电气高级副总裁 工业自动化业务中国区负责人 庞邢健 在伊利集团，通过智能系统就能使运营效率提升19%，能源成本降低5%，每年减少的碳排放量相当于多种植2.5公顷阔叶林；在祁连山水泥，使用数字化解决方案助力单月熟料标准煤耗降至100公斤/吨以下，每年成本降低近60万欧元；在施...

阅读(1781)赞 (0)标签：企业 / 大数据 / 自动化

发布于 2023-04-13

10月11日晚19：00，腾讯云大数据“数智话”技术沙龙 第一期《云数据仓库 for Apache Doris - 新一代云托管实时统一数据仓库》直播圆满落幕。本次直播由腾讯云大数据 数据仓库产品经理，腾讯云 Doris 技术负责人，腾讯云大数据资深研发工程师围绕腾讯云大数据在2...

阅读(1741)赞 (0)标签：Apache / 云数据仓库 / 云数据仓库 for Apache Doris / 云直播 / 大数据

发布于 2023-04-11

大家好，不管是离线数仓与实时数仓，建设的时候都少不了架构设计，今天来学习一下常见的架构及发展演变过程。 一、离线数仓大数据架构 1.数仓架构 <code style="margin-left:0"> 下面详细说明图中的各个组件及其所起的作用。 图中...

阅读(1499)赞 (0)标签：Serverless / SQL / 大数据 / 数据分析 / 数据库