Hive 元数据服务 MetaStore_@SmartSi_hive元数据服务 1. 概念 MetaSore 是 Hive 元数据存储的地方。Hive 数据库、表、函数等的定义都存储在 MetaStore 中。根据系统配置方式，统计信息和授权记录也可以存储在这。Hive 或者其他执行引擎在运行时可以使用这些数据来确定如何解析，授权以及有效执行用户的查询。MetaSt... 是 大大的周 4213 02-07
SQLAlchemy简明教程_stone0823_sqlalchemy SQLAlchemy 是 Python 著名的 ORM 工具包。通过 ORM，开发者可以用面向对象的方式来操作数据库，不再需要编写 SQL 语句。本篇不解释为什么要使用 ORM，主要讲解 SQLAlchemy 的用法。SQLAlchemy 支持多种数据库，除 sqlite 外，其它数据库需要... 是 网络投稿 3282 02-07
机器学习实践：Spark MLlib库介绍与使用-3_奔腾游子_sparkmllib安装 机器学习实践：Spark MLlib库介绍与使用 1、实验描述 MLlib （ Machine Learning Library ）是 Spark 的一个机器学习库。它能够较容易地解决一些实际的大规模机器学习问题。本实验旨在学习 Spark 的机器学习库—— MLlib 的相关知识，了解 MLlib 与... 是 大大的周 7307 02-07
大数据之CDH（web页面部署Hadoop）_leon.yan1994_cdh 一、了解CDH 在众多 Hadoop 版本中， CDH 是 Hadoop 众多分支中比较出色的版本， 它由Cloudera 发行和维护。CDH 基于 Apache 的 Hadoop 进行重新构建，提供了基于 Web 页面的群集部署和管理操作。 1.1 Hadoop 属于开源软件，采用Apache 2.0许可协议... 是 大大的周 2233 02-07
Zookeeper命令操作（初始Zookeeper、JavaAPI操作、分布式锁实现、模拟12306售票分布式锁、Zookeeper集群搭建、选举投票）_小钟要 Zookeeper命令操作（初始Zookeeper、JavaAPI操作、分布式锁实现、模拟12306售票分布式锁、Zookeeper集群搭建、选举投票） 1、初始Zookeeper Zookeeper 是 Apache Hadoop 项目下的一个子项目，是一个树形目录服务 Zookeeper 翻译过来就是 动物园管理员... 是 网络 2230 02-07
拦截器Interceptor_静瑶__拦截器 拦截器 是 SpringMVC 框架自己的，只有使用了 SpringMVC 框架的工程才能用。 作用：可以构成拦截器栈，完成特定功能。比如日志记录、登录判断、权限检查等作用。 好处：拦截器也可以让你将通用的代码模块化并作为可重用的类。 拦截器的应用：... 是 未知 7206 02-07
Openfeign的实现原理_gr5201314_openfeign OpenFeign 是 Spring Cloud 家族的一个成员， 它最核心的作用是为 HTTP 形式的 Rest API 提供了非常简洁高效的 RPC 调用方式。 如果说 Spring Cloud 其他成员解决的是系统级别的可用性，扩展性问题， 那么 OpenFeign 解决的则是与开发人员利益最为紧密的开... 是 网络投稿 5483 02-07
MongoDB 备份与还原 mongodump、mongorestore_dawang325_mongodump 一、 MongoDB 备份 1、mongodump mongodump 是 MongoDB 官方提供的备份工具，它可以从 MongoDB 数据库读取数据，并生成 BSON 文件，mongodump 适合用于备份和恢复数据量较小的 MongoDB 数据库，不适用于大数据量备份。 ? 默认情况下 mongodump 不获... 是 网络 6630 02-07
用Pandas进行数据清洗_bullnfresh_pandas数据清洗 Pandas 是 Python 中很流行的类库，使用它可以进行数据科学计算和数据分析，并且可以联合其他数据科学计算工具一块儿使用，比如，SciPy，NumPy 和Matplotlib，建模工程师可以通过创建端到端的分析工作流来解决业务问题。虽然我们可以 P... 是 大大的周 1368 02-07
【SSM直击大厂】第七章：Spring JdbcTemplate基础详解_求不脱发 🙊🙊作者主页：🔗?求不脱发 📔📔 精选专栏：🔗SSM直击大厂 📋📋?精彩摘要：JdbcTemplate JdbcTemplate 是 Spring JDBC 核心包（core）中的核心类，它可以通过配置文件、注解、... 是 网络投稿 2469 02-07
数据湖详解 — Delta Lake_阿里云技术_delta lake DeltaLake简介 Delta Lake 是 DataBricks 公司开源的、用于构建湖仓架构的存储框架。能够支持 Spark，Flink，Hive，PrestoDB，Trino 等查询/计算引擎。作为一个开放格式的存储层，它在提供了批流一体的同时，为湖仓架构提供可靠的ÿ... 是 网络 3809 02-07
不会吧不会吧，这博主居然用了1.6w+字来讲 JDBC 连接 MySQL，还花了好几个晚上写出来的_程序猿追 哈喽~大家好，这次我们来看看 JDBC 如何 连接 MySQL. 目录 一、开头 二、介绍 1、JDBC 的概念 2、JDBC 的功能 3、JDBC 的常用接口和类... 是 网络投稿 4428 02-07
mybatis 或 mybatis-plus 执行 sql 的三种方式_清泉影月_mybatisplus执行sql语句 前言： mybatis 是目前非常流行的数据库框架，mybatis-plus 是 mybatis 的增强版（只做增强，不做改变），有兴趣的可以研究下。 方式一： 配置 xml 文件，该方式是比较通用的方法，适合任何 sql 语句（尤其是复... 是 网络 7592 02-07
几款连接redis的客户端(GUI客户端)，下面记录了我使用的几款_石头StoneWang_redis客户端 几款连接redis的客户端(GUI客户端)，下面记录了我使用的几款 一、Redis 客户端 1、命令行工具 命令行 (建议使用，简单) 比如windows的cmd和Linux、Mac的Terminal，虽然最简单好用。 必须保证有 redis-cli 命令(windows 是 redis-cli.exe)，比如通过... 是 irpas 2429 02-07
redis分布式锁之redisson可重入锁_xr不经意_redisson可重入锁 1.上篇讲了java里使用setNX实现redis分布式锁，可是这种方法还是有很多弊端的，追求完美的做法可以使用redisson来实现分布式锁，如下: 2.Redisson 是 java 的 Redis 客户端之一，是 Redis 官网推荐的 java 语言实现分布式锁的项目。 它提供了一些 a... 是 网络 7708 02-07
Redis 集合（Set）_文丑颜不良啊_redis set Redis 的 Set 是 String 类型的无序集合。集合成员是唯一的，这就意味着集合中不能出现重复的数据。Redis 中集合是通过哈希表实现的，所以其添加、查找、删除的时间复杂度都是 O(1)。 Redis 集合命令 命令说明返回值示例SADD key member1 [member2 ...]将一个或... 是 未知 3445 02-07
基于 Zipkin的链路追踪_kerry_x Zipkin介绍： Zipkin 是 Twitter 的一个开源项目，它基于 Google Dapper 实现，它致力于收集服务的定时数据， 以 解决微服务架构中的延迟问题，包括数据的收集、存储、查找和展现。 我们可以使用它来收集各个服务器 上请求链路的跟踪数据... 是 网络投稿 6355 02-07
Flink-CDC_笑一笑0628_canal maxwell 目录 Flink-CDC简介MySQL开启binlog日志文件DataStream方式应用FlinkSQL方式应用自定义反序列化器 Flink-CDC简介 官网地址https://ververica.github.io/flink-cdc-connectors/master/ CDC 是 Change Data Capture(变更数据获取)的简称。核心思想是，监测并捕获数据库的... 是 网络 2054 02-07
Flink学习笔记_阳宝宝的向日葵_flink学习笔记 第一章 Flink简介 1.1 初识 Flink Flink项目的理念 是 Apache Flink 是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架 ”。Apache Flink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。 Flink 被设计 在所有常见的集群... 是 网络投稿 4717 02-07
mongoDB基本介绍_也拟泛轻舟~_mongodb数据库介绍 Mongo 是 humongous 的中间部分，在英文里是“巨大无比”的意思。所以 MongoDB 可以翻译成“巨大无比的数据库”，更优雅的叫法是“海量数据库”。Mongodb是一款非关系型数据库，说到非关系型数据库，区别于关系型数据库最显著的特征就是没有SQL语句... 是 大大的周 5332 02-07
