Fork me on GitHub

发表于 | 更新于 | 分类于 |
本文字数： 45k | 阅读时长 ≈ 41 分钟

目录 背景 第一部分 部署压测工具vegeta 第二部分 部署TDengine数据库 第三部分 TDengine数据库RESTful接口介绍 第四部分 压力测试 第五部分 压力测试结果 参考文献及资料 背景最近涛思数据团队开源了自己的时序数据库，关注度较高。按照官 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 35k | 阅读时长 ≈ 32 分钟

目录 背景 第一部分 CPython全局解释器锁问题 第二部分 Python中的多线程实现 第三部分 Python中的多进程实现 第四部分 高级应用 参考文献及资料 背景在讲解正文之前我们先回忆明确一些计算机操作系统的概念。 0.1 线程和进程进程（Process）和线 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 14k | 阅读时长 ≈ 12 分钟

目录 背景 第一部分 Sqlflow安装部署 第二部分 机器学习例子 第三部分 系统架构 参考文献及资料 背景2019年5 月 6 日，在QCon 全球软件开发大会（北京站）上，蚂蚁金服副 CTO 胡喜正式宣布开源机器学习工具 SQLFlow。实际上3个月前sqkflow项目 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 7.8k | 阅读时长 ≈ 7 分钟

目录 背景 第一部分 Sqoop原理 第一部分 Sqoop安装 第二部分 第三部分 第四部分 总结 参考文献及资料 背景在信息系统中，应用程序背后通常是关系型数据库（RDBMS），这类数据成为大数据的重要来源，在这样的需求背景下，诞生了Sqoop项目。 Apa ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 44k | 阅读时长 ≈ 40 分钟

目录 背景 第一部分 Avro中的Schema 第二部分 数据序列化和反序列化 第二部分 命令行读写Avro文件 第三部分 Avro的使用场景介绍 第四部分 总结 参考文献及资料 背景Avro（发音[ævrə]）是Apache基金会的一个独立项目，按照项目介绍Av ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 2.5k | 阅读时长 ≈ 2 分钟

目录 背景 第一部分 Avro中的Schema 第二部分 数据序列化和反序列化 第二部分 命令行读写Avro文件 第三部分 Avro的使用场景介绍 第四部分 总结 参考文献及资料 背景同样的数据不同的表达，会直接影响后续任务的难易程度和有效性，因此寻找好的数据表示 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 18k | 阅读时长 ≈ 16 分钟

目录 背景 第一部分 温热集群整体架构 第二部分 架构配置 第三部分 架构维护相关 第四部分 基于hot-warm架构的读写分离实现 总结 参考文献及资料 背景Elasticsearch集群通常有下面两种常见组织架构： 同质集群架构。即所有数据节点会负载所有的index存储和查询，节 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 54k | 阅读时长 ≈ 49 分钟

目录 背景 第一部分 Docker Compose的安装 第二部分 Docker Compose的命令介绍 第三部分 模板文件 总结 背景Docker Compose是Docker开源项目（项目在github上的地址为： https://github.com/docker/compose）。功能上 ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 42k | 阅读时长 ≈ 38 分钟

目录[TOC] 背景Elasticseach是一个基于Apache Lucene的开源检索引擎，允许用户近实时的存储、检索和分析数据。虽然 Elasticsearch 专为快速查询而设计，但其性能在很大程度上取决于应用使用的场景、索引的数据量以及应用用户查询数据的速度。本文主要参考Elasticse ...

阅读全文 »

发表于 | 更新于 | 分类于 |
本文字数： 24k | 阅读时长 ≈ 22 分钟

背景Hive（蜂巢）是Hadoop的组件，官方介绍为： Hive™: A data warehouse infrastructure that provides data summarization and ad hoc querying. Hive有三种部署方式（本质是Hive Metasto ...

阅读全文 »
0%