Fork me on GitHub
RongXiang

我的烂笔头


  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 日程表

  • 搜索

Spark分布式存储系统BlockManager总结

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 1.2k | 阅读时长 ≈ 1 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景BlockManager 是一个嵌入在 spark 中的 key-value型分布式存储系统,是为 spark 量身打造的。 BlockMana ...

阅读全文 »

Python语言温习总结

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 5.4k | 阅读时长 ≈ 5 分钟

目录 背景 第一部分 基础环境准备 第二部分 开发环境项目部署 第三部分 生产部署 第四部分 总结 参考文献及资料 背景第一部分 Python中的类1.1 类的创建# -*- coding: utf-8 -*-class Employee: employeeCount = 0 def ...

阅读全文 »

若依spring-cloud项目源码阅读解析

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 955 | 阅读时长 ≈ 1 分钟

目录 背景 第一部分 基础环境准备 第二部分 开发环境项目部署 第三部分 生产部署 第四部分 总结 参考文献及资料 背景第一部分 权限系统设计https://blog.csdn.net/starzhou/article/details/121232710 第二部分第三部分 服务调用Feign参考 ...

阅读全文 »

Python语言PEP8规范(翻译)

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 111k | 阅读时长 ≈ 1:41

目录 背景 第一部分 基础环境准备 第二部分 开发环境项目部署 第三部分 生产部署 第四部分 总结 参考文献及资料 背景Contents Introduction A Foolish Consistency is the Hobgoblin of Little Minds Code Lay-o ...

阅读全文 »

机器学习系列-什么是概率、随机变量、统计

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 9.4k | 阅读时长 ≈ 9 分钟

目录 背景 第一部分 概率定义形式化到公理化 第二部分 随机变量 第三部分 概率和统计 第四部分 参考文献及资料 背景在日常生活中,人们经常会有各种关于概率的论断。例如:明天下雨的概率是1/4,明天股市上涨的概率是2/3,抛硬币出现正面的概率是1/2,等等。特别是在机器学习中,我们使用概率来度量不 ...

阅读全文 »

Hadoop Yarn高可用机制

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 3.2k | 阅读时长 ≈ 3 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景ResourceManager High Availability 第一部分<property> <descriptio ...

阅读全文 »

Spark中Shuffle详解

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 7k | 阅读时长 ≈ 6 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景Shuffle英文中含义是:“洗牌”,这个含义和分布式大数据计算框架有什么联系呢?我们先从大数据计算的”Hello World”案例讲解。 给定 ...

阅读全文 »

Spark钨丝计划(Spark Tungsten)

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 767 | 阅读时长 ≈ 1 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景第三部分 钨丝计划(Spark Tungsten)第五部分 总结参考文献及资料1、《Deep Dive: Apache Spark Memory ...

阅读全文 »

Spark对外内存实践

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 843 | 阅读时长 ≈ 1 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景第一部分https://www.waitingforcode.com/apache-spark/apache-spark-off-heap-me ...

阅读全文 »

机器学习系列-贝叶斯深度学习综述

发表于 2021-11-16 | 更新于 2022-10-25 | 分类于 Spring |
本文字数: 2.6k | 阅读时长 ≈ 2 分钟

目录 背景 第一部分 Spark内存管理详解 第二部分 Spark参数说明 第三部分 Spark内存优化 第四部分 常见线上问题解决 参考文献及资料 背景第一部分 概率和频率第二部分 贝叶斯公式2.1第三部分 贝叶斯深度学习&贝叶斯网络第四部分 贝叶斯深度学习第五部分 工程实现贝叶斯深度学 ...

阅读全文 »
1…91011…32
rong xiang

rong xiang

Keep a Pure Curiosity

311 日志
80 分类
21 标签
RSS
GitHub E-Mail Weibo
Link
  • 爱生活爱可可
© 2014 – 2022 rong xiang | 940k | 14:15
|
0%