Jinliang Blog

生活有度 人生添寿

Druid 随笔

Druid 随笔

Druid 随笔 Druid 是一个开源的分布式数据存储，其核心设计来自于数据仓库、时间序列数据库、搜索系统的想法，为大范围的用例创造了一个统一的实时分析的系统。Druid 会将关键特性合并到它的摄取层，存储格式、查询层和和新架构中。 Druid 是一个开源的数据存储工具，为实时和历史数据的次秒级（多于一秒）查询设计。主要应用于对事件数据商业智能（Online analytical pr...

Posted by Jinliang on May 22, 2020

Hive 随笔

Hive 随笔

Hive 随笔 Hive 是一个数据仓库软件，支持使用 SQL 读取、写入、管理分布存储中的大型数据集。可以将结构投影到已经存储的数据上，为用户提供了命令行工具和 JDBC 驱动程序连接 Hive。 Hive 是一个基于 Apache Hadoop 的数据仓库基础设施，Hadoop 为在普通硬件上存储和计算提供了大规模扩展和容错能力。 Hive 的设计目的是支持简单数据摘要、特别查询、...

Posted by Jinliang on May 9, 2020

Hadoop 随笔

Hadoop 随笔

Hadoop 随笔 包含模块： Hadoop Common：支持 Hadoop 其他模块的公共实用工具 Hadoop Distributed File System (HDFS™)：能够为应用数据提供高吞吐量的访问的分布式文件系统 Hadoop YARN：作业调度和集群资源管理框架 Hadoop MapReduce：一个基于 YARN 的大型数据集并行处理系统 Ha...

Posted by Jinliang on May 9, 2020

仔仔大人的毕业设计

闫猪猪不要气馁

2020-04-23 任务1 pycharm 配置远程调试 通过上网查资料，了解 pycharm 怎么配置远程调试，之前你配置过好几次，遇到问题多想想，多查资料互相验证。教程：https://zhuanlan.zhihu.com/p/38591832 结果要求能够将服务器代码 DrQA download 到本地，并且 python interpreter 使用...

Posted by Jinliang on April 18, 2020

仔仔大人的复习计划

闫猪猪要努力加油

2020-06-04 基础技能 算法题目（30min） 面试题 08.11. 硬币 2020-06-03 基础技能 算法题目（30min） 删除与获得点数 2020-06-02 基础技能 算法题目（30 min） 使用最小花费爬楼梯 2020-06-01 基础技能 算法题目（30 min） 判断子序列 2020-05-31 基础技能 算法题目（30 min...

Posted by Jinliang on February 8, 2020

Apache Hadoop（二）

HDFS体系结构

1. HDFS简介 Hadoop分布式文件系统(HDFS)是一个设计用于在普通硬件上运行的分布式文件系统。它与现有的分布式文件系统有许多相似之处。但是，与其他分布式文件系统的区别非常明显。HDFS是高度容错的，设计用于部署在低成本的硬件上。HDFS提供对应用程序数据的高吞吐量访问，适用于具有大数据集的应用程序。HDFS放宽了对POSIX的一些要求，允许对文件系统数据进行流访问。HDFS最初...

Posted by Jinliang on November 29, 2019

spark-GraphX入门

spark-GraphX中文文档

1. 概述 GraphX是Spark中图形和图形并行计算的新组件。在高层次上，GraphX通过引入一个新的图形抽象扩展了Spark RDD:一个有向多重图，它的属性附加到每个顶点和边。为了支持图形计算，GraphX公开了一组基本操作符(例如，子图、joinVertices和aggregateMessages)，以及Pregel API的一个优化变体。此外，GraphX还包含了越来越多的图形...

Posted by Jinliang on November 26, 2019

Scala语言入门

Scala语言入门

1. 简介 Scala is a modern multi-paradigm programming language designed to express common programming patterns in a concise, elegant, and type-safe way. It smoothly integrates features of object-orie...

Posted by Jinliang on November 25, 2019

Apache Hadoop（一）

Apache Hadoop安装及介绍

1. Apache Hadoop主要功能 YARN中支持节点属性 YARN中的Submarine 存储策略 ABFS连接器 增强S3A连接器 YARN长时间运行服务的升级 2. 设置单节点的hadoop集群 下载hadoop安装包 http://www.apache.org/dyn/closer.cgi/hadoop/common/...

Posted by Jinliang on November 22, 2019

RabbitMQ安装过程

Kubernetes安装RabbitMQ

1. RabbitMQ简介 RabbitMQ is a message broker: it accepts and forwards messages. You can think about it as a post office: when you put the mail that you want posting in a post box, you can be sure th...

Posted by Jinliang on October 15, 2019

FEATURED TAGS
Linux Java Algorithm ML100Days Machine Learning Deep Learning K8s Reinforcement Learning Yan Zaizai Big Data
ABOUT ME

There is no royal road to learning!

✉️ xujinliang.email@foxmail.com

FRIENDS