Byolio Blog

如何部署hadoop集群 (六)

让我们完成hadoop集群的初始化和启动与关闭和删除

本文主要介绍hadoop部署过程最后的初始化和启动与关闭步骤引言经过了前面的虚拟机部署和hadoop集群及其依赖安装与配置接下来我们需要完成hadoop集群的最后一步–初始化和启动与关闭和删除配置workers配置文件先补充一个配置文件, 用于指定hadoop集群中的所有节点 1 2 cd /path/to/hadoopfile/etc/hadoop/ vim work...

Posted by Byolio on March 30, 2025

如何部署hadoop集群 (五)

让我们完成hadoop集群配置文件的基础配置

本文主要介绍hadoop部署过程中的相关配置文件的基础配置引言我在如何部署hadoop集群 (四)中已经讲述了部分配置时的注意事项, 接下来我们需要配置配置文件, 用于后续hadoop集群的启动和功能的实现配置hdfs HDFS(Hadoop Distributed File System)是Apache Hadoop生态系统的核心组件之一，是一个专为大数据存储和处理而设计...

Posted by Byolio on March 23, 2025

如何部署hadoop集群 (四)

让我们了解部分hadoop部署过程中的扩展知识

本文主要介绍hadoop部署过程中的相关扩展内容, 以方便进一步进行接下来的hadoop部署操作引言我在如何部署hadoop集群 (三)中已经完成了对于虚拟机的克隆, 接下来我们需要了解一些额外的扩展知识, 以便于后续的hadoop集群部署操作用户与用户权限在hadoop集群启动过程中, 因为root用户的权限过大, 所以hadoop不允许我们直接使用root用户启动ha...

Posted by Byolio on March 16, 2025

如何部署hadoop集群 (三)

让我们克隆vmware虚拟机并对其进行配置

本文主要介绍了如何克隆vmware虚拟机, 并对克隆后的虚拟机其进行配置前言我在如何部署hadoop集群 (二)中已经配置好一台虚拟机的jdk依赖并安装了hadoop, 接下来我们需要克隆足够的vmware虚拟机模拟集群中大量服务器的场景应该搭建多少服务器虽然我建议在搭建hadoop集群时, 搭建7台服务器: 3台服务器用于搭建hadoop的DataNode集群 ...

Posted by Byolio on March 12, 2025

OpenManus的部署与使用

让我们部署并使用OpenManus

本章主要介绍OpenManus的部署与使用。(请在外网下部署与使用OpenManus, 否则会出现无法安装依赖和无法使用google search的问题) OpenManus Github地址 : https://github.com/mannaandpoem/OpenManus 引言随着上周全球首款通用智能体AI:Manus的爆火出圈, 其邀请码一码难求, 因此有五位大佬使用了...

Posted by Byolio on March 9, 2025

如何部署hadoop集群 (二)

让我们简单部署hadoop3.x集群中的HDK和Hadoop依赖

本文主要介绍了如何布置hadoop3.x集群的jdk和hadoop依赖前言我在如何部署hadoop集群 (一)中已经布置好了一台虚拟机, 接下来我们需要在这一台虚拟机上安装jdk和hadoop依赖, 以便我们后续的hadoop集群部署。什么是JDK JDK是Java Development Kit的缩写，是Java开发工具包。它是Java开发人员使用的软件开发工具包，包含了...

Posted by Byolio on March 2, 2025

如何部署hadoop集群 (一)

让我们通过vmware虚拟机来简单部署hadoop3.x集群

本文主要介绍了如何布置hadoop3.x集群所需虚拟机的过程什么是hadoop Hadoop是由Apache基金会开发的开源分布式计算框架，用于处理大规模数据集的存储和分析。它是一个可靠、可扩展的分布式计算生态系统，能够让用户使用简单的编程模型在由多台计算机组成的集群上处理海量数据, 是大数据的核心组件之一。为什么要部署hadoop集群在大数据时代，数据量呈指数级增长，传统...

Posted by Byolio on February 23, 2025

在电脑中部署Deepseek-R1

如何在笔记本电脑中部署Deepseek-R1

本文旨在介绍两种在电脑使用docker部署Deepseek-R1的方法。(本文涉及docker官方仓库和chrome插件商店的访问, 请确保网络通畅) 什么是Deepseek-R1 Deepseek-R1是由中国人工智能公司深度求索(DeepSeek)研发的开源LLM, 官方公布其基准测试如下: 可以看到其在多个领域都有对标ChatGPT-o1的能力, 在数学、代码、自然语言推理...

Posted by Byolio on January 28, 2025

algorihtm--3种多重背包问题算法逻辑

优化多重背包算法逻辑

本文旨在对多重背包问题的算法逻辑进行优化。本章测试链接 : https://www.luogu.com.cn/problem/P1776 多重背包问题是什么多重背包是一种介于完全背包和01背包之间的问题，即物品有n种，但是每种物品个数有限。介于这种独特性，多重背包问题的算法逻辑解题思路与这两种背包问题的解决方法密不可分。多重背包的基础算法逻辑看到多重背包问题, 我们很容易...

Posted by Byolio on January 26, 2025

将二维数组优化为一维数组的算法底层逻辑

从本质上理解为何部分算法中可以将二维数组优化为一维数组

本文主要介绍了将二维数组优化为一维数组的算法逻辑本质。测试链接 : https://www.luogu.com.cn/problem/P1048 引言当遇到时间转空间的问题时(dp, 背包问题, 子数组累加和等)，我们可以将一维数组优化为变量, 将二维数组优化为一维数组, 将三维数组优化为二维数组, 以此类推。其中二维数组转一维数组最为常见, 因此本文将从二维数组优化为一维...

Posted by Byolio on January 24, 2025