当前位置: 首页 > backend >正文

Colab中如何临时使用udocker(以MinIO为例)

  • 本文主要是想记录一下自己在Colab中用udocker启动一个MinIO的容器的过程。

1. 命令行配置环境

由于目前没有用到GPU,所以我选择的是CPU的环境。(内存12G)
在这里插入图片描述
然后就可以在命令行里安装udocker了,并配置minio的环境

# 由于minio需要做两个端口映射,分别是9000和9001,因此需要先判断一下这两个端口号是否被占用。
lsof -i:9000  # 9000端口发现被占用了,所以后期只能将minio的9000端口映射到其他端口号上了,我发现9002违背占用,因此后期映射到9002
lsof -i:9001  # 没有输出,表示没有被占用# 安装udocker
pip install udockerudocker --allow-root install# 搜索镜像
udocker --allow-root search minio  # 需要在udocker后面加上 --allow-root
# 拉取镜像
udocker --allow-root pull minio/minio
# 查看镜像
udocker --allow-root images
# 创建一个容器
udocker --allow-root create --name=minio-server minio/minio
# 查看已经创建的容器
udocker --allow-root ps
# 创建所需的文件夹,后期用于目录映射
mkdir -p /content/minio/data# 创建一个自己的容器
udocker --allow-root run \-e MINIO_ROOT_USER=micheal \-e MINIO_ROOT_PASSWORD=micheal123456 \-p 9002:9000 \-p 9001:9001 \-v /content/minio/data:/data \minio-server server /data --console-address ":9001"

上述脚本说明:

  • -e:表示设置环境变量 --env
  • -p:表示端口号映射,本机端口号:容器端口号
  • -v:目录映射

如果你想要容器后端启动,则可以将创建容器的命令写入到一个xxx.sh的脚本中,然后用如下命令运行:

nohup bash ./xxx.sh > minio.log 2>&1 &

此时,可以通过lsof -i:9002命令来查看是否启动起来了,如果未启动,则可以查看minio.log日志中的报错信息。(正常情况下,日志如下)
在这里插入图片描述

进阶操作

此时,你肯定会想通过localhost:9001查看一下webUI界面。但是呢,此时你通过ifconfig得到的也只是局域网的IP,公网无法访问。
于是乎,你可以借助 Localtunnel,来将colab服务端口暴露到公网访问。

  • 可以在 Colab 单元格中运行 !npx localtunnel --port 9001 。 运行后,它会提供一个公共 URL 用于访问。
    在这里插入图片描述

  • 仔细观察输出信息,它通常会直接显示类似 your url is: https://xxxxxx.loca.lt 的信息。

  • 如果需要你提供Tunnel Password时,你可以输入:!curl https://loca.lt/mytunnelpassword 进行查询
    在这里插入图片描述

2. python测试

# 安装对应的库文件
!pip install minio
# 测试链接
from minio import Minio
from minio.error import S3Error
try:client = Minio('0.0.0.0:9002',access_key='micheal',secret_key='micheal123456',secure=False)found = client.bucket_exists("temp")
except S3Error as e:print("error:", e)
print(found)# 返回布尔值 True or False
http://www.xdnf.cn/news/16199.html

相关文章:

  • Kotlin 内联函数
  • LeetCode|Day25|389. 找不同|Python刷题笔记
  • 小程序安卓ApK转aab文件详情教程MacM4环境
  • C++中std::string和std::string_view使用详解和示例
  • Redis数据库入门教程
  • 前端安全问题怎么解决
  • 一篇文章了解HashMap和ConcurrentHashMap的扩容机制
  • Node.js 中的内置模板path
  • 论文阅读:《Many-Objective Evolutionary Algorithms: A Survey. 》多目标优化问题的优化目标评估的相关内容介绍
  • 机器翻译编程
  • 【安卓笔记】解决livedata粘性事件
  • 在 Alpine Linux 中创建虚拟机时 Cgroup 挂在失败的现象
  • Springboot宠物用品商城的设计与实现
  • 详解力扣高频SQL50题之197. 上升的温度【简单】
  • 星慈光编程虫2号小车讲解第二篇--向左向右平移
  • Python编程进阶知识之第五课处理数据(matplotlib)
  • Unity VS Unreal Engine ,“电影像游戏的时代” 新手如何抉择引擎?(结)
  • 100条SQL语句分类精讲:从基础到进阶的实操指南
  • 医疗系统国产化实录:SQL Server国产替代,乙方保命指南
  • 机器学习的基础知识
  • 洛谷 P1996 约瑟夫问题之题解
  • kafka的shell操作
  • 多源信息融合智能投资【“图神经网络+强化学习“的融合架构】【低配显卡正常运行】
  • MapStruct类型转换接口未自动注入到spring容器中
  • 快速将前端得依赖打为tar包(yarn.lock版本)并且推送至nexus私有依赖仓库(笔记)
  • 《C++》面向对象编程--类(下)
  • LLM中的位置嵌入矩阵(Position Embedding Matrix)是什么
  • matrix-breakout-2-morpheus靶机通关教程
  • DBA常用数据库查询语句
  • Python爬虫案例:Scrapy+XPath解析当当网网页结构