大战丰满大屁股女人,bt欧美区

首頁

科技周邊

IT業(yè)界

機器學(xué)習(xí)管道：設(shè)置本地kubernetes

Jack chen

Feb 15, 2025 am 08:49 AM

這個多部分的教程通過使用開源工具構(gòu)建本地機器學(xué)習(xí)管道為您提供指導(dǎo)。它非常適合預(yù)算的初創(chuàng)公司，強調(diào)控制和成本可預(yù)測性。>

鍵優(yōu)點：

>成本效益：避免云服務(wù)費用。
>對您的ML管道提供了更大的控制。>
用牧場主Kubernetes Engine（RKE）簡化了Kubernetes設(shè)置，僅需要基本的Docker和Linux技能。

ML管道開發(fā)的動手指南，非常適合初學(xué)者。

>為什么要在本地進行？

>許多人假設(shè)云存儲（AWS S3，Google Cloud Storage），但是該系列展示了使用現(xiàn)有服務(wù)器構(gòu)建功能管道，非常適合資源受限環(huán)境。這種方法提供了一個安全的學(xué)習(xí)環(huán)境，而沒有不可預(yù)測的成本。

>目標受眾：

本指南適用于軟件工程師或個人建立可準備生產(chǎn)的ML型號，尤其是ML管道的新模型。

>先決條件：熟悉Linux（推薦Ubuntu 18.04）和基本Docker知識很有幫助。不需要深入的Kubernetes專業(yè)知識。

使用的工具：

docker

kubernetes

>牧場主（帶有RKE）

> kubeflow/kubeflow管道（用后面的部分覆蓋）

米奧
TensorFlow（以后的部分覆蓋）
階段1：帶有牧場主的輕松kubernetes安裝
>步驟0：機器準備：

>您將至少需要兩臺Linux機器（或啟用了橋接網(wǎng)絡(luò)和濫交模式的VM），在同一LAN上被指定為“ Master”和“ Worker”。請注意，使用VMS限制GPU訪問和性能。>

基本機器詳細信息（IP地址，用戶名，SSH鍵）才能進行配置。本教程將使用臨時主機名（例如

）。在兩臺機器上相應(yīng)地修改您的文件，以反映此主機名和IP地址。如果使用VMS，請將主機名輸入添加到主機計算機的文件以及瀏覽器訪問中。

步驟1：獲取RKE二進制：

> Machine Learning Pipelines: Setting Up On-premise Kubernetes >從github發(fā)行頁面下載適合您的操作系統(tǒng)的二進制文件，使其可執(zhí)行，然后將其移至

>。通過運行

。rancher-demo.domain.test來驗證安裝 /etc/hosts>/etc/hosts>步驟2：準備Linux主機：

on所有>機器：

>>安裝docker：>使用提供的命令安裝Docker CE（版本19.03或更高版本）。驗證安裝并將您的用戶添加到docker>組中。注銷并返回以使小組更改以生效。
ssh鍵：在主節(jié)點上設(shè)置ssh鍵，然后將公共密鑰復(fù)制到所有工人節(jié)點。配置SSH服務(wù)器以允許端口轉(zhuǎn)發(fā)（AllowTcpForwarding yesin/etc/ssh/sshd_config）。
禁用交換：>使用sudo swapoff -a禁用交換，并在/etc/fstab>中注釋交換條目。
> 應(yīng)用Sysctl設(shè)置：runsudo sysctl net.bridge.bridge-nf-call-iptables=1。
> dns配置（Ubuntu 18.04）：，editresolvconf>，添加名稱服務(wù)器（例如，8.8.4.4和8.8.8.8）和restart/etc/resolvconf/resolv.conf.d/head。 resolvconf

>步驟3：群集配置文件：> 在主節(jié)點上，使用創(chuàng)建>文件。提供必要的信息（IP地址，主機名，角色，SSH密鑰路徑等）。

>rke config步驟4：提出群集：cluster.yml

> 在主節(jié)點上

run 創(chuàng)建Kubernetes群集。這個過程需要一些時間。 >

步驟5：復(fù)制kubeconfig：rke up> copy

to。

步驟6：安裝kubectl：kube_config_cluster.yml> 使用提供的命令在主節(jié)點上> install$HOME/.kube/config。通過運行

。

來驗證安裝 >>步驟7：安裝頭盔3：

>使用提供的命令安裝頭盔3。 kubectl>kubectl get nodes步驟8：使用Helm安裝牧場主：

>添加牧場主存儲庫，創(chuàng)建一個名稱空間，然后使用Helm安裝牧場主。監(jiān)視部署狀態(tài)。

步驟9：設(shè)置入口（用于無負載平衡器的訪問）：

> >創(chuàng)建一個>文件（將主機調(diào)整到您選擇的主機名中），然后使用

。

>cattle-system>步驟10：訪問牧場主：

>訪問Rancher UI at（或您選擇的主機名），創(chuàng)建一個密碼，并設(shè)置域名。

ingress.yml kubectl apply -f ingress.yml>

步驟11：安裝CERT-MANAGER：

> >安裝cert-manager（版本v0.9.1）使用提供的命令。監(jiān)視豆莢以確保它們運行。>

這將完成Kubernetes群集設(shè)置。該系列的下一部分將涵蓋安裝kubeflow。

常見問題（常見問題解答）：

> FAQS部分為有關(guān)本地Kubernetes設(shè)置的常見問題提供了全面的答案，涵蓋了收益，與基于云的解決方案，挑戰(zhàn)，安全考慮，遷移策略，硬件需求，縮放，Kubernetes操作員，機器學(xué)習(xí)工作量和機器學(xué)習(xí)工作和機器學(xué)習(xí)工作和機器學(xué)習(xí)工作和機器學(xué)習(xí)工作，并進行比較績效監(jiān)控。

以上是機器學(xué)習(xí)管道：設(shè)置本地kubernetes的詳細內(nèi)容。更多信息請關(guān)注PHP中文網(wǎng)其他相關(guān)文章！

本站聲明

本文內(nèi)容由網(wǎng)友自發(fā)貢獻，版權(quán)歸原作者所有，本站不承擔(dān)相應(yīng)法律責(zé)任。如您發(fā)現(xiàn)有涉嫌抄襲侵權(quán)的內(nèi)容，請聯(lián)系admin@php.cn