丰满人妻av无码一区二区三区 ,成人精品视频99在线观看免费

首頁

科技週邊

IT業(yè)界

機(jī)器學(xué)習(xí)管道：設(shè)置本地kubernetes

Jack chen

Feb 15, 2025 am 08:49 AM

這個(gè)多部分的教程通過使用開源工具構(gòu)建本地機(jī)器學(xué)習(xí)管道為您提供指導(dǎo)。它非常適合預(yù)算的初創(chuàng)公司，強(qiáng)調(diào)控制和成本可預(yù)測性。 >

鍵優(yōu)點(diǎn)：

>成本效益：避免雲(yún)服務(wù)費(fèi)用。
>對您的ML管道提供了更大的控制。 >
用牧場主Kubernetes Engine（RKE）簡化了Kubernetes設(shè)置，僅需要基本的Docker和Linux技能。

ML管道開發(fā)的動(dòng)手指南，非常適合初學(xué)者。

>為什麼要在本地進(jìn)行？

>許多人假設(shè)雲(yún)存儲（AWS S3，Google Cloud Storage），但是該系列展示了使用現(xiàn)有服務(wù)器構(gòu)建功能管道，非常適合資源受限環(huán)境。這種方法提供了一個(gè)安全的學(xué)習(xí)環(huán)境，而沒有不可預(yù)測的成本。

>目標(biāo)受眾：

本指南適用於軟件工程師或個(gè)人建立可準(zhǔn)備生產(chǎn)的ML型號，尤其是ML管道的新模型。

>先決條件：熟悉Linux（推薦Ubuntu 18.04）和基本Docker知識很有幫助。不需要深入的Kubernetes專業(yè)知識。

使用的工具：

docker

kubernetes

>牧場主（帶有RKE）

> kubeflow/kubeflow管道（用後面的部分覆蓋）

米奧
TensorFlow（以後的部分覆蓋）
階段1：帶有牧場主的輕鬆kubernetes安裝
>步驟0：機(jī)器準(zhǔn)備：

>您將至少需要兩臺Linux機(jī)器（或啟用了橋接網(wǎng)絡(luò)和濫交模式的VM），在同一LAN上被指定為“ Master”和“ Worker”。請注意，使用VMS限制GPU訪問和性能。 >

基本機(jī)器詳細(xì)信息（IP地址，用戶名，SSH鍵）才能進(jìn)行配置。本教程將使用臨時(shí)主機(jī)名（例如

）。在兩臺機(jī)器上相應(yīng)地修改您的文件，以反映此主機(jī)名和IP地址。如果使用VMS，請將主機(jī)名輸入添加到主機(jī)計(jì)算機(jī)的文件以及瀏覽器訪問中。

步驟1：獲取RKE二進(jìn)制：

> Machine Learning Pipelines: Setting Up On-premise Kubernetes >從github發(fā)行頁面下載適合您的操作系統(tǒng)的二進(jìn)製文件，使其可執(zhí)行，然後將其移至

>。通過運(yùn)行

。 rancher-demo.domain.test來驗(yàn)證安裝 /etc/hosts>/etc/hosts>步驟2：準(zhǔn)備Linux主機(jī)：

on所有>機(jī)器：

>>安裝docker：>使用提供的命令安裝Docker CE（版本19.03或更高版本）。驗(yàn)證安裝並將您的用戶添加到docker>組中。註銷並返回以使小組更改以生效。
ssh鍵：在主節(jié)點(diǎn)上設(shè)置ssh鍵，然後將公共密鑰複製到所有工人節(jié)點(diǎn)。配置SSH服務(wù)器以允許端口轉(zhuǎn)發(fā)（AllowTcpForwarding yesin/etc/ssh/sshd_config）。
禁用交換：>使用sudo swapoff -a禁用交換，並在/etc/fstab>中註釋交換條目。
> 應(yīng)用Sysctl設(shè)置：runsudo sysctl net.bridge.bridge-nf-call-iptables=1。
> dns配置（Ubuntu 18.04）：，editresolvconf>，添加名稱服務(wù)器（例如，8.8.4.4和8.8.8.8）和restart/etc/resolvconf/resolv.conf.d/head。 resolvconf

>步驟3：群集配置文件：> 在主節(jié)點(diǎn)上，使用創(chuàng)建>文件。提供必要的信息（IP地址，主機(jī)名，角色，SSH密鑰路徑等）。

>rke config步驟4：提出群集：cluster.yml

> 在主節(jié)點(diǎn)上

run 創(chuàng)建Kubernetes群集。這個(gè)過程需要一些時(shí)間。 >

步驟5：複製kubeconfig：rke up> copy

to。

步驟6：安裝kubectl：kube_config_cluster.yml> 使用提供的命令在主節(jié)點(diǎn)上> install$HOME/.kube/config。通過運(yùn)行

。

來驗(yàn)證安裝 >>步驟7：安裝頭盔3：

>使用提供的命令安裝頭盔3。 kubectl>kubectl get nodes步驟8：使用Helm安裝牧場主：

>添加牧場主存儲庫，創(chuàng)建一個(gè)名稱空間，然後使用Helm安裝牧場主。監(jiān)視部署狀態(tài)。

步驟9：設(shè)置入口（用於無負(fù)載平衡器的訪問）：

> >創(chuàng)建一個(gè)>文件（將主機(jī)調(diào)整到您選擇的主機(jī)名中），然後使用

。

>cattle-system>步驟10：訪問牧場主：

>訪問Rancher UI at（或您選擇的主機(jī)名），創(chuàng)建一個(gè)密碼，並設(shè)置域名。

ingress.yml kubectl apply -f ingress.yml>

步驟11：安裝CERT-MANAGER：

> >安裝cert-manager（版本v0.9.1）使用提供的命令。監(jiān)視豆莢以確保它們運(yùn)行。 >

這將完成Kubernetes群集設(shè)置。該系列的下一部分將涵蓋安裝kubeflow。

常見問題（常見問題解答）：

> FAQS部分為有關(guān)本地Kubernetes設(shè)置的常見問題提供了全面的答案，涵蓋了收益，與基於雲(yún)的解決方案，挑戰(zhàn)，安全考慮，遷移策略，硬件需求，縮放，Kubernetes操作員，機(jī)器學(xué)習(xí)工作量和機(jī)器學(xué)習(xí)工作和機(jī)器學(xué)習(xí)工作和機(jī)器學(xué)習(xí)工作和機(jī)器學(xué)習(xí)工作，並進(jìn)行比較績效監(jiān)控。

以上是機(jī)器學(xué)習(xí)管道：設(shè)置本地kubernetes的詳細(xì)內(nèi)容。更多資訊請關(guān)注PHP中文網(wǎng)其他相關(guān)文章！

本網(wǎng)站聲明

本文內(nèi)容由網(wǎng)友自願(yuàn)投稿，版權(quán)歸原作者所有。本站不承擔(dān)相應(yīng)的法律責(zé)任。如發(fā)現(xiàn)涉嫌抄襲或侵權(quán)的內(nèi)容，請聯(lián)絡(luò)admin@php.cn