Blank white background with no objects or features visible.

تحية إلى منطقة أوروبا والشرق الأوسط وأفريقيا! توسع TrueFoundry نطاق حضورها في هذه المنطقة الحيوية. اقرأ المزيد ←

تكاملات أدوات تعلم الآلة #2: DVC لإدارة إصدارات البيانات

By TrueFoundry

Updated: November 3, 2026

Published: July 2, 2026

تُعد إدارة إصدارات البيانات (DVC) أداة قوية لإدارة وإصدار مجموعات البيانات الكبيرة والنماذج في مشاريع تعلم الآلة (ML).

تُعتبر DVC أداة مفتوحة المصدر تعمل مع مجموعة واسعة من خيارات التخزين، بما في ذلك القرص المحلي، وأنظمة ملفات الشبكة، وAmazon S3، وGoogle Cloud Storage، وغيرها الكثير. يمكن استخدام DVC جنبًا إلى جنب مع أطر عمل تعلم الآلة الشهيرة مثل TensorFlow وPyTorch وscikit-learn.

بالإضافة إلى تتبع التغييرات في البيانات والنماذج، يمكن لـ DVC أيضًا مساعدة المستخدمين في إدارة التبعيات بين المكونات المختلفة لمشروع تعلم الآلة، مثل الكود والبيانات والنماذج. ومن خلال تتبع هذه التبعيات، تجعل DVC من السهل إعادة إنتاج تجارب تعلم الآلة ومشاركة المشاريع مع الآخرين.

تحديات التحكم بالإصدارات في تعلم الآلة

يُعد التحكم بالإصدارات في تعلم الآلة مهمة أكثر صعوبة مقارنة بهندسة البرمجيات للأسباب التالية:

  1. مجموعات بيانات ضخمة ومعقدة: في تعلم الآلة، يمكن أن تكون مجموعات البيانات المستخدمة لتدريب النماذج واختبارها ضخمة جدًا، مما يجعل إدارتها وإصدارها أمرًا ينطوي على تحديات. بالإضافة إلى ذلك، قد تكون البيانات غير مهيكلة، مما يصعّب تتبع التغييرات التي تطرأ عليها بمرور الوقت.
  2. مكونات متعددة: غالبًا ما تتضمن مشاريع تعلم الآلة مكونات متعددة، بما في ذلك البيانات والكود والنماذج، مما يجعل من الصعب تتبع التغييرات في كل مكون وكيفية تفاعلها مع بعضها البعض.
  3. عملية تطوير تكرارية: تكون عملية التطوير في تعلم الآلة تكرارية في كثير من الأحيان، حيث يقوم المطورون بتحديث النماذج باستمرار بناءً على بيانات جديدة أو لتحسين دقة النموذج. وقد تكون إدارة هذه التغييرات والإصدارات معقدة وتستغرق وقتًا طويلاً.

تُعالج DVC هذه المشكلات عن طريق توفير طريقة بسيطة وفعالة للتحكم بإصدارات كل من البيانات والنماذج في مشاريع تعلم الآلة. تُمكنك DVC من التحكم بإصدارات الكود ليس فحسب، بل وأيضًا البيانات والنماذج، وتتبع العلاقات بينها. مع DVC، يمكنك بسهولة إعادة إنتاج التجارب السابقة، والتعاون مع أعضاء الفريق، وأتمتة مسارات العمل لتبسيط عملية التطوير.

تثبيت وإعداد أنظمة التحكم بالإصدارات

للتحكم بـ DVC والبدء باستخدامه، تحتاج إلى تثبيته وإعداده على جهازك المحلي. في هذا القسم، سنقدم تعليمات خطوة بخطوة حول كيفية القيام بذلك، بما في ذلك كيفية تكوين DVC للعمل مع خدمات التخزين السحابي المختلفة وكيفية إنشاء مشروع DVC جديد.

  1. تثبيت DVC: الخطوة الأولى هي تثبيت DVC على جهازك المحلي. يمكنك القيام بذلك عن طريق اتباع تعليمات التثبيت الخاصة بنظام التشغيل لديك على موقع DVC الإلكتروني.
  2. إنشاء مشروع DVC جديد: بمجرد تثبيت DVC، يمكنك إنشاء مشروع DVC جديد عن طريق تشغيل الأمر التالي في موجه الأوامر (terminal):

dvc init

سيؤدي هذا إلى إنشاء مشروع DVC جديد في مجلدك الحالي.

  1. تكوين DVC للعمل مع التخزين السحابي: إذا كنت ترغب في استخدام DVC مع خدمات التخزين السحابي مثل Amazon S3 أو Google Cloud Storage، فأنت بحاجة إلى تكوين DVC للعمل مع هذه الخدمات. يمكنك القيام بذلك عن طريق إضافة وحدات تخزين بعيدة (remote) جديدة باستخدام الأمر التالي:

dvc remote add -d <remote-name> <storage-url>

على سبيل المثال، إذا كنت تريد إضافة وحدة تخزين بعيدة في Amazon S3 باسم "my-s3-remote"، يمكنك تشغيل الأمر التالي:

dvc remote add -d my-s3-remote s3://my-bucket-name

سيؤدي هذا إلى إضافة وحدة تخزين بعيدة جديدة إلى مشروع DVC الخاص بك مُهيأة للعمل مع Amazon S3.

  1. إضافة البيانات إلى مشروع DVC الخاص بك: بمجرد إعداد مشروع DVC وتكوينه للعمل مع التخزين السحابي، يمكنك البدء في إضافة البيانات إليه. يمكنك القيام بذلك عن طريق تشغيل الأمر التالي:

dvc add <path-to-data-file>

سيؤدي هذا إلى إضافة ملف البيانات إلى مشروع DVC الخاص بك وإنشاء ملف DVC مقابل يتتبع التغييرات في البيانات.

  1. رفع التغييرات إلى التخزين البعيد: إذا قمت بتكوين مشروع DVC للعمل مع تخزين بعيد، يمكنك دفع (push) التغييرات إلى هذا التخزين عن طريق تشغيل الأمر التالي:

dvc push

سيؤدي هذا إلى رفع أي تغييرات قمت بإجرائها على بياناتك أو نماذجك إلى التخزين البعيد.

تنفيذ أوامر DVC لتحسين التحكم بالإصدارات

توفر DVC عددًا من الأوامر المفيدة لإدارة مشاريع تعلم الآلة وإصدارها. فيما يلي قائمة ببعض أوامر DVC الأكثر استخدامًا:

  1. dvc init: يقوم بتهيئة مشروع DVC جديد في المجلد الحالي.
  2. dvc add <path-to-file>: يضيف ملفًا إلى DVC وينشئ ملف DVC مقابل لتتبع التغييرات في الملف.
  3. dvc run: يشغّل أمرًا أو برنامجًا نصيًا مع تمكين تتبع DVC، بحيث يتم تتبع أي مدخلات ومخرجات بواسطة DVC.
  4. dvc repro: يعيد إنتاج أمر أو برنامج نصي مُتتبع بواسطة DVC، مما يضمن أن جميع التبعيات محدثة.
  5. dvc push: يرفع جميع ملفات البيانات وملفات النماذج إلى التخزين البعيد، مثل AWS S3 أو Google Cloud Storage.
  6. dvc pull: يسحب جميع ملفات البيانات وملفات النماذج من التخزين البعيد إلى الجهاز المحلي.
  7. dvc status: يعرض حالة الملفات المُتتبعة، بما في ذلك ما إذا تم تعديلها أو إضافتها أو حذفها.
  8. dvc log: يعرض قائمة بجميع إصدارات الملف، إلى جانب رسائل التثبيت (commit) المقابلة والبيانات الوصفية الأخرى.

إعادة إنتاج تجارب ML باستخدام DVC

تُعد القدرة على إعادة إنتاج تجارب تعلم الآلة واحدة من أهم مزايا استخدام DVC. باستخدام DVC، يمكنك تحديد وتتبع التبعيات بين الكود والبيانات والنماذج لديك، واستخدام الأمر dvc repro لإعادة إنتاج التجارب السابقة.

سير عمل نموذجي:
إليك مثال لسير عمل ينطبق على مجموعة بيانات sklearn iris باستخدام ملف yaml.:

  1. أولاً، قم بتهيئة مشروع DVC جديد عن طريق تشغيل الأمر dvc init.
  2. أنشئ مجلد data في مجلد مشروعك لتخزين مجموعة البيانات، وقم بتنزيل مجموعة بيانات sklearn iris في هذا المجلد.
  3. أضف ملفات البيانات إلى DVC باستخدام الأمر dvc add. على سبيل المثال: dvc add data/iris.csv.
  4. أنشئ ملف .yaml لتحديد خط الأنابيب (pipeline). على سبيل المثال، iris.yaml. سيحتوي هذا الملف على أوامر المعالجة المسبقة، والتدريب، وتقييم النموذج.
  5. حدد الخطوات في ملف .yaml باستخدام أوامر DVC. على سبيل المثال:

stages:
 preprocess:
   cmd: python preprocess.py data/iris.csv data/preprocessed.csv
   deps:
     - data/iris.csv
   outs:
     - data/preprocessed.csv

 train:
   cmd: python train.py data/preprocessed.csv models/model.pkl
   deps:
     - data/preprocessed.csv
   outs:
     - models/model.pkl

 evaluate:
   cmd: python evaluate.py models/model.pkl data/iris.csv
   deps:
     - models/model.pkl
     - data/iris.csv

  1. قم بتشغيل خط الأنابيب (pipeline) باستخدام الأمر dvc repro. سيقوم هذا الأمر بتشغيل الخطوات المحددة في ملف .yaml بالترتيب الصحيح، مما يضمن أن جميع التبعيات محدثة. على سبيل المثال: dvc repro iris.yaml.

من خلال تحديد خط الأنابيب الخاص بك في ملف .yaml واستخدام الأمر dvc repro، يمكنك بسهولة إعادة إنتاج تجاربك، وتتبع إصدارات بياناتك ونماذجك، والتعاون مع أعضاء الفريق في مشروع تعلم الآلة الخاص بك.

فيما يلي مثال لسير العمل:

  1. إعداد الاعتمادات المناسبة ومعلومات نقطة النهاية (endpoint) لخادم S3:

dvc remote add -d s3remote s3://your-s3-bucket-name/path/to/models

  1. سحب ملفات النموذج المطلوبة من خادم S3 إلى الجهاز المحلي:

dvc pull -r s3remote path/to/models/model.pkl

  1. نسخ ملفات النموذج المُنزلَة إلى الخادم البعيد المستهدف:

scp path/to/models/model.pkl user@target-remote-server:/path/to/models/

  1. استخدام الملفات المنسوخة للاستدلال (inference) على الخادم البعيد المستهدف:

# Load the model
import pickle
with open('/path/to/models/model.pkl', 'rb') as f:
   model = pickle.load(f)

# Make predictions
X_test = [[5.1, 3.5, 1.4, 0.2], [7.7, 3.0, 6.1, 2.3], [6.0, 3.0, 4.8, 1.8]]
y_pred = model.predict(X_test)
print(y_pred)

يفترض سير العمل هذا أنك قمت بإعداد الاعتمادات ومعلومات نقطة النهاية اللازمة لخادم S3، وأن لديك إمكانية الوصول إلى كل من الخادم المحلي والخادم البعيد المستهدف. يمكنك تعديل سير العمل بناءً على احتياجاتك وإعداداتك الخاصة.

كيف يتكامل TrueFoundry مع DVC:

يتكامل TrueFoundry بسلاسة مع DVC Model Registry للسماح لك بنشر النماذج المسجلة في DVC على عنقود Kubernetes الخاص بك باستخدام TrueFoundry.

📌

بصرف النظر عن استخدام DVC لإدارة النماذج وتتبع التجارب، يمكنك أيضًا استخدام MLFoundry من TrueFoundry لتتبع التجارب.

الخطوة 1 - التثبيت والإعداد:

  • إعداد DVC

# Install DVC and S3 support
pip install dvc dvc-s3

# Initialize Git in the local directory
git init

# Initilize DVC in the local directory
dvc init

# Set DVC remote storage as your bucket
dvc remote add s3://<your_bucket_name>

ملاحظة: سيتعين عليك تكوين s3 cli الخاص بك لكي يعمل هذا

  • استيراد dvc

import dvc

x

  • تثبيت servicefoundry

pip install -U "servicefoundry"

  • تسجيل الدخول إلى truefoundry

sfy login

الخطوة 2 - تدريب النموذج وتسجيله:

سنقوم بتدريب نموذج ML الخاص بنا وحفظه كملف joblib
ثم سنضيف النموذج ومقاييس التقييم باستخدام **`dvc add`**
ثم سنرفع ملف joblib الخاص بنا إلى dvc عبر **`dvc push`**

from sklearn.datasets import load_iris
from sklearn.model_selection import train_test_split
from sklearn.linear_model import LogisticRegression
from sklearn.metrics import classification_report
import joblib
import os

# Load and preprocess the data
X, y = load_iris(as_frame=True, return_X_y=True)
X = X.rename(columns={
       "sepal length (cm)": "sepal_length",
       "sepal width (cm)": "sepal_width",
       "petal length (cm)": "petal_length",
       "petal width (cm)": "petal_width",
})

X_train, X_test, y_train, y_test = train_test_split(
   X, y, test_size=0.2, random_state=42, stratify=y
)

# Initialize the model
clf = LogisticRegression(solver="liblinear")

# Fit the model
clf.fit(X_train, y_train)

# Evaluate the model
preds = clf.predict(X_test)

# Save the model using joblib and DVC
joblib.dump(clf, "model.joblib")
os.system("dvc add model.joblib")

# Log the evaluation metrics
report = classification_report(y_test, preds, output_dict=True)
with open("classification_report.txt", "w") as f:
   f.write(str(report))

# Push the model and evaluation metrics to the remote storage
os.system("dvc push")

الخطوة 3 - إنشاء تطبيق استدلال وملف التبعيات:

سيتعين علينا إنشاء ملفين للنشر على truefoundry، ملف app.py يحتوي على كود التطبيق الخاص بنا، وملف requirements.txt يحتوي على تبعياتنا.

.
├── app.py
├── deploy.py
└── requirements.txt

  • app.py:

import os
import joblib
import pandas as pd
from fastapi import FastAPI

# Retrieve the model from S3 using DVC
os.system("dvc pull model.joblib.dvc")

# Load the model
model = joblib.load("model.joblib")

# Load the model
app = FastAPI()

@app.post("/predict")
def predict(
   sepal_length: float, sepal_width: float, petal_length: float, petal_width: float
):
   data = dict(
       sepal_length=sepal_length,
       sepal_width=sepal_width,
       petal_length=petal_length,
       petal_width=petal_width,
   )
   prediction = int(model.predict(pd.DataFrame([data]))[0])
   return {"prediction": prediction}

  • requirements.txt:

fastapi
pandas
joblib
dvc

الخطوة 4 - استخدام Python SDK الخاص بـ truefoundry وتكوين النشر

  • deploy.py:

import argparse
import logging
from servicefoundry import Build, PythonBuild, Service, Resources, Port

# Setup the logger
logging.basicConfig(level=logging.INFO)

# Setup the argument parser
parser = argparse.ArgumentParser()
parser.add_argument("--workspace_fqn", required=True, type=str)
args = parser.parse_args()

service = Service(
   name="fastapi",
   image=Build(
       build_spec=PythonBuild(
           command="uvicorn app:app --port 8000 --host 0.0.0.0",
           requirements_path="requirements.txt",
       )
   ),
   ports=[
       Port(
           port=8000,
           host="ml-deploy-aditya-ws-8000.demo.truefoundry.com",
       )
   ],
   resources=Resources(
       cpu_request=0.25,
       cpu_limit=0.5,
       memory_request=200,
       memory_limit=400,
       ephemeral_storage_request=200,
       ephemeral_storage_limit=400,
   ),
)
service.deploy(workspace_fqn=args.workspace_fqn)

الخطوة 5 - نشر خدمتك عبر Truefoundry

قم بتشغيل الأمر التالي وتمرير

  • Workspace FQN: الذي يمكنك العثور عليه في لوحة التحكم

python deploy.py --workspace_fqn your_workspace_fqn

وهكذا انتهينا!!! في السجلات يمكنك العثور على لوحة تحكم الخدمة المنشورة الخاصة بك. ثم في الزاوية اليمنى العليا ستجد نقطة النهاية (endpoint) للتطبيقات المنشورة.

TrueFoundry هي منصة كخدمة (PaaS) لنشر ML عبر Kubernetes لتسريع مسارات عمل المطورين مع منحهم المرونة الكاملة في اختبار النماذج ونشرها، مع ضمان الأمان والتحكم الكلي لفريق البنية التحتية. من خلال منصتنا، نمكّن فرق تعلم الآلة من نشر ومراقبة النماذج في 15 دقيقة بموثوقية 100٪، وقابلية توسع، والقدرة على التراجع في ثوانٍ - مما يتيح لهم توفير التكاليف وإطلاق النماذج إلى البيئة الإنتاجية بشكل أسرع، وتحقيق قيمة عمل حقيقية.  

Try now.

One gateway for all your models, MCP servers, and agents. No credit card needed.

Start free
Table of Contents

One Gateway for Every LLM, Agent and MCP Server

Book a 30-min with our AI expert

Book a Demo

The fastest way to build, govern and scale your AI

Book Demo
Summarize with
ChatGPT logo by OpenAI
Perplexity AI logo
Blurry red snowflake on white background, symmetrical frosty design with soft edges and abstract shape.

Discover More

November 5, 2025
|
5 min read

إقامة البيانات في عصر الذكاء الاصطناعي الوكيل: كيف تُمكّن بوابات الذكاء الاصطناعي من تحقيق التوسع السيادي والامتثال

October 5, 2023
|
5 min read

<Webinar> عرض الذكاء الاصطناعي التوليدي للمؤسسات

Best Fine Tuning Tools for Model Training
May 3, 2024
|
5 min read

أفضل 6 أدوات ضبط دقيق (Fine-Tuning) لتدريب النماذج في عام 2026

May 25, 2023
|
5 min read

نماذج LLMs المفتوحة المصدر: تبنّها أو واجه اندثار أعمالك

Guide to Langgraph vs Langchain
November 16, 2026
|
5 min read

مقارنة بين LangChain وLangGraph: أيهما الأفضل لك؟

مقارنة
A detailed guide on Claude Fable 5
November 16, 2026
|
5 min read

كلود فيبل 5: واجهة برمجة التطبيقات، المعايير، التسعير وكيفية استخدامه

الهندسة والمنتج
openrouter vs litellm
November 16, 2026
|
5 min read

LiteLLM مقابل OpenRouter: أيهما الأنسب لك؟

مقارنة
November 16, 2026
|
5 min read

معمارية المحول في نماذج اللغة الكبيرة

مصطلحات LLM
No items found.

Recent Blogs

Black left pointing arrow symbol on white background, directional indicator.
Black left pointing arrow symbol on white background, directional indicator.
Take a quick product tour
Start Product Tour
Product Tour