- ليس كل ما يشبه التكرار تكرارًا. التطابق بالبصمة (Hash) يثبت أن الملفين متطابقان بايتًا ببايت، فيُبقى أحدهما آليًا. التشابه في المحتوى يشير إلى إصدارات أو صيغ مختلفة للوثيقة نفسها، وقراره لمالك الوثائق. وتشابه الاسم وحده دليل ضعيف لا يُبنى عليه دمج.
- لا يُحذف مكرر دون أثر. تُبقى نسخة مرجعية واحدة، وتُسجل مواقع النسخ الأخرى وسياقاتها في بطاقتها، ويأخذ الملف المُبقى أشد تصنيف سرية بين نسخه ما لم يقرر المالك غير ذلك.
- الملفات التالفة والمحمية والمراجع المكسورة ليست أخطاء تُتجاوز، بل فئات لكل منها مسار معالجة ومسؤول قرار.
- كل ملف في المصدر يجب أن ينتهي إلى مصير واحد معروف: منقول، أو مدموج في نسخة مرجعية، أو مستبعد بسبب موثق، أو معلق بمالك وموعد. ولا تُغلق الموجة قبل أن يتساوى مجموع هذه الفئات مع عدد ملفات المصدر.
هذه المقالة لمدير تقنية المعلومات أو قائد فريق الترحيل الذي يستعد لنقل أرشيف من مجلدات مشتركة أو نظام قديم، ويريد قواعد مكتوبة قبل أن يبدأ النقل، لا قرارات فردية على كل ملف. تغطي كشف التكرار بأنواعه، وشجرة قرار للملف المكرر، واختيار النسخة المرجعية، ومعالجة الملفات التالفة والمراجع المكسورة، وسجل الاستثناءات الذي يجمعها. أما مراحل النقل من المجلدات نفسها فتشرحها مقالة نقل الملفات من المجلدات المشتركة إلى نظام الأرشفة.
أربعة أنواع من «التكرار»، ولكل منها طريقة كشف
أول خطأ في معالجة التكرار أن يُعامل كظاهرة واحدة. تقرير «الملفات المكررة» الذي يخرجه فريق تقنية المعلومات من الخادم يخلط غالبًا بين أربعة أشياء مختلفة في طبيعتها وفي القرار المناسب لها:
| النوع | مثاله | طريقة الكشف | من يقرر |
|---|---|---|---|
| تطابق تام | العقد نفسه محفوظ في مجلد المشتريات والمالية والشؤون القانونية | تجميع الملفات متساوية الحجم، ثم حساب بصمة المحتوى لكل منها (SHA-256 مثلًا)، ومطابقة البصمات | قاعدة آلية، مع مراجعة السياقات المختلفة |
| المحتوى نفسه بوعاء مختلف | الخطاب نفسه ممسوح مرتين، أو محفوظ PDF وصورة، أو مرفق بريد استُخرج وحُفظ ثانية | مقارنة النص المستخرج أو بصمة الصورة، مع البيانات الوصفية كالتاريخ والطرف والرقم | مسؤول الوثائق بقاعدة معتمدة، وعينة يراجعها |
| نسخ متقاربة | «العقد - نهائي» و«العقد - نهائي معدل» و«العقد v3» | تشابه النص مع اختلافه، وتشابه الأسماء، وتقارب تواريخ التعديل | مالك الوثيقة في الإدارة، لأنها إصدارات لا تكرار |
| تطابق الاسم فقط | «تقرير شهري.xlsx» في مجلدات عشر إدارات | يظهر عند تجميع الأسماء، وتنفيه البصمة المختلفة | لا قرار دمج. يُنقل كل ملف بسياقه، وتعالج قاعدة التسمية التشابه |
ويضاف بعد زمني يُنسى كثيرًا: التكرار عبر الموجات. الملف الذي نُقل في موجة المشتريات قد يظهر مرة أخرى في موجة المالية. لذلك يُقارن كل ملف في الموجة الجديدة ببصمات ما نُقل قبلها إلى النظام، لا بملفات الموجة وحدها. وهنا تفيد قدرة النظام على اكتشاف الملفات المتطابقة عند الرفع وبعده، وعرض قائمة حالات الاشتباه للمراجعة.
تنبيه: احسب البصمات على نسخة ثابتة من المصدر (لقطة) أو بعد إيقاف الكتابة فيه، واحفظها في جدول الحصر. البصمة نفسها ستُستخدم لاحقًا في مطابقة ما نُقل، فإن تغير الملف بين الحساب والنقل ظهر فرق لا تعرف سببه.
شجرة القرار: ماذا تفعل بالملف المكرر؟
الهدف من الشجرة أن يصل كل ملف مشتبه به إلى قرار بقاعدة مكتوبة، وأن يُرفع إلى إنسان ما يحتاج حكمًا فقط. اعتمدها مع مسؤول الوثائق قبل الترحيل التجريبي، ثم طبقها على العينة وعدّلها.
- نعم
هل تختلف النسخ في السياق: الإدارة، أو نوع الوثيقة، أو مستوى السرية؟
- لادمج آلي: تُبقى نسخة مرجعية واحدة، وتُسجل مواقع البقية في بطاقتها
- نعمملف واحد بعدة سياقات: يُربط بكل ملف مجمع ينتمي إليه، ويأخذ أشد تصنيف، ويُرفع اختلاف الصلاحيات إلى المالك
- لا
- لا
هل النص متطابق أو شبه متطابق مع ملف آخر؟
- نعم، بوعاء مختلفيُبقى الأصل الموثق (الموقّع أو الممسوح عن الأصل)، ويُربط به الآخر أو يُستبعد وفق القاعدة
- نعم، بتعديلاتإصدارات محتملة: يرتبها المالك ويحدد المعتمد، أو يقرر أنها وثائق مستقلة
- لاليس تكرارًا: يُنقل بسياقه حتى لو تشابه الاسم
- نعم، بوعاء مختلف
لماذا يأخذ الملف المُبقى أشد تصنيف؟
افترض أن عقدًا محفوظًا في مجلد المشتريات المتاح لكل الإدارة، ونسخته المطابقة في مجلد مقيد لدى الشؤون القانونية. إن أبقيت نسخة المشتريات بصلاحياتها، فقد جعلت وثيقة قررت الشؤون القانونية تقييدها متاحة لإدارة كاملة. وإن أبقيت نسخة الشؤون القانونية بتقييدها، فقد حجبت عن المشتريات عقدًا تعمل عليه. القاعدة الآمنة أن يبدأ الملف بالتصنيف الأشد، ثم يقرر المالك صراحة من يُمنح الاطلاع. والقرار يُسجل، لأن سؤال «لماذا لم يعد فلان يرى هذا العقد؟» سيأتي في أول أسبوع.
أي نسخة تُبقى؟ قواعد اختيار النسخة المرجعية
حين تتطابق البصمة، يصبح المحتوى واحدًا ويبقى سؤال: بيانات أي نسخة تُعتمد؟ المسار، والتاريخ، ومن أنشأها، كلها تختلف بين النسخ. اكتب ترتيب الأولوية قبل النقل، ولا تتركه لإعداد افتراضي في أداة الترحيل:
- نسخة الموقع الرسمي للمالك: العقد في مجلد الشؤون القانونية أولى من نسخته في مجلد موظف. حدد في جدول المطابقة أي موقع هو «مصدر الحقيقة» لكل نوع وثيقة.
- النسخة ذات البيانات الأغنى: إن كان مسار إحداها يحمل الطرف والسنة ورقم المشروع، ومسار الأخرى «مستندات جديدة»، فالأولى تعطي بطاقة فهرسة أكمل.
- أقدم تاريخ إنشاء موثوق: للدلالة على الأصل. واحذر من أن النسخ اليدوي بين المجلدات قد يغير تاريخ الإنشاء، فلا تعتمد على «الأحدث تعديلًا» لاختيار الأصل.
- حفظ الباقي بيانات لا ملفات: تُسجل في بطاقة النسخة المرجعية كل المسارات السابقة وتواريخها. هذا ما يمكّن موظفًا يتذكر «كان في مجلد المشتريات 2021» من الوصول إليه، ويمكّن فريق المطابقة من إثبات أن النسخة المدموجة لم تُفقد.
وتنص طريقة المطابقة في ترحيل الأرشيف الرقمي على المبدأ نفسه: المكررات لا تُحذف دون أثر، وتبقى مواقعها السابقة مسجلة مرجعًا للنسخة المُبقاة.
الملفات التالفة والمحمية وغير القابلة للنقل
«تالف» كلمة واسعة يضع تحتها فريق النقل كل ملف رفضته الأداة. فصّلها إلى فئات، لأن كل فئة لها سبب ومعالجة ومسؤول مختلف:
| الفئة | كيف تُكتشف | المعالجة | قرار الإغلاق بيد |
|---|---|---|---|
| ملف بحجم صفر | حصر آلي بالحجم | يُسجل ويُستبعد، مع البحث عن نسخة سليمة في النسخ الاحتياطية إن كان اسمه يدل على وثيقة مهمة | تقنية المعلومات |
| لا يُفتح أو مبتور | فشل التحقق من سلامة الصيغة أو فشل توليد المعاينة | مقارنة بصمته بين المصدر والهدف: إن كان تالفًا في المصدر، فالبحث في النسخ الاحتياطية الأقدم. وإن تلف أثناء النقل، فإعادة النقل | تقنية المعلومات، ثم المالك إن لم توجد نسخة |
| محمي بكلمة مرور | رسالة الأداة أو فحص خصائص الملف | التواصل مع صاحب الملف أو إدارته لفتحه، ثم نقله دون حماية داخل نظام يضبط الصلاحيات | مالك الوثيقة |
| صيغة قديمة أو غير مشمولة | تصنيف الصيغ في الحصر | نقلها كما هي، أو تحويلها إلى صيغة حفظ مع إبقاء الأصل، أو استبعادها، وفق النطاق | مسؤول الوثائق |
| مسار طويل أو رموز غير مقبولة | فشل القراءة من المصدر رغم سلامة الملف | القراءة بطريقة تتجاوز القيد، أو إعادة تسمية مؤقتة موثقة في المصدر، مع حفظ المسار الأصلي في البطاقة | فريق الترحيل |
| ملف اشتبه به الفحص الأمني | تنبيه برنامج الحماية أثناء القراءة | عزل فوري، ولا يُنقل إلى النظام قبل قرار الأمن السيبراني | الأمن السيبراني |
ولاحظ ما ليس تالفًا: الملف الممسوح الذي فشلت قراءة نصه آليًا نُقل بسلامة، ومشكلته في جودة المسح أو القراءة. هذا يُعالج في قائمة الفهرسة الناقصة أو بإعادة المسح، لا في قائمة التالف. ولو خلطت بينهما، لتضخمت قائمة التالف بملفات سليمة، وتأخر إغلاق الموجة بلا سبب.
المراجع المكسورة: ما يشير إلى مكان لم يعد موجودًا
المراجع لا تظهر في عدّ الملفات، ولهذا تُكتشف بعد الانتقال، حين يضغط موظف على رابط في جدول أو مراسلة فلا يجد شيئًا. احصرها قبل النقل في خمس فئات:
- الاختصارات: ملفات الاختصار في المجلدات التي تشير إلى ملف في مجلد آخر. لا تُنقل بوصفها وثائق. إن كان هدفها قد نُقل، فتتحول إلى علاقة بين الوثيقتين إن كان لها معنى، وإلا تُستبعد. وإن كان هدفها غير موجود أصلًا، فتُسجل للعلم فقط.
- الروابط داخل الوثائق: جدول بيانات يسحب أرقامًا من ملف آخر، أو مستند فيه رابط إلى مسار على الخادم. احصرها بفحص آلي للروابط الخارجية في ملفات المكتب.
- المراجع في أنظمة أخرى: حقل في نظام الموارد البشرية أو النظام المالي يحفظ مسار ملف على الخادم. هذه تُحدَّث عبر التكامل أو بجدول تحويل يستخدمه النظام الآخر.
- العلاقات في النظام القديم: ربط الملحق بعقده، أو الرد بالخطاب الوارد. تُنقل علاقات فقط إذا نُقل طرفاها، وإلا تدخل سجل الاستثناءات.
- المراجع في المراسلات: بريد قديم يقول «الملف في المسار كذا». لا يُعدل البريد، لكن حفظ المسار القديم في بطاقة الوثيقة يجعله قابلًا للبحث.
الأداة المشتركة لكل هذه الفئات جدول تحويل يربط كل مسار أو معرّف قديم برقم الوثيقة في النظام الجديد. يُبنى أثناء النقل آليًا، ويُحفظ بعد الانتقال، ويُستخدم للبحث وللتكاملات ولإعادة توجيه الروابط.
تنبيه: لا تعدّل الروابط داخل وثيقة معتمدة أو موقعة لتشير إلى المكان الجديد. تعديلها يغير الوثيقة التي اعتُمدت، وقد يُضعف قيمتها دليلًا. عالج الرابط بجدول التحويل، واترك نص الوثيقة كما هو. وتفصيل الحفاظ على الروابط بين الأنظمة في مقالة الحفاظ على روابط الوثائق عند تغيير النظام المرتبط.
سجل الاستثناءات: كل ملف له مصير معروف
ما سبق كله يلتقي في سجل واحد. الاستثناء هو أي ملف أو مرجع لم يُنقل بالقاعدة الآلية: مكرر يحتاج قرارًا، أو تالف، أو محمي، أو مرجع مكسور. والسجل ليس قائمة أخطاء تُرسل بالبريد، بل جدول بحقول ثابتة يُدار حتى الإغلاق:
| الحقل | الغرض |
|---|---|
| رقم الاستثناء والموجة | المتابعة، وربط الاستثناء بتقرير مطابقة الموجة |
| المسار الأصلي والبصمة | تحديد الملف بلا لبس، حتى لو تغير اسمه أو موقعه |
| الفئة والسبب | مكرر بسياقات مختلفة، نسخ متقاربة، تالف، محمي، صيغة، مسار، أمني، مرجع مكسور |
| مرحلة الاكتشاف | الحصر، أو الترحيل التجريبي، أو النقل، أو المطابقة. تكرار فئة في مرحلة متأخرة يعني قاعدة تحتاج تعديلًا |
| الإجراء المقترح والمسؤول | من يقرر، بالاسم أو الدور، لا «الإدارة المعنية» |
| القرار وتاريخه | نُقل، أو دُمج، أو استُبعد، أو رُحّل إلى موجة لاحقة، مع من اتخذ القرار |
| الحالة النهائية والدليل | رقم الوثيقة في النظام، أو مرجع محضر الاستبعاد، أو الموجة التي رُحّل إليها |
وقاعدة الإغلاق بسيطة: لا تُغلق الموجة إلا إذا تحققت المعادلة ملفات المصدر = المنقول + المدموج + المستبعد بسبب موثق + المعلق بمالك وموعد، وكانت الفئة الأخيرة معتمدة من المالك. ما يبقى معلقًا يُرحّل إلى الموجة التالية باسمه، لا يُترك «للمعالجة لاحقًا». والملفات المستبعدة لا تُحذف من المصدر بقرار الترحيل، بل تبقى في المصدر للقراءة حتى يُقرر مصيرها عبر مسار الإتلاف المعتمد لدى الجهة.
مثال: موجة إدارة العقود من البداية إلى الإغلاق
مثال توضيحيجهة افتراضية تنقل مجلدات إدارة العقود في موجة واحدة. حصر المصدر وجد 12,640 ملفًا. هذا ما آل إليه كل ملف:
| الفئة | عدد الملفات | التفصيل |
|---|---|---|
| مدموج (تطابق تام) | 1,120 | 470 مجموعة تطابق تضم 1,590 ملفًا: أُبقيت 470 نسخة مرجعية، وسُجلت مواقع 1,120 نسخة في بطاقاتها. منها 38 مجموعة بسياقات مختلفة رُفعت إلى المالك |
| مستبعد: اختصارات | 380 | 290 تشير إلى ملفات نُقلت فتحولت إلى علاقات أو سُجلت في جدول التحويل، و90 تشير إلى أهداف غير موجودة |
| مستبعد: حجم صفر | 23 | لم تُوجد لها نسخ سليمة في النسخ الاحتياطية |
| مستبعد: تالف | 5 | من 14 ملفًا لا يُفتح، استُعيد 9 من النسخ الاحتياطية ونُقلت، وقرر المالك استبعاد 5 |
| معلق | 5 | من 31 ملفًا محميًا بكلمة مرور، فُتح 26 مع أصحابها ونُقلت، و5 رُحّلت إلى الموجة التالية بانتظار موظف في إجازة |
| منقول | 11,107 | منها 212 ملفًا في 85 مجموعة نسخ متقاربة، نُقلت كلها ورتبها المالك إصدارات أو وثائق مستقلة |
لاحظ أن الموجة أُغلقت وفيها خمسة ملفات معلقة. هذا مقبول لأن لكل منها مالكًا وموعدًا وموجة محددة، ولأن المالك وقّع على الترحيل. أما لو كانت الخمسة «غير معروفة المصير»، فالموجة لا تُغلق. وطريقة إعداد تقرير المطابقة الكامل، بالعدادات ومجاميع التحقق والحقول والعينات، في مقالة التحقق من اكتمال الترحيل ومطابقة الملفات.
أخطاء تحوّل التنظيف إلى فقدان
- تنظيف المصدر قبل النقل: حذف المكررات من الخادم «لتخفيف الحمل» يمحو الأثر الذي تحتاجه لإثبات أن شيئًا لم يُفقد، ويحذف سياقات قد تكون مهمة. التنظيف يحدث أثناء النقل وبسجل، والمصدر يبقى للقراءة.
- الدمج بالاسم: ملفان باسم واحد وحجم متقارب ليسا متطابقين. البصمة وحدها تثبت التطابق.
- اختيار «الأحدث» تلقائيًا: في النسخ المتقاربة، الأحدث تعديلًا قد يكون مسودة بعد الاعتماد لا النسخة المعتمدة. القرار للمالك.
- نقل صلاحيات النسخة الأوسع: دمج نسختين بصلاحيات مختلفة دون قرار يفتح وثيقة مقيدة لمن لم يكن يراها.
- خلط فشل القراءة الآلية بالتلف: يضخم قائمة التالف ويؤخر الإغلاق، بينما الملف سليم ويحتاج فهرسة أو إعادة مسح.
- استثناءات بلا مالك: قائمة ترسل إلى «الإدارات» دون اسم ومهلة تبقى مفتوحة بعد انتهاء المشروع.
- تجاهل التكرار عبر الموجات: مقارنة كل موجة بنفسها فقط تعيد إدخال ما نُقل سابقًا.
الخطوة التالية: اعتمد القواعد قبل الترحيل التجريبي
قبل أي نقل، اجمع تقنية المعلومات ومسؤول الوثائق وممثلي الإدارات المالكة، واعتمدوا ثلاث وثائق قصيرة: شجرة قرار التكرار بتفاصيل جهتكم، وجدول فئات التالف بمسؤول كل فئة، وحقول سجل الاستثناءات وقاعدة إغلاق الموجة. ثم طبقوها على عينة الترحيل التجريبي، وعدّلوا ما يلزم قبل النقل الكامل. وتجد موقع معالجة التكرار بين مراحل ترحيل الأرشيف الرقمي، بعد مطابقة الحقول وقبل الترحيل التجريبي.
وإن أردت أن نراجع معكم نتائج الحصر والقواعد المقترحة لمصادركم، فأرسل وصف المصادر وأحجامها، ثم ناقش معنا خطة نقل أرشيفك ومعالجة التكرار والاستثناءات فيها.
أسئلة شائعة
أي خوارزمية بصمة نستخدم؟ وهل تكفي MD5؟
لكشف التكرار داخل أرشيف الجهة تؤدي أغلب الخوارزميات الشائعة الغرض. لكن البصمة ستُستخدم أيضًا دليلًا على سلامة الملف بعد النقل، ولذلك يُفضّل اعتماد خوارزمية حديثة مثل SHA-256 من البداية، وتوحيدها في الحصر والنقل والمطابقة، حتى لا تحسب البصمة مرتين بطريقتين.
هل يستمر كشف التكرار بعد انتهاء الترحيل؟
يجب أن يستمر، وإلا عاد التكرار مع أول أسبوع من الرفع اليدوي. في النظام يُكتشف الملف المتطابق عند الرفع وبعده، وتظهر حالات الاشتباه في قائمة يراجعها مسؤول الأرشيف فيقرر الدمج أو الإبقاء. وقاعدة الترحيل نفسها، أي الإبقاء على نسخة مع تسجيل السياقات، تصلح قاعدة تشغيل بعده.
ماذا نفعل بالبريد المكرر، كرسالة واحدة في صناديق عدة موظفين؟
الرسالة المحفوظة في صناديق المرسل والمستلمين حالة تطابق بسياقات مختلفة. إن كان نطاق الترحيل يشمل البريد، فالقاعدة المعتادة أن تُحفظ الرسالة ومرفقاتها مرة واحدة في ملف الموضوع أو المعاملة، مع تسجيل أطرافها. أما نقل كل صندوق بريد كما هو، فيعيد إنتاج التكرار داخل النظام.
هل يمكن أتمتة قرار النسخ المتقاربة بالذكاء الاصطناعي؟
يمكن أن تساعد الأدوات في تجميع النسخ المتقاربة وترتيبها بالتاريخ وإبراز الفروق بينها، وهذا يختصر وقت المالك كثيرًا. لكن تحديد النسخة المعتمدة قرار إداري، لأن الفرق بين «نهائي» و«نهائي معدل» قد يكون بندًا تفاوض عليه الطرفان. اجعل الأداة تقترح، والمالك يعتمد، والقرار يُسجل.
كم نسبة التكرار المتوقعة في المجلدات المشتركة؟
لا توجد نسبة يمكن افتراضها مسبقًا. تختلف بحسب عادات النسخ في كل إدارة، وعدد السنوات، ووجود مجلدات شخصية ضمن النطاق. احسبها من بيئتكم بحصر البصمات قبل طلب العروض، فهي تؤثر في حجم النقل والتخزين، وفي جهد مراجعة القرارات.