ডেটা সূত্র ও পদ্ধতি
এই পৃষ্ঠা যারা যাচাই করতে চান সার্চ ইনডেক্স কীভাবে তৈরি — অডিটর, সাংবাদিক বা কৌতূহলী ব্যবহারকারীদের জন্য। আপস্ট্রিম পিডিএফ, ইনজেশন পাইপলাইন ও পরিচিত সীমা বর্ণনা করা হয়েছে। কে চালায় দেখতে পরিচিতি; আইনি দাবিত্যাগের জন্য দাবিত্যাগ।
প্রাথমিক আপস্ট্রিম উৎস
প্রতিটি ইনডেক্স করা নম্বর গ্রামীণফোনের প্রকাশ্য লিঙ্ক করা রিসাইকেল / স্থায়ীভাবে নিষ্ক্রিয় নম্বর পিডিএফ নোটিশ থেকে আসে। বাংলাদেশে নম্বরিংয়ের নিয়ন্ত্রক হিসেবে বিটিআরসিও উল্লেখ করি। তৃতীয় পক্ষের রিসেলার তালিকা বা ক্রাউডসোর্স স্প্রেডশিট ব্যবহার করি না।
আবিষ্কার ও পার্সিং
স্ক্র্যাপার গ্রামীণফোনের রিসাইকেল পৃষ্ঠা লোড করে প্রতিটি লিঙ্ক করা পিডিএফ সংগ্রহ করে। প্রতিটি ফাইল ডাউনলোড, হ্যাশ ও মোবাইল নম্বর পার্স করা হয়। সংরক্ষণের আগে নম্বর ক্যানোনিক্যাল 01XXXXXXXXX ফরম্যাটে নর্মালাইজ করা হয়। সিডিএন বা ইউআরএল প্যাটার্ন বদলালে আবিষ্কার অ্যাঙ্কর-ভিত্তিক (সেই পৃষ্ঠার যেকোনো .pdf লিঙ্ক) যাতে হার্ডকোডেড ফাইলনামের উপর নির্ভর না করি।
ডিডুপ্লিকেশন ও ইডেমপোটেন্ট আপডেট
একই পিডিএফ আবার প্রক্রিয়া করলে কোনো নম্বর কতবার "দেখা" গেছে তা বাড়ানো উচিত নয়। নোটিশ আবার পড়লে সেই নোটিশের অবদান প্রতিস্থাপন করি, ডুপ্লিকেট যোগ করি না। প্রতিটি নম্বরের কাছে উৎস নোটিশের কাঠামোগত তালিকা (পিডিএফ আইডি, প্রকাশনার তারিখ, ইউআরএল) থাকে যাতে ফলাফল অফিসিয়াল ফাইলে অডিট করা যায়।
পরিবর্তন সনাক্তকরণ ও সিঙ্ক সময়সূচি
পিডিএফ আবার ডাউনলোডের আগে HTTP ভ্যালিডেটর (ETag, Last-Modified, Content-Length) তুলনা করি এবং ফাইল বডির SHA-256-এ পড়ি। অপরিবর্তিত ফাইল স্কিপ। নির্ধারিত জব প্রতিদিন গ্রামীণফোনের পৃষ্ঠা আবার চেক করে; নতুন বা আপডেট পিডিএফ স্বয়ংক্রিয়ভাবে ইনজেস্ট। সার্চ ফলাফলে তারিখ স্ক্র্যাপ সময় নয়, নোটিশ প্রকাশনার তারিখ দেখায়।
আমরা কী ইনডেক্স করি না
রবি, বাংলালিংক, টেলিটক ও পুরোনো এয়ারটেল রেঞ্জ সমতুল্য পাবলিক রিসাইকেল তালিকা না থাকা পর্যন্ত স্কোপের বাইরে। রিয়েল-টাইম প্রাপ্যতা, সিম নিবন্ধন (এনআইডি) স্ট্যাটাস ও পোর্টিং ইতিহাস অপারেটর-অভ্যন্তরীণ — কোনো পাবলিক পিডিএফ তালিকাভুক্ত করে না। এই ইনডেক্স শুধু জিপি রিসাইকেল নোটিশের উপর সার্চ স্তর।
অনুপস্থিত বা ভুল ডেটা জানান
গ্রামীণফোন নোটিশ প্রকাশ করেছে কিন্তু আমাদের ইনডেক্সে নেই, বা ফলাফল পিডিএফের সাথে মিলছে না — adnansiddiqui.dev@gmail.com-এ নোটিশ তারিখ বা ইউআরএলসহ ইমেইল করুন। আপস্ট্রিম সংশোধন আমরা বাগ হিসেবে দেখি।