سپیډر او ویب کرالر: د ویب پاڼې ډاټا د محافظت په اړه پوهیږي
مکډر، چې د "ویب کریلر" په نوم هم یادیږي ویب په لټون کوي او ټول د دوی په اراده کې دوستانه ندي.
د معلوماتو راټولو لپاره د سپیمر سپیور ویب پاڼې
ګوګل، یاهو!
او نور د لټون انجنونه یوازینی هغه نه دي چې د ویب پاڼې د کرولو لپاره لیوالتیا لري - نو همداسې سکیمرونه او سپیمان دي.
سپیډر او نور اتوماتیک وسايل د سپیمر لخوا کارول کیږي ترڅو د بریښنالیک پتې پیدا کړي (په انټرنیټ کې دا تمرین اکثرا د ویب پاڼې په اړه د "حاصلاتو" په نوم یادېږي) او بیا یې د سپیم لیستونو جوړولو لپاره کاروي.
سپیډر هغه وسیله هم دي چې د پلټنې انجنونو لخوا د خپلې ویب پاڼې په اړه نور معلومات ترلاسه کولو لپاره کارول کیږي مګر بې ځایه شوي، یو ویب پاڼه پرته لارښوونې) یا 'اجازه اجازه' (ستاسو سایټ څنګه کولی شي د معلوماتو مهم امنیتي خطرونه وړاندې کړي. مکډر د لاندې لینکونو سفر کوي، او دوی د ډاټابیسزونو، د پروګرام فایلونو، او نورو معلوماتو سره د اړیکو موندلو په برخه کې ډیر اخته دي چې تاسو یې نه غواړئ دوی لاسرسی ولري.
ویب ماسټر کولی شي د کتلو لید وګوري ترڅو وګورئ چې مکڑیان او نور روبوټونه د دوی ځایونو څخه لیدلي دي. دا معلومات د ویب ماسټرانو سره مرسته کوي چې پوهیږي چې څوک د دوی سایټ لیکي، او څو ځله.
دا معلومات ګټور دي ځکه چې دا ویب پاڼې ماینونو ته اجازه ورکوي چې د دوی SEO دقیقه کړي او د Robot.txt فایلونو تازه کولو لپاره ځینې ځانګړي روبوټونه په راتلونکي کې د دوی ساحې له کاره کولو څخه منع کړي.
د ناپاکو روبوټ کرالرانو څخه ستاسو د ویب پاڼې محافظت لپاره لارښوونې
ستاسو د ویب پاڼې څخه ناپیل شوي کریلرانو د ساتلو لپاره یوه ساده لاره ده. حتی که تاسو د ناوړه ګړندیو په اړه اندیښنه نه لرئ ستاسو سایټ کښته کول) د بریښناليک بریښناليک پته به ستاسو د ډیری کرالرونو څخه خوندي نه وي (، تاسو باید لاهم د مهمو لارښوونو سره د لټون انجنونو ته اړتیا ولرئ.
ټولې ویب پاڼې باید د ریډ ډیری ډبرو کې یوه فایل ولري چې د robots.txt فایل نومېږي. دا فايل تاسو ته اجازه درکوي چې د ويب کالوونکي لارښوونه وکړي چيرې چې تاسو غواړئ چې د پاڼو پاڼې وګورئ (مګر که چېرې د بلې پاڼې د مټ ډاټا ته د نښې په نښه شوي نه وي) که چېرې دا د پلټنې انجن وي، بيان کړي.
لکه څنګه چې تاسو کولی شئ د کرالرانو غوښتنه وکړئ چې تاسو یې غواړئ د دوی د کتلو لپاره غواړئ، تاسو کولی شئ دوی ته ووایاست چې دوی نه ځي او حتی مشخص کریلران له خپل ټول ویب پاڼې څخه بند کړي.
دا خورا مهمه ده چې په پام کې ونیول شي چې د روبوټ.txt فایل سره یوځای کېدل د لټون انجنونو لپاره خورا ارزښت لري او کیدای شي د خپل ویب پاڼې فعالیت کې ښه کولو کې مهم عنصر وي، مګر د ځینو روبوډ کریالرونه به ستاسې لارښوونه له پامه غورځوي. د دې دلیل لپاره، دا مهمه ده چې ستاسو ټولو سافټویرونو، انټرنیټونو او ایپسونو په هر وخت کې وساتئ.
اړونده مقالې او معلومات
د معلوماتو زیاتوالي له امله چې د ناپوهانو (سپیم) موخو لپاره کارول کیږي، په 2003 کې قانون تصویب شو چې ځینو ځانګړو کړنو غیرقانوني کړي. د مراجعینو محافظت قوانین د 2003 کال د CAN-SPAM قانون الندې راځي.
دا مهمه ده چې تاسو د CAN-SPAM قانون په لوستلو کې وخت ونیسئ که چیرې ستاسو سوداګرۍ په هره ډله ایزو پوستونو یا د معلوماتو راټولولو کې برخه واخلي.
تاسو کولی شئ د سپیم ضد قوانینو په اړه نور معلومات ومومئ او د سپیمر سره څنګه معامله وکړئ، او د لاندې مقالو مطالع کولو له الرې تاسو د سوداګرۍ مالکیت نه ترسره کولی شئ:
- CAN-SPAM Act 2003
- CAN-SPAM د غیر انتفاعي موسسو لپاره مقررات
- 5 CAN-SPAM قوانین د کوچنیو سوداګریزو مالکینو پوهیدلو ته اړتیا لري