บน Linux ให้ส่งคืนผลลัพธ์จาก exec Man execlp (3): เปิดไฟล์เพื่อดำเนินการ การใช้การเรียกระบบส้อม

1.11.7. ข่าวยอดนิยม การจัดอันดับข่าวของบริการ Yandex ถูกเน้นเป็นบล็อกแยกต่างหากจากตัวบ่งชี้อื่น ๆ ข่าว. เหล่านี้เป็นข่าวที่มีการกล่าวถึงมากที่สุดในบล็อก รายการข่าวยอดนิยมอัพเดททุกๆ 5-10 นาที หากติดตามจากลิงค์.

เครื่องมือติดตามยอดนิยม มีเครื่องมือติดตาม torrent มากมายในโลกที่คุณใช้บริการได้ ต่อไปนี้คือเครื่องมือติดตามที่ได้รับความนิยมมากที่สุด? http://lostfilm.tv เป็นตัวติดตามที่เชี่ยวชาญด้านละครโทรทัศน์ ตามกฎแล้ว การเผยแพร่จะต้องมีการพากย์เสียงและคุณภาพระดับมืออาชีพ

10.2.1. เครื่องมือค้นหาทางอินเทอร์เน็ตประกอบด้วย เป็นจำนวนมากข้อมูล. ท้ายที่สุดแล้ว ใครๆ ก็สามารถสร้างเว็บไซต์บนอินเทอร์เน็ตได้ ดังนั้นจำนวนเว็บไซต์ใหม่จึงเพิ่มขึ้นทุกวัน เครื่องมือค้นหาจะใช้ในการค้นหาทางอินเทอร์เน็ต

แอปพลิเคชันอินเทอร์เน็ตยอดนิยม ICQ (ICQ) ICQ เป็นบริการส่งข้อความโต้ตอบแบบทันทีแบบรวมศูนย์ ผู้ใช้บริการ (นั่นคือคุณ) ทำงานร่วมกับโปรแกรมไคลเอนต์ (ที่เรียกว่า "ผู้ส่งสาร") ข้อความจะถูกส่งทันที นอกจากนี้คุณยังสามารถ

เป็นที่นิยม รายการไปรษณีย์รายชื่อผู้รับจดหมาย Bugtraq รายการนี้กล่าวถึง ช่องโหว่ UNIX, วิธีใช้งานและวิธีปิด จุดประสงค์ไม่ใช่เพื่อสอนวิธีแฮ็กระบบ แต่สอนวิธีค้นหาจุดอ่อน วิธีแบ่งปันข้อมูลเกี่ยวกับระบบ วิธี

คอลเลกชันลิงก์เฉพาะเรื่องคือรายการที่รวบรวมโดยกลุ่มผู้เชี่ยวชาญหรือแม้แต่นักสะสมรายบุคคล บ่อยครั้งที่หัวข้อที่มีความเชี่ยวชาญสูงสามารถครอบคลุมโดยผู้เชี่ยวชาญเพียงคนเดียวได้ดีกว่ากลุ่มพนักงานจากแค็ตตาล็อกขนาดใหญ่ คอลเลกชันเฉพาะเรื่องมีอะไรให้มากมายบนเว็บ ที่อยู่เฉพาะไม่สมเหตุสมผล

การเลือกชื่อโดเมน

แคตตาล็อก - ระบบที่สะดวกค้นหาอย่างไรก็ตามเพื่อไปที่เซิร์ฟเวอร์ ไมโครซอฟต์หรือ IBM การเข้าถึงไดเร็กทอรีนั้นไม่สมเหตุสมผลเลย ชื่อของเว็บไซต์ที่เกี่ยวข้องนั้นไม่ใช่เรื่องยาก: www.microsoft.com, www.ibm.com หรือ www.microsoft.ru, www.ibm.ru เป็นเว็บไซต์ของสำนักงานตัวแทนรัสเซียของบริษัทเหล่านี้

ในทำนองเดียวกัน หากผู้ใช้ต้องการเว็บไซต์เกี่ยวกับสภาพอากาศในโลกโดยเฉพาะ ก็สมเหตุสมผลที่จะค้นหาเว็บไซต์นั้นบนเซิร์ฟเวอร์ www.weather.com ในกรณีส่วนใหญ่ การค้นหาไซต์ด้วยคำสำคัญในชื่อเรื่องจะมีประสิทธิภาพมากกว่าการค้นหาเอกสารที่ใช้คำนั้นในข้อความ หากบริษัทการค้า (หรือโครงการ) ของตะวันตกมีชื่อที่มีพยางค์เดียวและใช้เซิร์ฟเวอร์ของตนบนอินเทอร์เน็ต ชื่อนั้นน่าจะเหมาะกับรูปแบบ www.name.com และสำหรับ Runet (ส่วนอินเทอร์เน็ตของรัสเซีย) - www.name.ru โดยที่ชื่อ-ชื่อบริษัทหรือโครงการ การเลือกที่อยู่สามารถแข่งขันกับวิธีการค้นหาอื่น ๆ ได้สำเร็จเพราะเมื่อใด ระบบที่คล้ายกันค้นหา คุณสามารถสร้างการเชื่อมต่อกับเซิร์ฟเวอร์ที่ไม่ได้ลงทะเบียนกับเครื่องมือค้นหาใดๆ ได้ อย่างไรก็ตาม หากคุณไม่พบชื่อที่ต้องการ คุณจะต้องติดต่อ เครื่องมือค้นหา.

เครื่องมือค้นหา

บอกฉันสิ่งที่คุณกำลังมองหาบนอินเทอร์เน็ตแล้วฉันจะบอกคุณว่าคุณเป็นใคร

หากคอมพิวเตอร์เป็นระบบอัจฉริยะขั้นสูงที่สามารถอธิบายสิ่งที่คุณกำลังมองหาได้อย่างง่ายดาย คอมพิวเตอร์ก็จะสร้างเอกสารสองหรือสามฉบับ ซึ่งเป็นเอกสารที่คุณต้องการอย่างแน่นอน แต่น่าเสียดายที่กรณีนี้ไม่เป็นเช่นนั้น และเพื่อตอบสนองต่อคำขอ ผู้ใช้มักจะได้รับรายการเอกสารจำนวนมาก ซึ่งหลายรายการไม่เกี่ยวข้องกับสิ่งที่เขาถาม เอกสารดังกล่าวเรียกว่าไม่เกี่ยวข้อง (จากภาษาอังกฤษที่เกี่ยวข้อง - เหมาะสม, เกี่ยวข้อง) ดังนั้นเอกสารที่เกี่ยวข้องจึงเป็นเอกสารที่มีข้อมูลที่ต้องการค้นหา แน่นอนว่าเปอร์เซ็นต์ของเอกสารที่เกี่ยวข้องที่ได้รับนั้นขึ้นอยู่กับความสามารถในการตอบแบบสอบถามอย่างถูกต้อง สัดส่วนของเอกสารที่เกี่ยวข้องในรายการเอกสารทั้งหมดที่พบโดยเครื่องมือค้นหาเรียกว่าความแม่นยำในการค้นหา เอกสารที่ไม่เกี่ยวข้องเรียกว่าเสียงรบกวน หากเอกสารที่พบทั้งหมดมีความเกี่ยวข้อง (ไม่มีเสียงรบกวน) ความแม่นยำในการค้นหาคือ 100% หากพบเอกสารที่เกี่ยวข้องทั้งหมด แสดงว่าการค้นหามีความสมบูรณ์ 100%

ดังนั้นคุณภาพของการค้นหาจึงถูกกำหนดโดยพารามิเตอร์สองตัวที่พึ่งพาซึ่งกันและกัน: ความแม่นยำในการค้นหาและความสมบูรณ์ การเพิ่มความสมบูรณ์ในการค้นหาจะลดความแม่นยำ และในทางกลับกัน

เครื่องมือค้นหาทำงานอย่างไร?

เสิร์ชเอ็นจิ้นสามารถเปรียบเทียบได้กับ Help Desk ซึ่งมีตัวแทนไปรอบ ๆ ธุรกิจเพื่อรวบรวมข้อมูลลงในฐานข้อมูล (รูปที่ 4.21) เมื่อคุณติดต่อบริการ ข้อมูลจะถูกดึงมาจากฐานข้อมูลนี้ ข้อมูลในฐานข้อมูลล้าสมัย ดังนั้นตัวแทนจึงอัปเดตข้อมูลเป็นระยะ องค์กรบางแห่งเองก็ส่งข้อมูลเกี่ยวกับตนเองและไม่จำเป็นต้องให้ตัวแทนมาหาพวกเขา กล่าวอีกนัยหนึ่ง โต๊ะช่วยเหลือมีสองฟังก์ชัน: การสร้างและอัปเดตข้อมูลในฐานข้อมูลอย่างต่อเนื่อง และการค้นหาข้อมูลในฐานข้อมูลตามคำขอของลูกค้า

ข้าว. 4.21.

เช่นเดียวกัน, เครื่องมือค้นหาประกอบด้วยสองส่วน: ที่เรียกว่าโรบ็อต (หรือสไปเดอร์) ซึ่งข้ามเว็บเซิร์ฟเวอร์และสร้างฐานข้อมูลเครื่องมือค้นหา

ฐานของหุ่นยนต์ส่วนใหญ่สร้างขึ้นโดยตัวมันเอง (หุ่นยนต์จะค้นหาลิงก์ไปยังแหล่งข้อมูลใหม่) และในระดับที่น้อยกว่านั้นโดยเจ้าของทรัพยากรที่ลงทะเบียนไซต์ของตนในเครื่องมือค้นหา นอกจากหุ่นยนต์ (ตัวแทนเครือข่าย สไปเดอร์ เวิร์ม) ที่สร้างฐานข้อมูลแล้ว ยังมีโปรแกรมที่กำหนดคะแนนของลิงก์ที่พบอีกด้วย

หลักการทำงานของเสิร์ชเอ็นจิ้นคือการสืบค้นแคตตาล็อกภายใน (ฐานข้อมูล) สำหรับคำหลักที่ผู้ใช้ระบุในช่องสืบค้นและสร้างรายการลิงก์ที่จัดอันดับตามความเกี่ยวข้อง

ควรสังเกตว่าเมื่อประมวลผลคำขอของผู้ใช้ที่เฉพาะเจาะจง เครื่องมือค้นหาจะดำเนินการกับทรัพยากรภายในอย่างแม่นยำ (และไม่ได้เริ่มต้นการเดินทางข้ามเว็บ ดังที่ผู้ใช้ที่ไม่มีประสบการณ์มักเชื่อ) และทรัพยากรภายในย่อมมีจำกัดโดยธรรมชาติ แม้ว่าฐานข้อมูลเครื่องมือค้นหาจะได้รับการอัปเดตอยู่ตลอดเวลา เครื่องมือค้นหาไม่สามารถสร้างดัชนีเอกสารเว็บทั้งหมดได้: มีจำนวนมากเกินไป ดังนั้นจึงมีความเป็นไปได้เสมอที่เครื่องมือค้นหาเฉพาะจะไม่รู้จักทรัพยากรที่คุณกำลังมองหา

แนวคิดนี้แสดงไว้อย่างชัดเจนด้วยภาพ 4.22. วงรี 1 จำกัดชุดของเอกสารเว็บทั้งหมดที่มีอยู่ ณ จุดใดจุดหนึ่ง วงรี 2 จำกัดเอกสารทั้งหมดที่ได้รับการจัดทำดัชนีโดยเครื่องมือค้นหาที่กำหนด และวงรี 3 จำกัดเอกสารที่ค้นหา ดังนั้นการใช้เครื่องมือค้นหานี้คุณจะพบเฉพาะส่วนหนึ่งของเอกสารที่จำเป็นที่ได้รับการจัดทำดัชนีเท่านั้น

ปัญหาความสมบูรณ์ในการค้นหาไม่เพียงพอนั้นไม่เพียงแต่อยู่ที่ทรัพยากรภายในที่จำกัดของเครื่องมือค้นหาเท่านั้น แต่ยังรวมถึงความจริงที่ว่าความเร็วของโรบอตนั้นมีจำกัด และจำนวนเอกสารบนเว็บใหม่ก็เพิ่มขึ้นอย่างต่อเนื่อง การเพิ่มทรัพยากรภายในของเครื่องมือค้นหาไม่สามารถแก้ปัญหาได้อย่างสมบูรณ์ เนื่องจากความเร็วที่หุ่นยนต์รวบรวมข้อมูลทรัพยากรมีจำกัด

ขณะเดียวกันก็สมมุติว่า เครื่องมือค้นหามีสำเนาของแหล่งข้อมูลอินเทอร์เน็ตดั้งเดิม แสดงว่าไม่ถูกต้อง ข้อมูลครบถ้วน(เอกสารต้นฉบับ) ไม่ได้ถูกจัดเก็บบ่อยนักมีเพียงบางส่วนเท่านั้นที่ถูกจัดเก็บ - รายการที่เรียกว่าดัชนีหรือดัชนีซึ่งมีขนาดกะทัดรัดกว่าข้อความในเอกสารมากและช่วยให้คุณตอบสนองต่อคำค้นหาได้อย่างรวดเร็ว

ในการสร้างดัชนี ข้อมูลต้นฉบับจะถูกแปลงเพื่อให้ปริมาณฐานข้อมูลมีน้อยที่สุด และการค้นหาจะดำเนินการอย่างรวดเร็วและให้ประโยชน์สูงสุด ข้อมูลที่เป็นประโยชน์- เมื่ออธิบายว่ารายการจัดทำดัชนีคืออะไร เราสามารถวาดเส้นคู่ขนานกับรายการกระดาษได้ - สิ่งที่เรียกว่าความสอดคล้องคือ พจนานุกรมซึ่ง ลำดับตัวอักษรมีการระบุคำที่ใช้โดยนักเขียนคนใดคนหนึ่ง ตลอดจนการอ้างอิงถึงพวกเขาและความถี่ในการใช้งานของเขา

เห็นได้ชัดว่าความสอดคล้อง (พจนานุกรม) มีขนาดกะทัดรัดกว่ามาก ข้อความต้นฉบับทำงานและค้นหาในนั้น คำที่ถูกต้องง่ายกว่าการอ่านหนังสือโดยหวังว่าจะสะดุดกับคำพูดที่ถูกต้อง

การก่อสร้างดัชนี

รูปแบบการสร้างดัชนีแสดงไว้ในรูปที่ 1 4.23. ตัวแทนเครือข่ายหรือหุ่นยนต์สไปเดอร์ “รวบรวมข้อมูล” เว็บ วิเคราะห์เนื้อหาของเว็บเพจ และรวบรวมข้อมูลเกี่ยวกับสิ่งที่พบและบนหน้าใด

เมื่อคุณพบหน้า HTML อื่น โปรแกรมค้นหาส่วนใหญ่จะบันทึกคำ รูปภาพ ลิงก์ และองค์ประกอบอื่นๆ (ในโปรแกรมค้นหาต่างๆ ในรูปแบบที่แตกต่างกัน) ที่มีอยู่ในหน้านั้น ยิ่งไปกว่านั้น เมื่อติดตามคำบนหน้าเว็บ ไม่เพียงแต่บันทึกการแสดงตนเท่านั้น แต่ยังรวมถึงตำแหน่งของคำเหล่านั้นด้วย เช่น โดยที่คำเหล่านี้อยู่: ในชื่อเรื่อง, คำบรรยาย, เมตาแท็ก 1 เมตาแท็กคือแท็กบริการที่ช่วยให้นักพัฒนาสามารถวางข้อมูลบริการบนเว็บเพจได้ รวมถึงเพื่อกำหนดทิศทางของเครื่องมือค้นหา(เมตาแท็ก) หรือที่อื่น ๆ ในกรณีนี้มักจะได้รับการแก้ไข คำที่มีความหมายและคำสันธานและคำอุทาน เช่น “a”, “but” และ “or” จะถูกละเว้น เมตาแท็กช่วยให้เจ้าของเพจสามารถกำหนดได้ คำหลักและหัวข้อที่ใช้จัดทำดัชนีเพจ สิ่งนี้อาจเกี่ยวข้องเมื่อคำหลักมีหลายความหมาย เมตาแท็กสามารถแนะนำเครื่องมือค้นหาเมื่อเลือกจากความหมายต่างๆ ของคำไปเป็นความหมายเดียวที่ถูกต้อง อย่างไรก็ตาม เมตาแท็กจะทำงานได้อย่างน่าเชื่อถือก็ต่อเมื่อเจ้าของเว็บไซต์ที่ซื่อสัตย์กรอกแท็กเหล่านั้นเท่านั้น เจ้าของเว็บไซต์ที่ไร้ยางอายจะใส่คำที่ได้รับความนิยมมากที่สุดบนเว็บไว้ในเมตาแท็ก ซึ่งไม่เกี่ยวข้องกับหัวข้อของเว็บไซต์ เป็นผลให้ผู้เยี่ยมชมจบลงที่ไซต์ที่ไม่พึงประสงค์ จึงเพิ่มอันดับของพวกเขา นี่คือสาเหตุที่เครื่องมือค้นหาสมัยใหม่จำนวนมากเพิกเฉยต่อเมตาแท็กหรือพิจารณาเพิ่มเติมในข้อความบนหน้า โรบ็อตแต่ละตัวจะรักษารายการทรัพยากรของตัวเองซึ่งถูกลงโทษจากการโฆษณาที่ผิดพลาด

แน่นอนว่าหากคุณค้นหาเว็บไซต์โดยใช้คำหลัก "dog" เครื่องมือค้นหาจะต้องค้นหาไม่เพียงแค่ทุกหน้าที่มีการกล่าวถึงคำว่า "dog" เท่านั้น แต่ยังรวมถึงหน้าเว็บที่คำนี้เกี่ยวข้องกับหัวข้อของเว็บไซต์ด้วย ในการพิจารณาว่าคำใดเกี่ยวข้องกับโปรไฟล์ของหน้าเว็บนั้นมากน้อยเพียงใด จำเป็นต้องประเมินว่าคำนั้นปรากฏบนหน้าเว็บบ่อยเพียงใด ไม่ว่าจะมี คำนี้เชื่อมโยงไปยังหน้าอื่นหรือไม่ กล่าวโดยสรุป คุณต้องจัดอันดับคำที่พบในหน้าเว็บตามลำดับความสำคัญ คำต่างๆ ได้รับการกำหนดน้ำหนักขึ้นอยู่กับจำนวนครั้งและตำแหน่งที่ปรากฏ (ในชื่อหน้า ที่จุดเริ่มต้นหรือจุดสิ้นสุดของหน้า ในลิงก์ ในเมตาแท็ก ฯลฯ) เครื่องมือค้นหาแต่ละอันมีอัลกอริธึมของตัวเองในการกำหนดค่าสัมประสิทธิ์การถ่วงน้ำหนัก - นี่คือหนึ่งในสาเหตุที่เครื่องมือค้นหาส่งคืนผลลัพธ์สำหรับคำหลักเดียวกัน รายการต่างๆทรัพยากร. เนื่องจากหน้าเว็บมีการอัปเดตอยู่ตลอดเวลา กระบวนการจัดทำดัชนีจึงต้องดำเนินไปอย่างต่อเนื่อง สไปเดอร์บอทติดตามลิงก์และสร้างไฟล์ที่มีดัชนีซึ่งอาจมีขนาดค่อนข้างใหญ่ เพื่อลดขนาด พวกเขาใช้วิธีลดปริมาณข้อมูลและบีบอัดไฟล์ ด้วยโรบ็อตหลายตัว เสิร์ชเอ็นจิ้นสามารถประมวลผลได้หลายร้อยหน้าต่อวินาที ปัจจุบัน เสิร์ชเอ็นจิ้นที่ทรงพลังจัดเก็บหน้าเว็บหลายร้อยล้านหน้า และรับข้อความค้นหาหลายสิบล้านรายการทุกวัน

เมื่อสร้างดัชนีปัญหาในการลดจำนวนรายการที่ซ้ำกันก็ได้รับการแก้ไขเช่นกันซึ่งเป็นงานที่ไม่สำคัญเนื่องจากสำหรับการเปรียบเทียบที่ถูกต้องคุณต้องกำหนดการเข้ารหัสเอกสารก่อน งานที่ยากยิ่งกว่านั้นคือการแยกเอกสารที่คล้ายกันมาก (เรียกว่า "เกือบซ้ำกัน") เช่น เอกสารที่ต่างกันแค่ชื่อเรื่องและข้อความซ้ำกัน มีเอกสารที่คล้ายกันมากมายบนอินเทอร์เน็ต ตัวอย่างเช่น มีคนคัดลอกบทคัดย่อและเผยแพร่บนเว็บไซต์พร้อมลายเซ็นของเขา เครื่องมือค้นหาสมัยใหม่ช่วยให้เราสามารถแก้ไขปัญหาดังกล่าวได้

เครื่องมือค้นหา

เครื่องมือค้นหาช่วยให้คุณค้นหาเอกสาร WWW ที่เกี่ยวข้องกับหัวข้อที่กำหนดหรือมีคำหลักหรือชุดค่าผสม มีวิธีการค้นหาสองวิธีที่ใช้บนเซิร์ฟเวอร์การค้นหา:

· ตามลำดับชั้นของแนวคิด

·ตามคำสำคัญ

เซิร์ฟเวอร์การค้นหาจะถูกเติมโดยอัตโนมัติหรือด้วยตนเอง เซิร์ฟเวอร์การค้นหามักจะมีลิงก์ไปยังส่วนที่เหลือ เซิร์ฟเวอร์การค้นหาและส่งคำขอค้นหาตามคำขอของผู้ใช้

เครื่องมือค้นหามีสองประเภท

1. โปรแกรมค้นหา "ข้อความแบบเต็ม" ที่สร้างดัชนีทุกคำบนหน้าเว็บ ไม่รวมคำหยุด

2. "Abstract" เสิร์ชเอ็นจิ้นที่สร้างบทคัดย่อของแต่ละหน้า

สำหรับเว็บมาสเตอร์ เอ็นจิ้นข้อความแบบเต็มมีประโยชน์มากกว่า เนื่องจากมีการวิเคราะห์คำใดๆ ที่พบในหน้าเว็บเพื่อพิจารณาความเกี่ยวข้องกับข้อความค้นหาของผู้ใช้ อย่างไรก็ตาม เอ็นจิ้นนามธรรมสามารถจัดทำดัชนีหน้าได้ดีกว่าหน้าข้อความแบบเต็ม ขึ้นอยู่กับอัลกอริธึมในการดึงข้อมูล เช่น ตามความถี่ของการใช้คำเดียวกัน

ลักษณะสำคัญของเครื่องมือค้นหา

1.ขนาดของเครื่องมือค้นหาถูกกำหนดโดยจำนวนหน้าที่จัดทำดัชนี อย่างไรก็ตาม ในช่วงเวลาใดก็ตาม ลิงก์ที่ให้ไว้เพื่อตอบสนองต่อคำขอของผู้ใช้อาจมีอายุที่แตกต่างกัน สาเหตุที่เกิดเหตุการณ์เช่นนี้:

· เครื่องมือค้นหาบางตัวจะจัดทำดัชนีหน้าเว็บทันทีตามคำขอของผู้ใช้ จากนั้นจึงดำเนินการจัดทำดัชนีหน้าที่ยังไม่ได้จัดทำดัชนีต่อไป

· คนอื่นๆ มักจะจัดทำดัชนีมากที่สุด หน้ายอดนิยมเครือข่าย

2.วันที่จัดทำดัชนี เครื่องมือค้นหาบางรายการจะแสดงวันที่ที่เอกสารถูกจัดทำดัชนี ซึ่งจะช่วยให้ผู้ใช้ทราบว่าเมื่อใดที่เอกสารปรากฏทางออนไลน์

3. ความลึกของการจัดทำดัชนีจะแสดงจำนวนหน้าหลังจากหน้าที่ระบุที่เครื่องมือค้นหาจะจัดทำดัชนี เครื่องจักรส่วนใหญ่ไม่มีข้อจำกัดเกี่ยวกับความลึกของการจัดทำดัชนี สาเหตุที่จัดทำดัชนีบางหน้าไม่ได้:

· ไม่ การใช้งานที่ถูกต้องโครงสร้างเฟรม

· การใช้แผนผังเว็บไซต์โดยไม่มีการทำซ้ำ ลิงก์ปกติ

4.การทำงานกับเฟรม ถ้า หุ่นยนต์ค้นหาไม่รู้วิธีทำงานกับโครงสร้างเฟรม ดังนั้นโครงสร้างจำนวนมากที่มีเฟรมจะพลาดไปในระหว่างการจัดทำดัชนี

5. ความถี่ของการเชื่อมโยง โปรแกรมค้นหาหลักๆ สามารถกำหนดความนิยมของเอกสารได้จากความถี่ในการเชื่อมโยง จากข้อมูลดังกล่าว เครื่องจักรบางเครื่องจะ "สรุป" ว่าคุ้มค่าที่จะทำดัชนีเอกสารหรือไม่

6.ความถี่ในการอัพเดตเซิร์ฟเวอร์ หากเซิร์ฟเวอร์ได้รับการอัปเดตบ่อยครั้ง เครื่องมือค้นหาจะจัดทำดัชนีใหม่ให้บ่อยขึ้น

7. การควบคุมการจัดทำดัชนี แสดงเครื่องมือที่คุณสามารถใช้เพื่อควบคุมเครื่องมือค้นหา

8.การเปลี่ยนเส้นทาง เว็บไซต์บางแห่งเปลี่ยนเส้นทางผู้เยี่ยมชมจากเซิร์ฟเวอร์หนึ่งไปยังอีกเซิร์ฟเวอร์หนึ่ง และตัวเลือกนี้แสดงให้เห็นว่าสิ่งนี้จะเกี่ยวข้องกับเอกสารที่พบอย่างไร

9.หยุดคำพูด เครื่องมือค้นหาบางคำไม่มีคำบางคำในดัชนีหรืออาจไม่รวมคำเหล่านั้นในข้อความค้นหาของผู้ใช้ คำเหล่านี้มักถือเป็นคำบุพบทหรือคำที่ใช้บ่อย

10.ค่าปรับสแปม ความสามารถในการบล็อกสแปม

11.การลบข้อมูลเก่า พารามิเตอร์ที่กำหนดการกระทำของผู้ดูแลเว็บเมื่อปิดเซิร์ฟเวอร์หรือย้ายไปยังที่อยู่อื่น

ตัวอย่างของเครื่องมือค้นหา

1. อัลตาวิสต้า. ระบบเปิดในเดือนธันวาคม พ.ศ. 2538 เป็นเจ้าของโดย DEC ตั้งแต่ปี 1996 เขาได้ร่วมงานกับ Yahoo อัลตาวิสต้าคือ ตัวเลือกที่ดีที่สุดสำหรับการค้นหาที่กำหนดเอง - อย่างไรก็ตาม การเรียงลำดับผลลัพธ์ตามหมวดหมู่การดำเนินการนี้ยังไม่เสร็จสิ้น และคุณต้องตรวจสอบข้อมูลที่ให้ไว้ด้วยตนเอง AltaVista ไม่มีวิธีการใดๆ ในการเรียกค้นรายการไซต์ที่ใช้งานอยู่ ข่าวสาร หรือความสามารถในการค้นหาเนื้อหาอื่นๆ

2. ค้นหาอย่างตื่นเต้น เปิดตัวเมื่อปลายปี 1995 ในเดือนกันยายน พ.ศ. 2539 - WebCrawler ได้มา หน่วยนี้มีขนค้นหาที่ทรงพลังต่ำ มีความเป็นไปได้ในการตั้งค่าส่วนบุคคลโดยอัตโนมัติข้อมูลที่ให้ไว้ตลอดจนคุณสมบัติที่รวบรวมไว้คำอธิบายของหลายโหนดโดยบุคลากรที่มีคุณสมบัติเหมาะสมตื่นเต้น แตกต่างจากโหนดการค้นหาอื่นๆ ในนั้นช่วยให้คุณค้นหาบริการข่าวสารและเผยแพร่บทวิจารณ์หน้าเว็บ. เครื่องมือค้นหาใช้เครื่องมือการค้นหาคำหลักมาตรฐานและการศึกษาสำนึกวิธีการค้นหาเนื้อหา ต้องขอบคุณการผสมผสานนี้คุณสามารถค้นหาหน้าที่เกี่ยวข้องได้เว็บ, หากไม่มีคีย์ที่ผู้ใช้ระบุคำ ข้อเสียของ Excite เป็นอินเทอร์เฟซที่ค่อนข้างวุ่นวาย

3.HotBot. เปิดตัวในเดือนพฤษภาคม พ.ศ. 2539 เป็นเจ้าของโดย Wired ขึ้นอยู่กับเทคโนโลยีเครื่องมือค้นหาของ Berkeley Inktomi HotBot เป็นฐานข้อมูลที่ประกอบด้วยเอกสารที่จัดทำดัชนีโดย ข้อความเต็มและหนึ่งในเครื่องมือค้นหาที่ครอบคลุมมากที่สุดบนเว็บ ความสามารถในการค้นหาแบบบูลีนและความสามารถในการจำกัดการค้นหาในพื้นที่หรือเว็บไซต์ใดๆ จะช่วยให้ผู้ใช้ค้นหาได้ ข้อมูลที่จำเป็น, กำจัดสิ่งที่ไม่จำเป็นออกไป HotBot เปิดโอกาสให้คุณเลือก พารามิเตอร์ที่จำเป็นค้นหาจากรายการแบบเลื่อนลง

4.ข้อมูลค้นหา เปิดตัวก่อนปี 1995 เข้าถึงได้ง่าย ปัจจุบันมี URL ประมาณ 50 ล้านรายการ Infoseek มีอินเทอร์เฟซที่ออกแบบมาอย่างดีและยอดเยี่ยม เครื่องมือค้นหา- การตอบคำถามส่วนใหญ่จะมาพร้อมกับลิงก์ "หัวข้อที่เกี่ยวข้อง" และการตอบกลับแต่ละรายการจะตามด้วยลิงก์ "หน้าที่คล้ายกัน" ฐานข้อมูลเครื่องมือค้นหาของเพจที่จัดทำดัชนีด้วยข้อความแบบเต็ม คำตอบจะเรียงลำดับตามตัวบ่งชี้สองตัว: ความถี่ของคำหรือวลีที่ปรากฏบนหน้า tsakh ตลอดจนตำแหน่งของคำหรือวลีบนหน้าเว็บมี Web Directory แบ่งออกเป็น 12 หมวดหมู่ พร้อมหมวดหมู่ย่อยหลายร้อยหมวดหมู่ที่สามารถค้นหาได้ แต่ละหน้าแค็ตตาล็อกประกอบด้วยรายการใหม่ โหนดที่แนะนำ

5. ไลคอส. เปิดดำเนินการตั้งแต่เดือนพฤษภาคม 2537 เป็นที่รู้จักและใช้กันอย่างแพร่หลาย ประกอบด้วยไดเร็กทอรีที่มี URL จำนวนมาก และเครื่องมือค้นหาจุดพร้อมเทคโนโลยี การวิเคราะห์ทางสถิติเนื้อหาของหน้า ซึ่งตรงข้ามกับการจัดทำดัชนีข้อความแบบเต็ม Lycos ประกอบด้วยข่าวสาร บทวิจารณ์ไซต์ ลิงก์ไปยังไซต์ยอดนิยม แผนที่เมือง และเครื่องมือสำหรับการค้นหาที่อยู่ รูปภาพ สำนวนและคลิปเสียงและวิดีโอไลคอส จัดเรียงคำตอบตามระดับความสัมพันธ์ตอบสนองคำขอตามเกณฑ์หลายประการ เช่น จำนวนlu คำค้นหาที่พบในบทคัดย่อไปยังเอกสารment, ช่วงเวลาระหว่างทำคำใน วลีเฉพาะเอกสารสถานที่เงื่อนไขในเอกสาร

6. เว็บครอว์เลอร์ เปิดดำเนินการเมื่อวันที่ 20 เมษายน พ.ศ. 2537 โดยเป็นโครงการของมหาวิทยาลัยวอชิงตัน โปรแกรมรวบรวมข้อมูลเว็บ ให้โอกาสไวยากรณ์สำหรับระบุข้อความค้นหาตลอดจน ทางเลือกที่ยิ่งใหญ่ คำอธิบายประกอบโหนดด้วยอินเทอร์เฟซที่เรียบง่าย

7. ยาฮู. ไดเร็กทอรีที่เก่าแก่ที่สุดของ Yahoo เปิดตัวเมื่อต้นปี 1994 เป็นที่รู้จักอย่างกว้างขวาง ใช้บ่อย และเป็นที่นับถือมากที่สุด ในเดือนมีนาคม พ.ศ. 2539 แค็ตตาล็อก Yahooligans สำหรับเด็กเปิดตัว ไดเรกทอรีระดับภูมิภาคและระดับบนสุดของ Yahoo จะปรากฏขึ้น Yahoo ขึ้นอยู่กับการสมัครสมาชิกของผู้ใช้ สามารถใช้เป็นจุดเริ่มต้นสำหรับการค้นหาใดๆ บนเว็บได้เนื่องจากระบบการจัดหมวดหมู่ ผู้ใช้จะพบว่าเว็บไซต์ที่มีข้อมูลที่มีการจัดระเบียบอย่างดี เนื้อหาเว็บแบ่งออกเป็น 14 หมวดหมู่ทั่วไปตามรายการ หน้าแรกยาฮู!. ขึ้นอยู่กับคำขอเฉพาะของผู้ใช้ คุณสามารถทำงานกับหมวดหมู่เหล่านี้เพื่อทำความคุ้นเคยกับหมวดหมู่ย่อยและรายการโหนด หรือค้นหา คำเฉพาะและเงื่อนไขต่างๆ ทั่วทั้งฐานข้อมูล ผู้ใช้ยังสามารถจำกัดการค้นหาภายในส่วนหรือส่วนย่อยใดๆ ของ Yahoo! เนื่องจากความจริงที่ว่าการจำแนกประเภทของโหนดนั้นดำเนินการโดยคนและไม่ใช่โดยคอมพิวเตอร์ คุณภาพของลิงก์มักจะสูงมาก อย่างไรก็ตาม การปรับปรุงการค้นหาในกรณีที่เกิดความล้มเหลวถือเป็นงานที่ยาก เข้าร่วม Yahoo - รวมเครื่องมือค้นหา AltaVista ดังนั้นหากคุณค้นหาใน Yahoo! มันเกิดขึ้นโดยอัตโนมัติ การทำซ้ำโดยใช้เครื่องมือค้นหาอัลตาวิสต้า - ผลลัพธ์จะถูกส่งไปยังยาฮู!. ยาฮู! ให้ความสามารถในการส่งข้อความค้นหาไปยัง Usenet และ Fourl 1 เพื่อค้นหาที่อยู่ อีเมล.

เครื่องมือค้นหาของรัสเซีย ได้แก่ :

1. Rambler นี่คือเครื่องมือค้นหาภาษารัสเซีย ส่วนที่ระบุไว้ในบ้าน เพจ แรมเบลอร์ครอบคลุมโดยแหล่งข้อมูลบนเว็บภาษารัสเซีย มีตัวจำแนกข้อมูล โอกาสที่สะดวกสบายงานคือการจัดเตรียมรายการโหนดที่มีผู้เข้าชมมากที่สุดสำหรับแต่ละโหนด หัวข้อที่เสนอ

2. ค้นหาพอร์ต สปอร์ต ติดอันดับหนึ่งในเครื่องมือค้นหาที่ผ่านการรับรองชั้นนำไมโครซอฟต์ เช่นเดียวกับเครื่องมือค้นหาในท้องถิ่นระบบสำหรับเวอร์ชั่นรัสเซียไมโครซอฟต์ อินเทอร์เน็ต เอ็กซ์พลอเรอร์ ข้อดีอย่างหนึ่งของ Aport คือการแปลภาษาอังกฤษ-รัสเซีย และภาษารัสเซีย-อังกฤษ โหมดออนไลน์ข้อความค้นหาและการค้นหาผลลัพธ์ซึ่งคุณสามารถค้นหาในแหล่งข้อมูลอินเทอร์เน็ตของรัสเซียได้ แม้จะไม่รู้ภาษารัสเซียก็ตาม นอกจากนี้คุณสามารถค้นหาข้อมูลได้ การใช้สำนวน แม้กระทั่งประโยคในบรรดาคุณสมบัติหลัก เครื่องมือค้นหาเอามาได้ไหม.แบ่งสิ่งต่อไปนี้:

การแปลคำค้นหาและผลการค้นหาจากภาษารัสเซียเป็นภาษาอังกฤษภาษาจีนและในทางกลับกัน

ตรวจสอบอัตโนมัติ การสะกดผิดขอ;

การแสดงผลการค้นหาเว็บไซต์ที่พบอย่างให้ข้อมูล

ความสามารถในการค้นหาในรูปแบบไวยากรณ์ใด ๆ

คุณสมบัติการค้นหาอื่น ๆ ได้แก่ :ถือห้าหลัก หน้ารหัส(การดำเนินงานที่แตกต่างกันระบบ) สำหรับภาษารัสเซียโดยใช้เทคโนโลยีการค้นหาไม่มีข้อจำกัดใดๆ URL และวันที่ของเอกสารการดำเนินการค้นหาตามชื่อเรื่อง ความคิดเห็น และลายเซ็นให้กับรูปภาพ ฯลฯ บันทึกพารามิเตอร์การค้นหาและการกำหนดจำนวนคำขอของผู้ใช้ก่อนหน้านี้ การรวมเข้าด้วยกัน สำเนาของเอกสารที่อยู่บนเซิร์ฟเวอร์ที่แตกต่างกัน

3. รายการ. รู ( http://www.list.ru) ในการใช้งานเซิร์ฟเวอร์นี้มีมากมายร่วมกับระบบภาษาอังกฤษยาฮู!. บน หน้าแรกเซิร์ฟเวอร์มีลิงก์ไปยังหมวดหมู่การค้นหายอดนิยม

4. ยานเดกซ์ ผลิตภัณฑ์ซอฟต์แวร์ซีรีส์ Yandex เป็นชุดเครื่องมือสำหรับการจัดทำดัชนีข้อความแบบเต็มและค้นหาข้อมูลข้อความโดยคำนึงถึงสัณฐานวิทยาของภาษารัสเซีย Yandex มีโมดูลสำหรับการวิเคราะห์และการสังเคราะห์ทางสัณฐานวิทยา การจัดทำดัชนีและการค้นหา รวมถึงชุดโมดูลเสริม เช่น ตัววิเคราะห์เอกสาร ภาษามาร์กอัป ตัวแปลงรูปแบบ และสไปเดอร์

อัลกอริธึมการวิเคราะห์ทางสัณฐานวิทยาและการสังเคราะห์ตามพจนานุกรมฐานสามารถทำให้คำเป็นมาตรฐานนั่นคือค้นหารูปแบบเริ่มต้นและสร้างสมมติฐานสำหรับคำที่ไม่มีอยู่ในพจนานุกรมฐาน ระบบ การจัดทำดัชนีข้อความแบบเต็มช่วยให้คุณสร้างดัชนีขนาดกะทัดรัดและค้นหาได้อย่างรวดเร็ว ตัวดำเนินการเชิงตรรกะ.

ยานเดกซ์ได้รับการออกแบบให้ทำงานกับข้อความในเครื่องและใน เครือข่ายทั่วโลกและยังสามารถเชื่อมต่อเป็นโมดูลกับระบบอื่นได้อีกด้วย

เป็นที่ทราบกันดีว่าผู้ใช้ที่มาถึงไซต์จากเครื่องมือค้นหาให้ปริมาณการเข้าชมมากถึงสี่สิบเปอร์เซ็นต์ ดังนั้นควรดูแลการจัดทำดัชนีเว็บไซต์ของคุณให้ถูกต้อง เครื่องมือค้นหามีประโยชน์มาก. โดย "การจัดทำดัชนีที่ถูกต้อง" ฉันหมายความว่าจะต้องเคารพความเกี่ยวข้องของข้อความค้นหาและเนื้อหาของเว็บไซต์ กล่าวคือ ในรูปแบบที่เรียบง่ายและ ภาษาที่สามารถเข้าถึงได้เนื้อหาของเว็บไซต์จะต้องสอดคล้องกับคำขอ (ชุดคำหลักในทางที่ผิด "ต้นแบบ" บางชุดที่ไม่สอดคล้องกับความเป็นจริง ตัวอย่างเช่น เมื่อน้องสาวของฉันกำลังเตรียมที่จะออกซีดีพร้อมสำเนาของเว็บเพจระดับแรกในเครื่อง คำว่า "x#y" และคำอื่นๆ ที่คล้ายกันนี้ปรากฏบนเซิร์ฟเวอร์ของบริษัทที่มีชื่อเสียงมาก ซึ่งไม่เกี่ยวข้องกับคำศัพท์ประเภทนี้ :-)

• อัลตาวิสต้า
• ดึงข้อมูลการค้นหา
• เมเดียลิงกัว
• เดินเตร่
• RusInfOil
• รัสเซียเอ็กซ์เพรส
• ค้นหาร่างกาย
• ฮอทบอท
• ยานเดกซ์

เหตุใดฉันจึงแสดงรายการเครื่องมือค้นหาเฉพาะเหล่านี้ เพราะจากการสังเกตของฉัน นี่คือสิ่งที่ชาวเน็ตที่พูดภาษารัสเซียใช้ "ข้อสังเกตของฉัน" คืออะไร? นี่คือการวิเคราะห์บันทึกการเข้าถึงเซิร์ฟเวอร์ของฉัน http://citforum.ru/ หรือแม่นยำยิ่งขึ้นว่าเป็นส่วนหนึ่งของบันทึกที่มีการรวบรวมข้อมูลบน HTTP_REFERER เช่น ที่อยู่ (URL) ที่ลูกค้าใช้ลิงก์ไปยังหน้าใด ๆ บนเซิร์ฟเวอร์ของฉัน

เครื่องจักรที่ฉันระบุไว้ในทางปฏิบัติมีระดับเท่าใด เครื่องไหนใช้งานมากกว่า เครื่องไหนน้อยกว่า

Altavista อยู่ในอันดับที่หนึ่งโดยมีอัตรากำไรมหาศาลจากส่วนที่เหลือ เครื่องมือค้นหานี้เป็นผู้นำก่อนที่จะค้นหาด้วยซ้ำ ภาษาที่แตกต่างกัน(รวมถึงตามเอกสารภาษารัสเซีย) เป็นเรื่องที่เข้าใจได้ - เซิร์ฟเวอร์ที่ยอดเยี่ยมและเข้าถึงได้ง่ายเปิดดำเนินการมาเป็นเวลานาน (ตั้งแต่ต้นปี 1996) ซึ่งเป็นฐานข้อมูลเอกสารขนาดใหญ่ (ที่อยู่มากกว่า 50 ล้านที่อยู่) ควรคำนึงด้วยว่าผู้ใช้ที่พูดภาษารัสเซียไม่เพียงแต่อยู่ในรัสเซียเท่านั้น แต่ยังอยู่ในบัลแกเรีย สาธารณรัฐเช็ก และสโลวาเกีย โปแลนด์ อิสราเอล เยอรมนี และไม่ต้องพูดถึงอดีตสาธารณรัฐของสหภาพโซเวียต - ยูเครน เบลารุส .. (ฉันอยากจะพูดเป็นพิเศษเกี่ยวกับรัฐบอลติก: พวกเขาพบกันตามถนนในเมืองเคานาสหรือทาลลินน์บางแห่งซึ่งไม่รู้จักภาษารัสเซีย แต่อยู่หน้าจอมอนิเตอร์ โดยเฉพาะอย่างยิ่งหากจำเป็นจริงๆ พวกเขาจริงๆ รู้ :-)) ดังนั้นสำหรับผู้ใช้ทั้งหมดเหล่านี้ การใช้ Altavista จะสะดวกกว่าไม่ใช่รถยนต์ในประเทศของเรา - ใกล้กว่า แต่ยังคง...

เครื่องมือค้นหาที่ได้รับความนิยมรองลงมาคือ Yandex ที่อายุน้อยที่สุดในรัสเซีย ดังที่ Aleksey Amilyushchenko (บริษัท Comptek) บอกฉันว่าวันนี้มีคำขอโดยเฉลี่ย 72,000 คำขอต่อวัน และมีแนวโน้ม +10% ต่อสัปดาห์ (ข้อมูลจาก 04/07/98) สำหรับฉันแล้วดูเหมือนว่า Yandex เป็นเครื่องมือค้นหาของรัสเซียที่มีแนวโน้มมากที่สุด ด้วยระบบของ Comptek สำหรับการแยกวิเคราะห์ภาษารัสเซียที่ "ยิ่งใหญ่และทรงพลัง" ยานเดกซ์อาจได้รับชัยชนะในการแข่งขันกับวาฬตัวที่สองในพื้นที่นี้ - Rambler

Rambler เป็นเครื่องมือค้นหาสำคัญอันดับที่สามสำหรับ ผู้ใช้ที่พูดภาษารัสเซีย- สิ่งสำคัญที่ฉันไม่ชอบก็คือมันไม่สนใจเนื้อหาของโครงสร้าง - (ฉันไม่ได้คิดเรื่องนี้ขึ้นมาพูดโดย Dmitry Kryukov จาก Stack Ltd. ) อาจเป็นเพราะการปฏิเสธที่จะคำนึงถึงคำหลักที่ทำให้ลิงก์ชุดแปลก ๆ ดังกล่าวปรากฏในผลลัพธ์การค้นหา ข้อเสียเปรียบประการที่สองของลักษณะอินเทอร์เฟซเพียงอย่างเดียวคือผลลัพธ์จะได้รับอย่างต่อเนื่องในการเข้ารหัส KOI ไม่ว่าผู้ใช้จะเลือกไว้ก่อนหน้านี้ก็ตาม ข้อเสียเปรียบประการที่สาม: แมงมุมของ Rambler ทำงานต่อไป โปรโตคอล HTTP 0.9 ซึ่งนำไปสู่ข้อผิดพลาดในการจัดทำดัชนี เช่น หากมีหลายรายการอยู่ในที่อยู่ IP เดียวกัน เซิร์ฟเวอร์เสมือน Rambler มองเห็นเฉพาะรายการแรก และถือว่ารายการอื่นๆ ทั้งหมดเป็นเพียงคำพ้องความหมาย โอ้ หวังว่าเรื่องนี้จะได้รับการแก้ไขเร็วๆ นี้

ดีละถ้าอย่างนั้น สถานที่สุดท้ายในการจัดอันดับของฉันมี Aport-Search ซึ่งจัดทำดัชนีเซิร์ฟเวอร์อย่างแปลกประหลาด RusInfOil ซึ่งปิดเป็นประจำเพื่อสร้างใหม่ และ TELA-Search ซึ่งเป็นอุปกรณ์ที่สวยงามและแทบไม่มีประโยชน์สำหรับเซิร์ฟเวอร์ www.dux.ru

คุณอาจถามว่า: HotBot และเอ็นจิ้น Metasearch ของ Pathfinder จาก Medialingua อยู่ในรายการด้วยหรือไม่ ฉันไม่ได้ลืมพวกเขา เพียงแต่ว่า HotBot ทิ้งรายการจำนวนมากไว้ในบันทึกของฉันด้วยเหตุผลบางอย่าง ซึ่งไม่สามารถเป็นเที่ยวบินสุ่มของชาวต่างชาติที่ไม่เข้าใจภาษารัสเซียได้ (มีเที่ยวบินดังกล่าวน้อยกว่ามากจากที่อื่น เครื่องจักรนำเข้า) และผมยังไม่ได้ศึกษา “Pathfinder” แบบจริงจังมากพอ

เหตุใดเครื่องมือค้นหาจึงต้องโปรโมตเว็บไซต์

อย่างที่ฉันบอกไปแล้ว มันง่ายมากอย่างที่ฉันบอกไปแล้วว่าเสิร์ชเอ็นจิ้นสามารถให้ปริมาณการเข้าชมไซต์ได้มากถึงสี่สิบเปอร์เซ็นต์ และเพื่อให้สิ่งนี้เกิดขึ้น เว็บไซต์ของคุณจำเป็นต้องได้รับการจัดทำดัชนีอย่างถูกต้อง และด้วยเหตุนี้ คุณจำเป็นต้องรู้ว่าจะทำอย่างไร

และทำได้ด้วยวิธีต่อไปนี้: หุ่นยนต์เครื่องมือค้นหาจะเข้าสู่ไซต์ของคุณหรือคุณเองก็ระบุไซต์ในอินเทอร์เฟซที่เหมาะสม (AddUrl) ซึ่งมีอยู่ในเครื่องมือค้นหาที่เคารพตนเอง ตัวเลือกแรกได้รับผลกระทบจากความล่าช้า (หุ่นยนต์จะยังคงไปถึงที่นั่น บางทีในหนึ่งวัน หรือหนึ่งปี: อินเทอร์เน็ตมีขนาดใหญ่) อันที่สองต้องใช้เวลาพอสมควร (ซอฟต์แวร์ที่หลากหลายสำหรับการลงทะเบียนเว็บไซต์ของคุณในระบบคลาวด์ของเสิร์ชเอ็นจิ้นโดยอัตโนมัติไม่ได้ให้อะไรเลย - เครื่องถูกนำเข้า)

เพื่อให้ทุกอย่างเกิดขึ้น. อย่างดีที่สุดที่จำเป็น:

• ควรมีข้อความบางส่วนบนเว็บไซต์เป็นอย่างน้อย เครื่องมือค้นหาจะเพิกเฉยต่อรูปภาพและทำการทดสอบกับรูปภาพเหล่านั้น จริงอยู่ที่คุณสามารถทำซ้ำข้อความได้ แอตทริบิวต์สำรองแท็ก img
• เอกสารแต่ละไซต์ต้องมีชื่อ คำสำคัญ และคำอธิบายสั้นๆ ที่มีความหมาย พวกเขาเขียนเพียงว่าเครื่องมือค้นหาเป็นข้อความแบบเต็ม แต่ในความเป็นจริงไม่เป็นเช่นนั้น
• การสร้างไฟล์ robots.txt (โดยเฉพาะถ้าคุณมี เซิร์ฟเวอร์ของตัวเองเช่น www.name.ru)
• การลงทะเบียนด้วยตนเองในแต่ละเครื่องมือค้นหาที่คุณสนใจและการควบคุมการจัดทำดัชนีเว็บไซต์ของคุณในภายหลัง

ดังนั้นคุณได้ลงทะเบียนหน้าแรกของเว็บไซต์ของคุณในเครื่องมือค้นหาต่างๆแล้ว

คุณคิดว่าทุกอย่างอยู่ในสัญญาแล้วหรือยัง? ไม่ว่ามันจะเป็นอย่างไร หากลิงก์ไปยังเว็บไซต์ของคุณในการตอบกลับของเครื่องมือค้นหาแสดงบนหน้าจอที่สอง “มันแย่เหมือนกับไม่มีลิงก์เลย” (Danny Sullivan, searchenginewatch.com)

กล่าวอีกนัยหนึ่ง การระบุเพจใน AddURL นั้นไม่เพียงพอ มีความจำเป็นต้องเตรียมเอกสารล่วงหน้าเพื่อตอบสนองต่อคำขอที่เหมาะสมต่อเครื่องมือค้นหา ในการตอบสนองต่อคำขอ ลิงก์ไปยังเอกสารของคุณหากไม่ใช่ลิงก์แรก อย่างน้อยก็อยู่ในลิงก์สิบอันดับแรก (หรือ จะดีกว่าถ้าในสิบอันดับแรกนี้มีหลายลิงก์ไปยังเอกสารของคุณ:-) “เตรียมตัว” หมายความว่าอย่างไร? มันสะอาด คำถามทางเทคนิคไม่มีอะไรเหนือธรรมชาติ ในส่วน HEAD ของแต่ละเอกสารในไซต์ของคุณ คุณควรระบุชื่อ "กำลังพูด" คำสำคัญ คำอธิบาย และโรบ็อต

ชื่อ:ชื่อเอกสาร ชื่อที่ดีและมีความหมายสามารถทำให้ผู้ใช้เลือกลิงก์ของคุณจากคนอื่นๆ ได้ บ่อยครั้งที่คุณเห็นหัวข้อดังต่อไปนี้: "เนื้อหา" - อะไร ทำไม - ไม่ชัดเจน ไม่มีความปรารถนาที่จะตรวจสอบ อีกกรณีหนึ่ง: ในทุกหน้าของไซต์ ชื่อคือ "ยินดีต้อนรับสู่บริษัท..." - การตรวจสอบเอกสารทั้งหมดที่มีชื่อในลักษณะนี้ดูไม่น่าสนใจนัก ลองนึกภาพว่าคุณได้เลือกโหมดการค้นหาตามชื่อเรื่อง โดยไม่มีคำอธิบายของแต่ละเอกสาร

คำสำคัญ:คำหลัก เป็นเนื้อหาของคอนเทนเนอร์นี้ที่ส่งผลต่อความเกี่ยวข้องของเอกสารกับคำค้นหา

ไม่ว่าพวกเขาจะบอกว่าเครื่องมือค้นหาเป็นข้อความเต็มมากแค่ไหน แต่ก็ไม่เป็นความจริงทั้งหมด แต่เนื้อหาของคอนเทนเนอร์นี้จะไปอยู่ในดัชนีเครื่องมือค้นหาอย่างแน่นอน น่าเสียดายที่ผู้สร้างหนึ่งในเครื่องมือค้นหาในประเทศที่ใหญ่ที่สุด Rambler ไม่ต้องการทำงานกับคอนเทนเนอร์นี้ แต่เปล่าประโยชน์

• ช่องเนื้อหาไม่ควรมีเครื่องหมายท้ายบรรทัด เครื่องหมายคำพูด ฯลฯ อักขระพิเศษตัวพิมพ์ไม่สำคัญ
• ไม่แนะนำให้ทำซ้ำคำหลักเดียวกันหลาย ๆ ครั้ง สิ่งนี้อาจถูกมองว่าเป็นสแปมและเพจมีความเสี่ยงที่จะถูกลบออกจากดัชนีเครื่องมือค้นหา
• คุณไม่ควรสร้างคำหลักเดียวกันสำหรับ หน้าที่แตกต่างกันเว็บไซต์ของคุณ. แน่นอนว่าง่ายกว่า แต่เนื้อหาของเอกสารนั้นแตกต่างกัน หากคุณต้องการทำให้กระบวนการนี้เป็นไปโดยอัตโนมัติ คุณสามารถเขียนโปรแกรมที่จะเขียนบล็อคที่เลือกทั้งหมดของเอกสารในช่องนี้ ตัวอย่างเช่น สิ่งที่อยู่ระหว่างแท็ก H, I และ B
• หากบรรทัดในเนื้อหายาวเกินไปห้ามมิให้สร้างสิ่งปลูกสร้างที่คล้ายกันอีกหลายอย่าง
• โดยทั่วไป ปริมาณคำหลักทั้งหมดในเอกสารหนึ่งอาจสูงถึง 50% ของปริมาณในเอกสารนั้น

คำอธิบาย: คำอธิบายสั้นเอกสาร. คอนเทนเนอร์ค่อนข้างมีประโยชน์ เนื้อหาถูกใช้เป็นคำอธิบายสั้น ๆ ของเอกสารที่เกี่ยวข้องเพื่อตอบสนองต่อเครื่องมือค้นหาสมัยใหม่ หากไม่มีคอนเทนเนอร์นี้ ระบบจะส่งคืนบรรทัดจำนวนหนึ่งจากจุดเริ่มต้นของเอกสาร ดังนั้นจึงไม่ใช่เรื่องแปลกเมื่อ JavaScript อยู่ที่ตำแหน่งเริ่มต้นของเอกสาร และแทนที่จะเป็นคำอธิบายปกติ aracadabra จะได้รับในรูปแบบของชิ้นส่วนของสคริปต์

• ช่องเนื้อหาต้องไม่มีการลงท้ายบรรทัด เครื่องหมายคำพูด หรืออักขระพิเศษอื่นๆ
• ขอแนะนำให้มีการสรุปที่มีความหมายของเอกสารจากประโยคของมนุษย์สองสามประโยค เพื่อให้ผู้ใช้เครื่องมือค้นหานอกเหนือจากชื่อเรื่องสามารถเข้าใจความหมายของเอกสารได้
• น่าเสียดายที่เครื่องมือค้นหาในประเทศยังไม่ทราบวิธีทำงานกับคอนเทนเนอร์นี้แม้ว่าพวกเขาจะสัญญาว่าพวกเขาจะเรียนรู้ในไม่ช้าก็ตาม

เป็นไปได้ไหมที่จะควบคุมการทำงานของเครื่องมือค้นหา?

เป็นไปได้และจำเป็นด้วยซ้ำ! การดำเนินการขั้นแรกที่ต้องดำเนินการคือการเขียนไฟล์ robots.txt และวางไว้ที่รากของเซิร์ฟเวอร์ของคุณ ไฟล์นี้อธิบายให้โรบอตเครื่องมือค้นหาทราบอย่างแพร่หลายว่าอะไรควรจัดทำดัชนีและสิ่งใดไม่ควรจัดทำดัชนี เช่น ทำไมไฟล์บริการดัชนีถึงชอบ รายงานทางสถิติ- หรือผลลัพธ์ของสคริปต์? ยิ่งไปกว่านั้น เครื่อง “อัจฉริยะ” จำนวนมากจะไม่สร้างดัชนีเซิร์ฟเวอร์โดยไม่ต้องค้นหา robots.txt อย่างไรก็ตาม ในไฟล์นี้ คุณสามารถระบุมาสก์การจัดทำดัชนีที่แตกต่างกันสำหรับเครื่องมือค้นหาที่แตกต่างกันได้

คุณสามารถอ่านเพิ่มเติมเกี่ยวกับเรื่องนี้ได้ในคำแปลของฉัน "Standard for Robots Exclusion" การดำเนินการที่สอง: จัดเตรียมแท็ก Robots META ให้กับหน้าไซต์ นี่เป็นเครื่องมือควบคุมการจัดทำดัชนีที่ยืดหยุ่นมากกว่า robots.txt โดยเฉพาะอย่างยิ่ง ในแท็กนี้ คุณสามารถสั่งโรบอตเครื่องมือค้นหาไม่ให้ติดตามลิงก์ไปยังเซิร์ฟเวอร์อื่น เช่น ในเอกสารที่มีรายการลิงก์ รูปแบบของระเบียบนี้มีดังนี้:

robot_terms เป็นรายการคำหลักต่อไปนี้ที่คั่นด้วยเครื่องหมายจุลภาค (อักขระตัวพิมพ์ใหญ่หรือตัวพิมพ์เล็กไม่สำคัญ): ALL, NONE, INDEX, NOINDEX, FOLLOW, NOFOLLOWไม่มี บอกให้โรบ็อตทั้งหมดละเว้นหน้านี้เมื่อทำการจัดทำดัชนี (เทียบเท่ากับ การใช้งานพร้อมกันคำหลัก NOINDEX, NOFOLLOW)ทั้งหมด อนุญาตให้หน้านี้และลิงก์ทั้งหมดจากนั้นจัดทำดัชนี (เทียบเท่ากับการใช้คำหลัก INDEX ติดตามคำหลักพร้อมกัน)ดัชนี อนุญาตให้จัดทำดัชนีหน้านี้นอยเด็กซ์ ไม่อนุญาตให้จัดทำดัชนีหน้านี้ติดตาม อนุญาตให้ลิงก์ทั้งหมดจากหน้านี้ได้รับการจัดทำดัชนีไม่ปฏิบัติตาม ไม่อนุญาตให้จัดทำดัชนีลิงก์จากหน้านี้

หากละเว้นเมตาแท็กนี้หรือไม่ได้ระบุ robot_terms ตามค่าเริ่มต้น โรบ็อตการค้นหาจะทำหน้าที่เสมือนว่า robot_terms=INDEX, FOLLOW (เช่น ทั้งหมด) ถูกระบุ หากตรวจพบคีย์เวิร์ด ALL ใน CONTENT โรบ็อตจะดำเนินการตามนั้น โดยไม่สนใจคีย์เวิร์ดอื่นที่อาจระบุไว้ หาก CONTENT มีคีย์เวิร์ดที่มีความหมายตรงกันข้าม เช่น FOLLOW, NOFOLLOW โรบ็อตจะดำเนินการตามดุลยพินิจของตนเอง (ในกรณีนี้ ติดตาม).

หาก robot_terms มีเพียง NOINDEX ลิงก์จากหน้านี้จะไม่ถูกจัดทำดัชนี หาก robot_terms มีเพียง NOFOLLOW หน้าเว็บนั้นจะถูกจัดทำดัชนีและลิงก์จะถูกละเว้น

การตรวจสอบสถานะปัจจุบันของเอกสารของคุณในดัชนีเครื่องมือค้นหา

โอเค คุณอ่านทุกอย่างข้างต้นแล้วทำตามนั้น อะไรต่อไป? จากนั้นจะมีการตรวจสอบอย่างต่อเนื่องยาวนาน น่าเบื่อ และที่สำคัญที่สุด เพื่อดูว่าสิ่งต่างๆ ดำเนินไปอย่างไร ถึงแม้จะเป็นที่น่าเศร้า คุณจะต้องใส่ใจกับสิ่งนี้ หากเพียงเพราะบางครั้งเอกสารหายไปจากเครื่องมือค้นหา ทำไม ฉันหวังว่าฉันจะรู้... ดังนั้น ในเสิร์ชเอ็นจิ้นที่ดี คุณสามารถดูได้ว่ามีเอกสารอะไรบ้างและมีกี่เอกสาร เวลาปัจจุบันอยู่ในดัชนี ต่อไปนี้เป็นวิธีดำเนินการ:

อัลตาวิสต้า
ในเครื่องมือค้นหานี้ การตรวจสอบสถานะ URL นั้นค่อนข้างง่าย - เพียงพิมพ์บรรทัดข้อความค้นหา:

URL: citforum.ru
URL:citforum.ru/win/
URL:citforum.ru/win/internet/index.shtml

ในกรณีแรก หน้าเซิร์ฟเวอร์ที่จัดทำดัชนีไว้ทั้งหมดจะถูกส่งกลับ ในหน้าการเข้ารหัส Windows ที่สองเท่านั้น ในส่วนที่สาม - มีไฟล์ index.shtml จากไดเร็กทอรีที่ระบุในดัชนี AltaVista หรือไม่

ตื่นเต้น
การตรวจสอบสถานะของ URL ในเครื่องมือค้นหา Excite นั้นง่ายดายเหมือนกับใน AltaVista เพียงพิมพ์ URL ตัวอย่างเช่น:

ฮอทบอท
สถานะ URL ถูกตรวจสอบในเครื่องมือค้นหา HotBot ด้วยวิธีที่แตกต่างออกไปเล็กน้อย ทำเช่นนี้:

• ป้อน URL ในช่องคำขอ
• เปลี่ยนตัวเลือก "ทุกคำ" เป็น "ลิงก์ไปยัง URL นี้"

อินโฟซีค
ในเครื่องมือค้นหา Infoseek มีอินเทอร์เฟซแยกต่างหากพร้อมการตั้งค่าทั้งชุดสำหรับตรวจสอบสถานะของ URL:

โปรแกรมรวบรวมข้อมูลเว็บ
WebCrawler ให้ความสามารถในการตรวจสอบสถานะของ URL บนเพจ:

เดินเตร่
ในเครื่องมือค้นหานี้ สามารถตรวจสอบสถานะ URL ได้สองวิธี

• ในส่วน "การค้นหาขั้นสูง" โดยระบุชื่อเซิร์ฟเวอร์เป็นตัวพรางในตัวเลือกใดตัวเลือกหนึ่ง 100 คำยอดนิยมบน Rambler