מנועי חיפוש

לפני הולדתו של האינטרנט הייתה רשימה די ברורה של שרתי האינטרנט הקיימים והאתרים בתוכם. ככל שנוספו עוד ועוד שרתי אינטרנט לרשת, רשימה זו הלכה ואיבדה מערכה כיוון שלא הייתה יכולת לעמוד בקצב השינויים. בתחילה נבנה כלי בשם  Archie שנהיה לארכיון האינטרנט , מטרתו הייתה לייצר מאגר נתונים של קבצים שונים ברשת אך לא סרק את התוכן מתוכם.

האבולוציה של נסיונות לבניית מנוע החיפוש הטוב ביותר לרשת האינטרנט הייתה ארוכה ומעניינת. ב – 93 היה פיתוח באוניברסיטת MIT שמטרתו הייתה לייצר אינדקס ברשת שמטרותו הייתה למדוד את גודלה של רשת ה – WWW. ועד להופעותו של מנוע אשר התבסס על הודעתם של בעלי אתרים שיודיעו לו על קיומם כמו אינדקסים הקיימים עד להיום. משם הנסיונות לייצר את המכונה או הרובוט האולטמטיבי הייתה רצופה חויות רבות לחברות ואוניברסיטאות שונות. אפילו חברת Netscape ניסתה לייצר המנוע החזק ביותר על ידי שילוב של מספר מנועים חזקים שכבר היו פעילים כבר אז ולייצר רוטציה מסויימת בינהם במשך הזמן דרך שימוש בדפדפן שלהם.

לידתו של גוגל

גוגל רשמית נוסדה בשנת 1998 על ידי לארי פייג ובגי ברין. שני חברים מאורניברסיטת סטנפורד, מטרתם הברורה מרגע הראשון הייתה:

"to organize the world's information and make it universally accessible and useful"

טרם היה לגוגל הרבה נוכחות או הוכחת פעילות עד לפיצוצה של בועת ההיטק הגדולה בסוף שנות ה- 90.  כאשר המנוע עלה במלוא תפארתו הוא השיג ביצועים שאף מנוע חיפוש אחר לא השיג עד לאותו רגע. ההשיג הגיע באמצעות שימוש באלגוריתם הראשון שיצא משערי גוגל ה – pagerank.

אלגוריתם או המנוע ראשון שגוגל יצאו איתו למעשה עבד בצורת עכביש (spider). תפקידו העיקרי היה לעקוב אחר קישורים ברשת מתוך כל הדפים הקיימים ברשת וקודם כל לאנדקס (לרשום במאגר נתונים) אותם, לאחר מכן לנסות ולדרג אותם בצורה דומה. כאשר היה דף באינטרנט שדפים רבים הצביעו (link) אליו הייתה מסקנה של האלגוריתם כי כנראה מדובר בדף בעל ערך רב ולכן כך דירגו אותו גבוה בדף התוצאות במילות המפתח הקשורות לו.

מנועי החיפוש הקיימים

מנועי חיפוש שונים נולדו להם עם השנים ועם חשיבה מסחרית שונה אחד מהשני וניסיון להיות ייחודיים ככל שניתן. נוסדו מנועי חיפוש אשר התמקדו בתחומים מסויימים ושילבו מרכיבים נוספים שהפכו אותם לפורטלים גדולים ברשת.

המנועים הבולטים היום:

Google

Yahoo

Bing לשעבר Live חברת מיקרוסופט

AltaVista

Walla בישראל

נקודה חשובה להשוואה בין מנועי החיפוש היא שאף מנוע חיפוש פרט לגוגל לא לקח את עניין הלוקליזציה באופן רציני למדי ולא בנו את מאגר הנתונים שלהם גם לפי שפות שונות. תוכלו רק לנסות לחפש במנוע כמו altavistat את הביטוי קידום אתרים ולהבין כי התוצאות אינם רלוונטיות ואינם איכותיות. פרט לכך גוגל לקחו ולוקחים עוד היום את מדדי האיכות של בחירת דירוג האתרים למקום מאוד גבוה להבדיל ממנועי החיפוש האחרים וזה אחד הדברים שגרמו להצלחתו המסחררת.

מנוע החיפוש המשני כיום בישראל הוא Walla. מנוע זה מתבסס על טכנולוגיה שנרכשה על בסיס מנוע Yahoo ועבר הסבה לעברית. פרט לאנשים שעבדו על פרויקט זה אין אדם היודע איך בוצע תהליך ההסבה אך תוצאות החיפוש בו מראות תוצאות שונות מגוגל.