יש לי בעיה עם גוגל. הוא מנוע חיפוש טוב, הכי טוב שאני מכיר, אבל עבורי הוא ממש לא מספק. בסופו של דבר אני מוצא את מה שאני צריך (כמעט תמיד), אבל זה לוקח יותר מדי זמן. צריך להודות שמנועי חיפוש אחרים שניסיתי בעבר אכזבו אותי משום שהם מפספסים אתרים חשובים, וגם הכלים שהם מספקים פחות טובים מאלו של גוגל (למשל האפשרות לחפש בתוך אתר ספציפי). אני רוצה לסייג את עצמי, משום שיש שיפור גם במנועי החיפוש המתחרים לגוגל, כמו למשל Ask.com.
לדעתי, הבעיה העיקרית של גוגל היא זו: יש לו הטייה לטובת אתרים פופולריים, וכך הוא מפספס מאמרים איכותיים שמכילים מידע רב-ערך, אך לרוע מזלם הם נמצאים באתרים פחות פופולריים. זו לא הטייה מכוונת לדעתי, אלא היא נובעת משיטת הדירוג של האתרים על פי גוגל - PageRank. על אף שאני לא מכיר את כל הפרטים של השיטה (וזה כמובן סוד מסחרי שמור), אני רואה שאתרים מסוימים זוכים לעדיפות גם אם המידע שאני מחפש מוזכר שם בצורה לא ידידותית או שגויה. הדוגמה הכי טובה היא ויקיפדיה, שכמעט תמיד תופיע בין הראשונים, גם אם המאמר הספציפי גרוע. הדבר נובע מהפופולריות הרבה שיש לאתר הוויקיפדיה כולו, בלי קשר למאמר הנדון.
אני מתגבר על הבעיה הזו באופן חלקי בשתי שיטות: היכרות טובה עם אתרים רבים וחיפוש בעזרת מספר גדול של מילות חיפוש שיכוונו אותי לאתרים הרצויים לי. כך למשל, אני מכיר את ויקיפדיה היטב כי כתבתי עבורה מאמרים בעבר, וההיכרות הזו נתנה לי כלים להעריך את איכותו של כל מאמר, אבל זה לוקח זמן. בנוסף, אני מכיר את האנציקלופדיות המובילות, את המילונים הטובים ואת הבלוגים המדעיים העיקריים באנגלית ובעברית והרבה פעמים אני מעדיף לחפש בתוך אתר שאני סומך עליו ולא לבצע חיפוש כללי. כשאני מבצע חיפוש כללי אני משקיע קצת מחשבה בבחירת מילות החיפוש ובשימוש בגרשיים שנועדו לחפש צירוף מילים. עדיף להיות כמה שיותר ספציפי, משום שאז יש סיכוי טוב יותר שהמידע הרלוונטי ביותר יופיע בין החיפושים המובילים. שיטה נוספת היא חיפוש של תמונות שלפעמים מכוונות אותי טוב יותר למה שאני רוצה או חיפוש בעזרת Scholar שמוביל בעיקר למאמרים אקדמיים.
איזה מנוע חיפוש הייתי רוצה לראות? קודם כל שיהיו לו את כל הכלים של גוגל וכלים נוספים, כמו חיפוש במילונים בלבד ובאנציקלופדיות בלבד, חיפוש ברשימת אתרים מוגדרים מראש (למשל הסימניות שלי), חיפוש בקורסים של אוניברסיטאות, חיפוש בין תרגילים שניתנו כשיעורי בית, חיפוש באתרים של מדענים מתחום מסוים, חיפוש באתרי ספריות, חיפוש מתכונים, חיפוש מילות שירים, חיפוש ביצועי שירים ועוד. אני מאמין שניתן להשיג את כל זה בעזרת קטלוג מתאים של האתרים. בעצם צריך לעשות קטלוג של כל דף בכל אתר משום שהרבה אתרים מכילים דפים מתחומי עניין שונים. במקביל הייתי רוצה שתוצאות החיפוש ימויינו בין הקטגוריות השונות (אנציקלופדיות, מילונים, אתרים חברתיים וכו) כברירת מחדל, ושלא יופיע לי סלט של סרטונים עם שירים, הגדרות מילוניות, מאמרים מדעיים ומתכונים בכל פעם שאני מבצע חיפוש.
בנוסף, הייתי רוצה שהמנוע יהיה חכם יותר וידע לכוון אותי למאמר טוב באתר זניח, אך ימנע מלכוון אותי למאמר גרוע באתר מוביל. אני מתאר לעצמי שזו משימה קשה יותר, אבל אני לא חושב שהיא בלתי אפשרית. אני מאמין שהדור הבא של מנועי החיפוש יהיה חכם יותר, משום שגוגל הפיקה כמעט את המקסימום מאלגוריתם לא חכם, המבוסס בעיקר על פופולריות ועל קישוריות.
לדעתי, הבעיה העיקרית של גוגל היא זו: יש לו הטייה לטובת אתרים פופולריים, וכך הוא מפספס מאמרים איכותיים שמכילים מידע רב-ערך, אך לרוע מזלם הם נמצאים באתרים פחות פופולריים. זו לא הטייה מכוונת לדעתי, אלא היא נובעת משיטת הדירוג של האתרים על פי גוגל - PageRank. על אף שאני לא מכיר את כל הפרטים של השיטה (וזה כמובן סוד מסחרי שמור), אני רואה שאתרים מסוימים זוכים לעדיפות גם אם המידע שאני מחפש מוזכר שם בצורה לא ידידותית או שגויה. הדוגמה הכי טובה היא ויקיפדיה, שכמעט תמיד תופיע בין הראשונים, גם אם המאמר הספציפי גרוע. הדבר נובע מהפופולריות הרבה שיש לאתר הוויקיפדיה כולו, בלי קשר למאמר הנדון.
אני מתגבר על הבעיה הזו באופן חלקי בשתי שיטות: היכרות טובה עם אתרים רבים וחיפוש בעזרת מספר גדול של מילות חיפוש שיכוונו אותי לאתרים הרצויים לי. כך למשל, אני מכיר את ויקיפדיה היטב כי כתבתי עבורה מאמרים בעבר, וההיכרות הזו נתנה לי כלים להעריך את איכותו של כל מאמר, אבל זה לוקח זמן. בנוסף, אני מכיר את האנציקלופדיות המובילות, את המילונים הטובים ואת הבלוגים המדעיים העיקריים באנגלית ובעברית והרבה פעמים אני מעדיף לחפש בתוך אתר שאני סומך עליו ולא לבצע חיפוש כללי. כשאני מבצע חיפוש כללי אני משקיע קצת מחשבה בבחירת מילות החיפוש ובשימוש בגרשיים שנועדו לחפש צירוף מילים. עדיף להיות כמה שיותר ספציפי, משום שאז יש סיכוי טוב יותר שהמידע הרלוונטי ביותר יופיע בין החיפושים המובילים. שיטה נוספת היא חיפוש של תמונות שלפעמים מכוונות אותי טוב יותר למה שאני רוצה או חיפוש בעזרת Scholar שמוביל בעיקר למאמרים אקדמיים.
איזה מנוע חיפוש הייתי רוצה לראות? קודם כל שיהיו לו את כל הכלים של גוגל וכלים נוספים, כמו חיפוש במילונים בלבד ובאנציקלופדיות בלבד, חיפוש ברשימת אתרים מוגדרים מראש (למשל הסימניות שלי), חיפוש בקורסים של אוניברסיטאות, חיפוש בין תרגילים שניתנו כשיעורי בית, חיפוש באתרים של מדענים מתחום מסוים, חיפוש באתרי ספריות, חיפוש מתכונים, חיפוש מילות שירים, חיפוש ביצועי שירים ועוד. אני מאמין שניתן להשיג את כל זה בעזרת קטלוג מתאים של האתרים. בעצם צריך לעשות קטלוג של כל דף בכל אתר משום שהרבה אתרים מכילים דפים מתחומי עניין שונים. במקביל הייתי רוצה שתוצאות החיפוש ימויינו בין הקטגוריות השונות (אנציקלופדיות, מילונים, אתרים חברתיים וכו) כברירת מחדל, ושלא יופיע לי סלט של סרטונים עם שירים, הגדרות מילוניות, מאמרים מדעיים ומתכונים בכל פעם שאני מבצע חיפוש.
בנוסף, הייתי רוצה שהמנוע יהיה חכם יותר וידע לכוון אותי למאמר טוב באתר זניח, אך ימנע מלכוון אותי למאמר גרוע באתר מוביל. אני מתאר לעצמי שזו משימה קשה יותר, אבל אני לא חושב שהיא בלתי אפשרית. אני מאמין שהדור הבא של מנועי החיפוש יהיה חכם יותר, משום שגוגל הפיקה כמעט את המקסימום מאלגוריתם לא חכם, המבוסס בעיקר על פופולריות ועל קישוריות.