ב- 2 ביוני 2011 שלושת מנועי החיפוש הגדולים Google, Bing, Yahoo הצהירו על Schema.org – יוזמה משותפת שתומכת בשפה משותפת לתיוג מידע מובנה בדפי ווב.

בעזרת Schema.org בעלי אתרים ומפתחים יוכלו ללמוד יותר על נתונים מובנים, יוכלו להטמיע בקלות יחסית מידע סמנטי בתוך הקוד של דפי הווב הקיימים – דפי5 html – מידע שמכונות יכולות להבין ולחלץ אותו באופן חד משמעי. בכך יסיעו למנועי חיפוש להבין טוב יותר את התכנים של דפי הווב שלהם.

המשמעות מבחינתם של מנועי החיפוש והמשתמשים היא תשובות מדויקות יותר למספר רב יותר של שאלות. כך למשל בתוצאת חיפוש של ספר, מנוע החיפוש יוכל להציג גם את מספרי העמודים שלו ואת ה- ISBN שלו, שכן המידע המובנה יסייע למחשבים להבין את המידע ולחלץ את המידע הדרוש מתוך דפי הווב . המשמעות מבחינת אתרי ווב שיאמצו סכימה זו היא הגדלת הנראות שלהם במנועי חיפוש.

המשמעות של Schema.org היא התקדמות לקראת החזון של הווב הסמנטי שבו מידע על יסייע למחשבים להבין את התכנים, אבל בקהילת הווב הסמנטי הדעות לגבי היוזמה בכל זאת חלוקות. זמן רב עבדו על פיתוח שפות כמו RDF שיקדמו את הווב הסמנטי והם רואים ב- Schema.org מגבלות ביחס ל- RDF , אבל מצד שני בשל הפשטות היחסית שלה אחרים סבורים שיהיה יותר קל לשווק אותה ובכך לקדם את חזונו של הווב הסמנטי.

פירוט יתר על היוזמה והשלכותיה

ההצהרה על היוזמה
לאתר Schema.org

Blogpulse הוא מנוע חיפוש ייעודי לבלוגים. אפשר לחפש בו על פי כתובת URL ועל פי מילות מפתח. הוא תומך באופרטורים הבוליאניים : AND, OR, NOT

בחיפוש מתקדם אפשר להגביל את החיפוש על פי תאריך, למיין על פי רלוונטיות או עדכניות ולקבוע את מספר התוצאות שיוצגו בכל דף.

בתוצאות החיפוש ליד כל אחת מתוצאות החיפוש אפשר לראות את הפרופיל של הבלוג ממנו נלקחה תוצאת החיפוש.

בנוסף לחיפוש הרגיל יש ל Blogpulse מספר כלים נוספים שיכולים להצביע על מגמות. כך למשל trend search מאפשר ליצור גרפים שמצביעים על מגמה לאורך זמן בהקשר של מונח החיפוש – אנשים, חברות, נושאים שונים – או משווים בין מגמות של מספר מונחי חיפוש (עד 3) .

כלי נוסף Featured Trends מאפשר לזהות את הבאז התקשורתי בתחומים שונים כפי שבא לידי ביטוי בעולם הבלוגספירה

כלי מעניין נוסף הוא Conversation Tracker שמאפשר מעקב אחר השיח בבלוגוספירה שהתפתח מפוסט מסוים , באמצעות מעקב אחר הקישורים שמקורם בפוסט מסוים . מעקב זה מתאפשר הודות לאינדקס שיוצר המנוע מהטקסט המלא של הפוסטים בבלוגים ומעקב אחר ה- permalinks.

למנוע החיפוש 

BioPortal הוא מאגר בינלאומי לאונטולוגיות בתחום הביורפואי. המאגר נוצר ומתוחזק על ידי NCBO . NCBO – The National Center for Biomedical Ontology נוסד ב-2005 כדי לעזור לאנשי מדע בתחום הביורפואי להשתמש באונטולוגיות לצורך ארגון המידע.

NCBO גם מציע כלים ושירותי ווב שמאפשרים למשתמשים גישה ושימוש באונטולוגיות למגוון יישומים. מרכז זה גם תומך בפיתוח טכנולוגיות סמנטיות בתחום הביורפואי.

BioPortal הוא התרומה הנראית העיקרית של NCBO לקהילה הביורפואית. האתר מספק גישה ליותר מ- 200 אונטולוגיות ושפות מבוקרות בתחום הביורפואי. אפשר לדפדף באתר וגם לחפש אונטולוגיות על פי מונחי חיפוש. האתר מאפשר גם מיפוי בין אונטולוגיות לצורך השוואה.

כמו כן האתר מאפשר חיפוש במגוון מקורות של מידע רפואי תוך שימוש במונחי האונטולוגיות שלו. חיפוש זה אפשרי בזכות האינדקס שיצר NCBO מהתכנים של עשרות מאגרים תוך שימוש במונחי האונטולוגיות שב- BioPotal .תוצאות החיפוש מציגות את המאגרים כשליד כל אחד מהמאגר מספר התוצאות מאותו מאגר, במסך התוצאות מתקבלות גם הצעות לעידון השאילתה.

מעבר להיותו של BioPortal מאגר אונטולוגיות, ואינדקס לעשרות מאגרים  הוא מהווה גם קהילה מקוונת למפתחי אונטולוגיות ולמשתמשים שיכולים להעיר הערות ולדון בתכנים של האונטולוגיות.

למרות שהאונטולוגיות ב- BioPortal מיועדות בעיקר לתחום הביורפואי , התוכנה היא לגמרי גנרית וניתנת לשימוש ליצירת מאגרי אונטולוגיות בתחומי מחקר אחרים. פרטים נוספים על הפורטל אפשר למצוא בגיליון 11 של – Nodalitiies המגזין הייעודי לווב הסמנטי

לפורטל

לפרטים נוספים על הפורטל

חברת גוגל מממנת מחקר של חוקרים ממדעי המחשב באוניברסיטת תל אביב שמטרתו לאפשר למחשבים לחזות טוב יותר את העתיד .

המחקר בראשותו של פרופסור ישי מנצור מאוניברסיטת תל אביב הושק בכנס בינלאומי בתחום הלמידה החישובית – Conference On Learning Theory-COLT שנערך בחיפה בסוף יוני 2010 . בלמידה חישובית המערכת משתמשת בשיטות אנליטיות לניתוח מידע ומפתחת תובנות על סמך המידע שמוצג לה. חיזוי העתיד מושתת על היכולת ללמוד ולהפיק לקחים מניסיון העבר. הרעיון בחיזוי העתיד על ידי מחשבים, כפי שבא לידי ביטוי בפרויקט הנ"ל  הוא שעל ידי מדידת המרחק בין התוצאה הרצויה והמעשית , הלא כל כך רצויה, מחשבים יוכלו לקבל החלטות נכונות יותר לגבי העתיד .

מן הראוי לציין שמימון פרויקט זה על ידי חברת גוגל קדמה לו מעורבותה של גוגל ב-recorded future.com – אלגוריתם שמנתח אירועים מהעבר לצורך חיזוי העתיד.

עוד מן הראוי לציין שמחקר זה של חוקרים ממדעי המחשב באוניברסיטת תל אביב הוא אחד מיני רבים שאותם אפשר לראות באתר Tel Aviv University's American Friends

כאשר אנו רוצים להוסיף תמונה חינמית מהרשת לבלוג או לכול מידע אחר שאנו מפרסמים , חשוב מתוך האוסף ההולך וגדל של תמונות לבחור את התמונות שזמינות לנו חופשי במסגרת רישיון גמיש שמתיר שימוש, הפצה ושימוש חוזר בתמונה מבלי להפר זכויות יוצרים. רישיון creative commons מתיר זאת.

תמונות חופשיות במסגרת הרישיון הגמיש  Creative commons אפשר למצוא לאחר סינון מתאים ב-flickr וגם בגוגל בחיפוש המתקדם. כדי להכניסן לבלוג או למקור מידע אחר שאנו מעוניינים, בדרך כלל יש צורך לערוך אותן תחילה בתוכנה גרפית כלשהי כדי להגיע לגודל הרצוי לנו וכו' .

מבחינה זו מנוע החיפוש Wylio מקל עלינו את העבודה. הוא כולל מיליוני תמונות שזמינים ברישיון גמיש ב- flickr ומאפשר לנו לערוך אותם מבחינת גודל ומיקום וגם מייצר את הקוד המתאים לצורך שתילתו בבלוג או באתר אחר ברשת.

מאחר ועל פי מה שכתוב באתר, התמונות ב-Wylio לקוחות מ- flickr כדאי לא לשכוח את גוגול והאפשרות שהוא מספק לנו במנשק החיפוש המתקדם לסינון תמונות חופשיות מבלי להפר זכויות יוצרים.

למנוע החיפוש Wylio

לפוסט קודם בבלוג  בנושא חיפוש תמונות במסגרת Creative commons

מנועי חיפוש משתדלים להתאים את תוצאות החיפוש למשתמש – מחפש המידע. עד כה מנועי החיפוש לקחו בחשבון יחסים בין נתונים,  כיום נראה שהם מוסיפים לתוצאות החיפוש גם יחסים בין אנשים – רובד חברתי לחיפוש.

הרובד החברתי בבינג מושתת כיום בעיקר על שיתוף פעולה עם facebook . לגוגל נכון להיום אין שיתוף פעולה עם facebook והרובד החברתי בא לידי ביטוי בשיתוף פעולה עם twitter

מנוע החיפוש   Bing הודיע על הוספת רובד חברתי לחיפוש תוך שיתוף פעולה עם facebook באוקטובר 2010 . מאז מאפיין זה עודכן וב- 24 בפברואר BING הודיע על הרחבת שיתוף הפעולה שלו עם facebook , בשלב זה למשתמשים בארה"ב .

החיפוש החברתי בא לידי ביטוי בהצגת "תוצאות Liked" של החברים מהרשת החברתית פייסבוק. כך למשל אם עורכים חיפוש מסוים בתחום התיירות ומתקבל בתוצאות החיפוש אתר  מסוים שחברים סימנו אותו כ- "like ", בתוצאת החיפוש יופיע מידע על החברים שאהבו את האתר. . מאפיין זה יכול לסייע בקבלת החלטות . כך למשל אם אנו מחפשים מכונית לקנייה ומתחת לתוצאת חיפוש מסוימת נראה שהחברים אהבו את זה – כמובן שזה יקל עלינו לקבל החלטה. באופן זה נעשה שילוב של מקור המידע הטוב ביותר – הווב, עם מנוע ההחלטות הטוב ביותר – האדם – חברים שבהם בוטחים. . שיתוף הפעולה facebook – bing משפר את תוצאת החיפוש בבינג בכל הקשור לפרסונליזציה.

כאמור לעיל , גוגל בשלב זה כולל תוצאות מ-twitter .

ומי שמעוניין בשני המאפיינים בו זמנית יכול להשתמש בתוספים לדפדפן כמו זה של Wajam, שיעשו לו את העבודה …

Greplin הוא שירות חדש שמאנדקס ומאפשר חיפוש בחשבונות האישיים במדיה חברתית – מה שמכונה לעתים ה"ענן האישי". נכון להיום השירות משתמש בשירותי הענן של אמזון.

לשירות יש גרסה חינמית וגירסה בתשלום.
הגירסה החופשית מאנדקסת תכנים מחשבונות ב-, Twitter Facebook, Gmail , Google Docs & Calendar- ו- Dropbox, LinkedIn . הגרסה בתשלום מאנדקסת מקורות נוספים כגון Evernote ו-Yammer . בעתיד תהיה אפשרות לאנדקס גם שירותים נוספים.

היישום מבקש אישור לאנדקס חומרים מהיישומים שבוחרים, ולשם כך יש להזין את שם המשתמש והסיסמה האישיים של אותו יישום. אפשר לחפש בכל היישומים שנבחרו ואפשר לסנן את החיפוש ליישום מסוים. כמו כן יש אופציות נוספות להגבלת חיפוש על פי סוגי מידע כגון הודעות, אנשים , אירועים ועוד. .

תוצאות החיפוש כוללות לא רק את הפוסטים והמסמכים האישיים מהשירותים השונים אלא גם פוסטים ומסמכים משותפים מחשבונות של חברים

לGreplin

כתבה בנושא

היום – 26 בינואר, יד ושם וגוגל השיקו פלטפורמה חדשה שמטרתה היא להנגיש את הארכיון של יד ושם לכלל הציבור.

בצעד ראשון זה של העלאת הארכיון של יד ושם לענן של גוגל הועברו כבר 130 אלף תמונות. חלקן עברו דיגיטציה ותיוג. כמו כן נוספו יכולות חיפוש נוספות לתמונות כולל יכולת לזהות כיתובים בתמונות באמצעות טכנולוגת OCR .

משמעות הפרויקט מבחינת המשתמשים הוא נגישות לפריטים בארכיון של יד ושם באמצעות חיפוש רגיל בגוגל ,חיפוש בארכיון באתר של יד ושם ,ואפשרות לצפות בעדוית מוקלטות של ניצולים באתר יוטיוב ששיך לגוגל.

יש לציין שמחר הוא יום השואה הבינלאומי והשקתו היום של הפרויקט, שתחילתו בשיתוף פעולה בין גוגל ויד ושם כבר לפני שלוש שנים, אינה מקרית .

מנוע החיפוש BLekko אימץ לו את הסיסמה Slash the Web . ואכן המאפיין הייחודי שלו הוא סינון תוצאות החיפוש על ידי שימוש ב-Slashtags Slashtags מאפשרים למשתמש למקד את החיפוש על ידי שימוש בהגבלות מסוימות בהתאם למה שמופיע אחרי ה- / .קיימים במערכת Slashtags מוכנים ומשולבים במערכת כגון: : – flickr/, youtube /, maps/, people / שמאפשרים למשתמש לסנן את תוצאות החיפוש על פי סוג מסוים של אתרים. קיימים גם מאות Slashtags נושאיים. כמו כן המערכת מספקת למשתמש אופציה להגדיר Slashtags משלו, שיאפשרו חיפוש רק באותם אתרים שיוגדרו על ידי המשתמש. למשתמש שיוצר Slashtags יש אפשרות לשמור את ה- Slashtags כפרטיים או לשתפם ואף להתיר את עריכתם על ידי אחרים.

אפשר לשלב בשאילתת החיפוש מספר Slashtags. פירוט נוסף על אופן השימוש במערכת אפשר למצוא במערכת העזרה באתר.

בחירת אתרים נבחרים על ידי המשתמשים והגדרתם כ- Slashtags מאפשרת למטב את תוצאות החיפוש תוך ניצול חוכמת ההמונים, וזהו ייחודו של BLekko. מאפיין זה אמנם קיים במנועי חיפוש מותאמים אישית אבל ייחודו הנוסף הוא באפשרות לשלב סוגים שונים של Slashtags חלקם מובנים במערכת

למנוע החיפוש

משתמשים רבים מחפשים מידע רפואי באינטרנט ואכן קיימים באינטרנט אתרים רבים דוגמת WebMD שמספקים מידע רפואי ל- consumers.

אלא שקיימת בעיית "פער השפה" – הפער בין המונחים הרפואיים ובין מונחים בסלנג שבהם מחפשים המשתמשים. בעיה זו פוגעת ברלוונטיות של תוצאות החיפוש. כדי להתגבר על הבעיה חוקרים ב- Georgia Tech פתחו את DiaTM – Dialect Topic Modeling for Improved Consumer Medical Search – שלומד את שפת המשתמש ובכך משפר את תוצאות החיפוש.

לימוד שפת המשתמש על פי DiaTM מתבצעת על ידי השוואת מסמכים רפואיים רבים שכתובים ברמות שונות של שפה טכנית. על ידי כך המערכת לומדת על הקשר בין מונחי סלנג ומצבים וסימפטומים רפואיים שונים ובכך מצטמצם פער השפה בין שפת המשתמש ובין שפת מאגרי המידע בהם הוא עורך את החיפוש. כך למשל אחרי עיבוד של כמות מספקת של מסמכים המערכת לומדת שמשמעות המונח gunk בהקשרים מסוימים היא discharge. המסמכים שמשמשים את המערכת לצורך השוואה ולימוד לקוחים ממספר מגוון של מקורות מידע כגון: WebMD Yahoo! Answers, PubMed Central, the Centers for Disease Control & Prevention website sources ואחרים.

במחקרים שנערכו לבדיקת DiaTM נמצא שהוא שיפר את הרלוונטיות של התוצאות ב- 25%

טכניקה זו של DiaTM אינה מצטמצמת רק לתחום הרפואי וניתן ליישמה על תחומים אחרים.
נייר העבודה שמתאר את המערכת:
“Dialect Topic Modeling for Improved Consumer Medical Search,”
הוצג ב- 17 בנובמבר במפגש השנתי של American Medical Informatics Association, Washington, D.C

לפרטים נוספים

הווב מכיל דפים רבים עם מידע מתעדכן ומתחדש – ידיעות חדשותיות, פוסטים בבלוגים וציוצים. לעבד את המידע ידנית היא משימה בלתי אפשרית. מנועי חיפוש מסוגלים לאתר פריטי מידע של מידע אבל מותירים מאחור את התמונה השלמה. Extractiv – שירות לחילוץ מידע מטקסט יכול לסייע במשימה.

Extractiv הוא שירות שהופך באופן אוטומטי טקסט לא מובנה לטקסט סמנטי מובנה. משלב זחלן שסורק דפי ווב על פי בקשה או הגדרת מלות מפתח, ויכולת של ניתוח בשפה טבעית. מזהה זהויות וקשרים ביניהם.

Extractiv מאפשר למשתמש להגדיר מה הוא רוצה לחלץ מהטקסט כך למשל אם מגדירים לו עיר הוא יחלץ את כל הערים , כמו כן הוא מאפשר למשתמש להגדיר באיזה פורמט הוא רוצה לקבל את התוצאות. השירות הוא בתשלום. מדי פעם ג'וב של עד 1000 URL אפשר לקבל חינם לאחר הרשמה חינמית לפורטל.

במהלך תהליך הגדרת המשימה על ידי המשתמש – המשתמש בוחר נושא מתוך רשימת נושאים כגון רפואה, מחשבים, וזהויות שמוצעות למשתמש לבחירה בהתאם לתחום שבחר – כך למשל ברפואה מוצעות זהויות כמו דוקטור, תרופה, מחלה, בתי חולים וכו' , במחשבים – אלגוריתם שפת תכנות ועוד..

המשתמש בוחר קשרים אותם הוא רוצה שהכלי ינתח כמו גיל, מספר טלפון, דת, שפה. אפשר להזין מלות מפתח והיישום מחפש אתרים בהתאם. אפשר לתת רשימת אתרים ממנה יתחיל את הסריקה , אפשר לבקש שיסרוק את כל הקישורים או להתמקד בדומיינים מסוימים , להגדיר את עומק הסריקה, מספר URL שיסרוק, פילטרים , ובאיזה פורמט רוצים לקבל את התוצאות – – JSON, XML, RDF. בעתיד מבטיחים גם . sentiment analysis

שירות כזה יכול להיות יעיל לקבלת מידע על אדם מסוים או חברה מסוימת וגם על נושא מסוים והוא מהווה חזון לעתיד..

לאתר השירות
מידע באתר אודות השירות