Google Scholar  שכולל מאמרים מכתבי עת וגם מציג נתונים על ציטוטים של מאמרים נחשב לעתים כמקור אלטרנטיבי או משלים למאגרי מידע ייעודיים לציטוטים כמו Web of Sciences או Scopus. האם זה כך? מה יעילותו של גוגל סקולר לניתוחים ביביליומטריים ומה יעילותו ככלי להערכה מחקרית /מדעית.

על כך מנסה מחקר חדש שאמור להתפרסם בקרוב בכתב העת Scientometrics לענות. המחקר:
Is Google Scholar useful for bibliometrics? A webometric analysis
התבסס על ניתוח כתובות הדומיין של המקורות ולא על ניתוח של שמות מחברים או מוסדות. איסוף הנתונים התבצע ב- אוגוסט 2010.

בהסתמך על ניתוח זה המחקר הגיע למסקנה שגוגל סקולר חסר את בקרת האיכות של כלי ביבליומטרי. הכיסוי הגבוה שהוא מציע כולל לעתים פריטי מידע שאין להשוותם עם אלה של מאגרי מידע דומים. כך למשל מממצאי המחקר:
אוניברסיטאות מסין, טיוואן , ספרד, ברזיל ואינדונזיה מיוצגות ומדורגות מעבר למצופה.
במקרים מסוימים מאגרי מידע בינלאומיים גדולים או לאומיים או מאגרים מוסדיים אחראים למספר הרב של התוצאות. אך בהרבה פעמים אחרות תכנים מקומיים, כולל נירות בכתבי עת בעלי אימפקט נמוך , ספרות מדעית פופולרית , דוחות שלא פורסמו או חומרים תומכי הוראה מוצגים יתר על המידה.

לאור זאת, המסקנה של המחקר היא שהשימוש בגוגל סקולר למטרות ביבליומטריות והערכה צריך להיעשות בזהירות, במיוחד לגבי פריטי מידע שאינם חופפים עם אלה שקיימים ב- Scopus או ב-Wos .

יחד עם זאת השקתו של Google Scholar Citations והעדכון של Microsoft Academic Search משנים את דרגת המחויבות של מנועי חיפוש אלה לניתוח הציטוטים, בעיקר בכל הקשור לתיאור אישי ומטרות הערכה. ניתנת האפשרות למחברים לתקן טעויות לשנות פרופיל וכו' ברוח הווב 2.0 ובכך כלים אלה הופכים מתחרים רציניים לרשת החברתית הייעודית לאקדמיה – ResearchersID של ISI Thomson או לשירותי זיהוי המחברים של Scopus