אליאנה דוקטרמן, כתבת ב[[Time]] האמריקאי, תיארה את הסרט כלא נאמן לחלוטין למציאות. היא כתבה כי "אלן נולד בחווה
בוירגבווירג'יניה ב-1919, לא בג'ורג'יה... בסרט ססיל גיינס גדל בשדה כותנה ב[[מייקון (ג'ורג'יה)]], כאשר משפחתו נכנסת לקונפליקט עם החקלאים הלבנים שהם עובדים עבורם. מה שקרה להוריו בשדה הכותנה הוסף בשביל האפקט הדרמטי... למרות שמתח בין ענייני זכויות אדם בין אב וילד מתדלקים הרבה מהדרמה בסרט, צ'ארלס אלן לא היה ה[[אקטיביזם|אקטיבסט]] הקיצוני שדמותו בסרט משחקת"{{הערה|Dockterman, Eliana (August 16, 2013). "The True Story of The Butler: Fact vs. Fiction in Lee Daniels' The Butler". Time.}}.<blockquote>ביקורת נוספת כוונה על הדיוק של הסרט בהצגתו את נשיא ארצות הברית לשעבר [[רונלד רייגן]]. הביקורת העיקרית היא כי הסרט הציג את רייגן כאדיש לזכויות אדם ומתעלם לחלוטין מהעובדים השחורים בבית הנשיא. לטענת בנו של רונלד רייגן, [[מייקל רייגן]], "הסיפור האמיתי של משרת הבית הלבן הוא כלל לא גזעני. אלו [[ליברליזם|ליברלים]] מהוליווד שרוצים להאמין משהו לגבי אבי שלעולם לא היה נכון."{{הערה|Bond, Paul (August 26, 2013). "President Reagan's Son Attacks 'Lee Daniels' The Butler'". The Hollywood Reporter. Retrieved August 28, 2013.}}{{הערה| "The Butler falsely portrays Ronald Reagan as racist, says son". The Guardian. August 29, 2013. Retrieved September 1, 2013.}}מעביר ביקורת נוסף בנושא הוא [[פול קנגור]], אחד מהביוגרפים של הנשיא רייגן. קנגור אמר, "רונלד רייגן נגעל מה[[אפרטהייד]], אך הוא גם רצה לוודא שאם שלטון האפרטהייד בדרום אפריקה יפול הוא לא יוחלף על ידי שלטון [[מרקסיזם|מרקסיסטי]] [[טוטליטריזם|טוטליטריסטי]] בשיתוף פעולה עם מוסקבה וקובה שיקח את הדרום אפריקאים באותה הדרך בה נשבתו [[אתיופיה]], [[מוזמביק]], ו, כן, [[קובה]] [...] אם הסרט מסרב להתמודד עם הסוגיה הזו באופן מאוזן, הוא לא צריך לעסוק בה בכלל."{{הערה| "Lee Daniels' 'The Butler': Reagan Biographers Slam President's Portrayal". Hollywood Reporter.com. August 16, 2013. Retrieved September 1, 2013.}}</blockquote>המבקר הפוליטי [[בן שפירו]] כתב: "אין שאלה לגבי זה שהסרט מלא באי דיוקים היסטוריים. ל"משרת" יש קשר אפסי לחומר עליו הוא מבוסס, חיי משרת הבית הלב ג'ין אלן, מלבד העובדה שהדמות הראשית בסרט ואלן היו שניהם משרתים שחורים בבית הלבן. הדמות הראשית בסרט, ססיל גיינס, רואה את אביו נרצח ואמו נאנסת על ידי בעל אדמה לבן; זה לא קרה לאלן. לדמות הראשית בסרט יש שני ילדים, אחד שהולך למלחמת וייטנאם, השני נעשה [[פעיל זכויות אדם]]; לאלן היה רק בן אחד."{{הערה| Shapiro, Ben (August 18, 2013). "'The Butler' Filled with Historical Inaccuracies, Finishes #1". Breitbart.com. Retrieved August 28, 2013.}}
