It is stated in Yoma (30a): Our Rabbis taught: The halakha regarding a meal is that if a person goes out to urinate, meaning he left in the middle of the meal to urinate, he washes one of his hands and enters—that hand with which he rubbed the droplets that fell on his feet (Rashi)—and he must recite the blessing 'al netilat yadayim' (Magen Avraham, subsection 2). And when he washes, he should not wash outside, but rather he washes in a manner that everyone will notice that he washed, so that they do not suspect him of not washing; for perhaps someone saw that he rubbed the droplets and they will come to suspect him (ibid., subsection 3). Therefore, if in truth he did not rub the droplets and did not touch a covered place, he does not need to wash at all. But if he relieved himself for a bowel movement—in any case he requires washing. And that which we said, that he should not wash outside because of suspicion, this is when he does not want to eat anymore but only to drink, and during the drinking they also eat a little, and in this they will suspect him that he is not careful in this and did not wash his hands. But if he needs to eat more, then he may wash even outside, for in this they will not suspect him, as everyone knows that regarding this every person is an istanis and certainly washed his hands. And in the Gemara there it is stated: "Rav Nachman bar Yitzchak said: And I, even for drinking they also know that I am fastidious," meaning I am an istanis, see there. And the Tur and the Shulchan Aruch omitted this, for we should not compare ourselves to them, and so too the Rambam in chapter 7 omitted this, see there. And if in the middle of the meal he left the table and spoke with his fellow and stayed away, meaning that he lingered with him a long time in matters outside the table—he washes both his hands and enters, for since he stayed away an hour or two he diverted his mind from his meal and was not careful to guard his hands, and they are busy (Rashi). And it appears that he does not need a blessing and also does not need 'Hamotzi', as written in siman 178 (Magen Avraham, subsection 4). And when he stays away, he must always wash in a manner that they notice, for here they will certainly suspect him (ibid., subsection 5). And know that this which was explained, that he requires washing for drinking, this is specifically during the meal, for there is a concern that perhaps he will also eat; but for drinking without a meal—he does not require washing, meaning that the laws of netilat yadayim do not apply there, and if his hands are not clean he washes them however it may be and without a blessing.
איתא ביומא (ל'.): תנו רבנן: הלכה בסעודה אדם יוצא להשתין מים, כלומר שיצא מתוך הסעודה להשתין, נוטל ידו אחת ונכנס, אותה יד ששפשף בה הנצוצות שנפלו על רגליו (רש"י), וצריך לברך 'על נטילת ידים' (מגן אברהם סק"ב). וכשהוא נוטל לא יטול מבחוץ, אלא נוטל באופן שכולם ירגישו שנטל, כדי שלא יחשדוהו שלא נטל, ושמא ראה אחד ששפשף הנצוצות ויביאם לידי חשד (שם סק"ג). ולכן אם באמת לא שפשף הנצוצות ולא נגע במקום הסתרים, אין צריך ליטול כלל. אבל אם עשה צרכיו לנקבים גדולים - בכל עניין צריך נטילה. וזה שאמרנו שלא יטול מבחוץ מפני החשד, זהו כשאינו רוצה לאכול עוד אלא לשתות, ובהשתייה אוכלין גם כן מעט, ובזה יחשדוהו שאינו מקפיד בזה ולא נטל ידיו. אבל אם צריך לאכול עוד, אז יכול ליטול אפילו מבחוץ, דבזה לא יחשדוהו, דהכל יודעים דלעניין זה כל אדם אסטניס ובוודאי נטל ידיו. ובגמרא שם איתא: "אמר רב נחמן בר יצחק: ואנא אפילו לשתות נמי מידע ידעי דאנינא דעתאי", כלומר אסטניס אני ע"ש. והטור והשולחן ערוך השמיטו זה, דאין לנו לדמות עצמינו להם, וכן הרמב"ם בפרק ז' השמיט זה ע"ש. ואם באמצע הסעודה יצא מהשלחן ודיבר עם חבירו והפליג, כלומר ששהה עמו הרבה בדברים חוץ להשלחן - נוטל שתי ידיו ונכנס, דכיון שהפליג שעה או שתים הסיח דעתו מסעודתו ולא נזהר לשמור ידיו, והן עסקניות (רש"י). ונראה דאין צריך ברכה וגם 'המוציא' אין צריך, כמ"ש בסימן קע"ח (מגן אברהם סק"ד). ובהפליג לעולם צריך ליטול באופן שירגישו, דבכאן וודאי יחשדוהו (שם סק"ה). ודע דזה שנתבאר שצריך נטילה לשתייה היינו בתוך הסעודה, דיש חשש שמא יאכל גם כן, אבל בשתייה בלא סעודה - אין צריך נטילה, כלומר דאין שם דיני נטילת ידים, ואם ידיו אינם נקיות נוטלן איך שהוא ובלא ברכה.