Всегда делаю через пункт меню "безопасно извлечь" или "отключить". При этом не знаю даже, как там сейчас организовано кэширование и есть ли риск реально попортить файловую систему. Но береженого бог бережет.