[Nordek]

То есть, если переключить на "Вкл", то документ может скачать посторонний человек (тот, кому я ссылку не давал)? »

Как раз наоборот: Может посмотреть любой у кого есть ссылка на файл или папку - по другому никак.

Можно ограничить круг:
При учёте что Публичная ссылка выключена, можно дать доступ к папке выбранным контактам - в этом случае у того контакта кому дал доступ: Появится твоя папка в Яндекс диске.
Далее ограничивая каким будет доступ "только просмотр" или "полный доступ".
При выборе "только просмотр" - пользователь может только скачивать.
При выборе "полный доступ" - пользователь может как скачивать, так и управлять файлами - Например: загрузить со своего компьютера файл к тебе на Яндекс Диск.