Помогите разобраться с грамматикой

[vera]

Может быть, это слишком примитивное понимание?

Ну "примитивное" я бы не сказала, слишком упрощенное скажем так
Самое главное в этом деле - это как можно меньше ориентироваться на русский.
Если вы только начинаете изучение, тогда вы просто можете запомнить две вещи:
- если после глагола идет глагол в инфинитиве - то это <savoir> (<savoir lire>, <savoir coudre>, <savoir écouter>, <savoir plaire>)
- если после глагола идет <que/ où/ si/....> - тоже <savoir>
(это, конечно, тоже упрощенно, но в детали, думаю, пока вникать не надо)

ПС: Ваш пример с адресом, кстати, очень хороший, т.к. можно <connaître l'adresse de qqn>, а можно и <savoir l'adresse de qqn> И вот тут-то и начинаются сложности