辞書の通り「sidewalk」は「歩道」です。

「building by the sidewalk （歩道のそばの建物）」なんて、殆ど全ての建物の横に歩道がありますので、全く意味のない言葉です。

チャンドラーの顔リアクションを見てても分かりますが、単にジョーイのバカさ加減をジョークにしているだけです。