کاستلو براون یکی از مهم ترین مکان های بوتوفینو است که در قرن پانزدهم به عنوان قلعه ای برای محافظت از ساحل ساخته شد و سپس در طول تاریخ به یک ویلای زیبا تبدیل شد و طرح اصلی ساختمان را با تغییراتی کوچک حفظ کرد. امروزه گردشگران و مردم محلی از ویلا دیدن می کنند که موزه ای منحصر به فرد محسوب می شود و تاریخ پورتوفینو را با نمایشگاه ها، نقاشی ها و مبلمان مجلل خود منعکس می کند.