১৯৭৩ সালে "চট্টগ্রাম কলাভবন" প্রতিষ্ঠার উদ্যোগ গ্রহণ করেছিলেন চিত্রশিল্পী রশিদ চৌধুরী। একই বছর ২৩ এপ্রিল ফরাসি মনীষী মসিয় অঁদ্রে মাল্রো বর্তমান শিল্পকলা একাডেমি চত্বরে তৎকালীন চট্টগ্রাম কলাভবনের উদ্বোধন করেন। পরবর্তীতে ১৯৭৭ সালে চট্টগ্রাম উৎসব ১৯৭৭ উদ্যাপনের উদ্যেশ্যে শিল্প ও সাহিত্য পরিষদের সভাপতি এবং তৎকালীন জেলা প্রশাশক হাসনাত আবদুল হাইয়ের পৃষ্ঠপোষকতায় "চট্টগ্রাম কলাভবন" নামে একটি অস্থায়ী মঞ্চ নির্মাণ করা হয়।
পরবর্তীকালে ১৯৯৫ সালে, বাংলাদেশ ভূমি মন্ত্রণালয় কতৃক স্বয়ংক্রিয় নবায়নযোগ্য লীজ হিসাবে প্রদানকৃত একাডেমির বর্তমান স্থানে শিল্পকলা একাডেমি ভবন নির্মাণ করা হয়।
পরিকল্পনা ও বাস্তবায়নে: মন্ত্রিপরিষদ বিভাগ, এটুআই, বিসিসি, ডিওআইসিটি ও বেসিস