প্রাচীনকালে গ্রামবাংলায় ঘোড়দৌড়ের প্রচলন থাকলেও ঢাকা শহরে বাজি ধরে ঘোড়দৌড়ের সূচনা হয় ব্রিটিশ শাসনামলে। ঢাকায় ঘোড়দৌড়ের সূচনা হয় উনিশ শতকের গোড়ার দিকে। প্রথমদিকে শুধু ইউরোপিয়ানরাই এ খেলার আয়োজক, প্রতিযোগী ও বাজিকর ছিল। পরে ঢাকার নবাব পরিবারের সদস্য ও ধনাঢ্য ব্যক্তিরা এর সঙ্গে যুক্ত হন।  

এর কিছুকাল পর ঢাকার সাধারণ মানুষের মধ্যেও ঘোড়দৌড় উপভোগ করার একটা তীব্র প্রবণতা লক্ষ্য করা যায় । তবে ঢাকায় নিয়মিত ঘোড়দৌড়ের প্রচলন করেন নবাব আব্দুল গণি (১৮৩০-১৮৯৬)।

এককালে ঢাকার শাহবাগ ও রমনা এলাকার বেশিরভাগ জায়গা ছিল ঢাকার নবাবদের সম্পত্তি। নবাব আবদুল গণি ঘোড়দৌড়ের জন্য রমনার ১০০ একর পরিমাণ জমি দান করেন। ঢাকায় ঘোড়দৌড় প্রবর্তনে তাকে সাহায্য করেন তার ইংরেজ ম্যানেজার জি. এল. গার্থ । ঘোড়দৌড়ের জন্য রমনার ঝোপঝাড় পরিষ্কার করে চমৎকার একটি উন্মুক্ত প্রান্তরে রূপ দেয়া হয়। মাঠের চারদিকে দুই কিলোমিটার দীর্ঘ গোলাকার কাঠের ব্যারিকেড দেয়া হয়। একসঙ্গে ১৪/১৫টি ঘোড়া যাতে পাশাপাশি দৌড়াতে পারে সেজন্য ব্যারিকেডের ভেতর মাটি সমান করে ঘাস লাগানো হয় । ইউরোপিয়ান নারী-পুরুষ এবং ঢাকার অভিজাত পরিবারের সদস্যরা বসে যাতে ভালোভাবে ঘোড়দৌড় উপভোগ করতে পারে, তার জন্য একটি আকর্ষণীয় দোতলা কাঠের গ্যালারি নির্মাণ করা হয়। স্থানীয় গণ্যমান্য ব্যক্তি ও ঢাকা ক্লাবের সদস্যদের নিয়ে একটি পরিচালনা কমিটি গঠন করা হয়।

ঢাকাবাসীর কাছে ঘোড়দৌড়ের জনপ্রিয়তা ছিল আকাশ ছোঁয়া । বিখ্যাত সিভিলিয়ন হেনরি বেভারেজ ১৮৩৬ সালে তার ভাইকে চিঠি লিখে জানিয়েছিলেন, ‘ঢাকার ঘোড়দৌড়ের তুলনা নেই। যেভাবে নেটিভরা এ খেলা দেখার জন্য ভিড় করে। তা সত্যি দেখার মতো।'