ডাটা নিয়ে কথা -মাসনুন আহমেদ
  • শূন্য থেকে শুরু
    • কেন লিখছি, কাদের জন্য লিখছি, কিভাবে শিখতে হয়
    • গিটবুকটি কিভাবে পড়বেন ?
  • julius.ai কি ?
    • julius.ai ফিচারগুলো
      • প্রম্প্ট বেসড ডাটা এনালাইসিস
      • প্রোগ্রামিং খটমট নেই
      • গ্রাফ এবং ডাটা ভিজুয়ালাইজেশন
      • ডাটার মিনিংফুল ইনসাইট
      • ডাটা স্ট্রাকচারিং এবং হেভিওয়েট ডাটা
  • হাতেকলমে জুলিয়াসের প্রয়োগ
    • ডাটা এনালিটিক্স এর ৭টি স্টেপ : যেভাবে Ai এর সাহেয্যে আমি ডাটা এনালাইসিস করি
    • একটি অফিসের গল্প
    • রিলেশনশিপ স্ট্যাটাস
    • কাস্টমারদের ডাটাসেট
    • User Engagement এবং Churn Prediction
  • জুলিয়াস দিয়ে স্ট্যাস্টিকাল টেস্ট
    • ANOVA Test
    • Chi Square Test
  • AI এর উপরে কিছু গবেষণা
    • Biased Vs Unbias AI
    • AI এর উপর স্ট্যানফোর্ডের গবেষণা
    • আর্টিফিসিয়াল জেনারেল ইন্টেল পর্ব ১ [লেখা চলমান থাকবে]
    • দা ইমিটিশন গেম
    • বায়োইনফরমেটিক্স এ AI এর ব্যাবহার
  • ক্যাগলের নোটবুক
    • ক্যাগলের নোটবুক এবং আমার পাইথনে ডাটা ভিজুয়াল
    • Exploring Top US Data Science and Analytics Master's Program - 01
    • শার্ক ট্যাঙ্ক বাংলাদেশ ২০২৪
    • লিংকডইনের USA এর AI /ML জব এর ডাটাসেট :: ক্যাগলে আমার তৃতীয় নোটবুক
    • ১৫০ থেকে ১৭০০ :: ডেঙ্গুর ডাটাসেট
    • ক্যাগলের এপার্টমেন্টের ডাটাসেট
    • বাংলাদেশের ৪ জেলার ট্রাভেলার ডাটাসেট এনালাইসিস : পর্ব ১
    • বাংলাদেশের ৪ জেলার ট্রাভেলার ডাটাসেটের গল্প : পর্ব ২
    • বাংলাদেশের ৪ জেলার ট্রাভেলার ডাটাসেটের গল্প : পর্ব ৩ (শেষ পর্ব )
    • NLP ক্লাসিফিকেশন ডাটাসেট :মেশিন মেশিন কি পারবে রোগ অনুযায়ী ডক্টর সাজেস্ট করতে ?
    • সোশ্যাল মিডিয়ায় কেনাকাটার উপর ডাটা এনালিটিক্স (পর্ব ১ )
    • সোশ্যাল মিডিয়ায় কেনাকাটার উপর ডাটা এনালিটিক্স (পর্ব ২ )
    • সোশ্যাল মিডিয়ায় কেনাকাটার উপর ডাটা এনালিটিক্স (পর্ব ৩ )
    • সোশ্যাল মিডিয়ায় কেনাকাটার উপর ডাটা এনালিটিক্স ( শেষ পর্ব )
    • সোশ্যাল মিডিয়ায় কেনাকাটার উপর ডাটা এনালিটিক্স (পর্ব ৪ )
    • হিট ভালনারবিলিটি ইনডেক্স এর একটি ডাটাসেট : শহর চট্টগ্রাম
  • ক্যাগলের কম্পিটিশনে আমার অংশগ্রহণ
    • আবাহাওয়ার ডাটাসেট নিয়ে প্রেডিকশন -১
    • স্পেসশিপ টাইটানিক ডাটাসেট-২
    • সেন্টিমেন্ট এনালাইসিস ডাটাসেট -৩
    • প্রজেক্ট টাইটানিক - ৪
    • টুইটারের টুইট দিয়ে প্রাকৃতিক দুর্যোগের মেশিন লার্নিং মডেল-৫
    • মেশিন কে হাতেরলেখা চিনানো বিশ্ববিখ্যাত MNIST ডাটাসেটের গল্প - ৬
    • ব্যাঙ্ক এর কাস্টমার ব্যাঙ্ক ছেড়ে যাবে কি না - ৭
    • মোটু কাহিনী : মাল্টিক্লাস প্রেডিক্টর কম্পিটিশন - ৮
    • বন্যার পূর্বাভাস সংক্রান্ত কম্পিটিশন : ফ্লাড প্রেডিকশন ডাটাসেট - ৯
    • সোশ্যাল মিডিয়া ইনফ্লুয়েন্সার ডাটাসেট -১০
    • Binary Prediction of Poisonous Mushrooms ডাটাসেট-১১
    • ক্যাগলের কম্পিটিশন : মেশিন কি পারবে আপনি বিষন্ন কিনা সেটি বলতে ?
    • Gliese 12 b
    • যারা গিটবুকটি সাইটেশন করতে চান
  • AI এর যুগে আমরা : কি শিখবো, কিভাবে শিখবো
  • Data Democratization : একজন নন টেক হয়েও আমার প্রতিষ্ঠান TradePoint কে যেভাবে Data Driven বিজনেস kore
  • মৃত্যুকূপ : Geospatial ডাটাসেটে আমার প্রথম Ai দিয়ে কাজ
  • AI, ক্লাউড আর ডাটা সায়েন্স: ২০২৫ সালের ৭টি ট্রেন্ড যা অনেক কিছুই বদলে দিবে
  • জুলিয়াস থেকে পাওয়া উপহার
  • কিছু রিডিং ম্যাটেরিয়াল
  • ভবিষৎতের পৃথিবী :: কোডিং নিয়ে কিছু কথা (পর্ব ১)
  • ভবিষৎতের পৃথিবী : শ্রমিক,ব্যাঙ্কার অথবা একজন ডাটা এনালিস্ট :: কে Ai এর প্রভাবমুক্ত?: (পর্ব ২)
  • প্রশ্নোত্তরে ডাটা নিয়ে কথা
  • 💡টেক ডায়েরি 💡
    • বুক রিভিউ ১ :: প্রোগ্রামিং ফর বিগিনার
    • app রিভিউ পর্ব ১
    • Open AI এবং Iliya
    • ভবিষ্যতের কম্পিউটিং কেমন হবে ?
    • কৃত্রিম বুদ্ধিমত্তার শাসন কি সমাগত?
    • ডাটা এনালিটিক্স এর ভবিষ্যৎ
    • চায়না জেনেরেটিভ AI এর পেটেন্টে এগিয়ে
    • OpenAI o1 সম্পর্কে
    • Pixtral 12B মডেল
Powered by GitBook
On this page
  1. ক্যাগলের কম্পিটিশনে আমার অংশগ্রহণ

বন্যার পূর্বাভাস সংক্রান্ত কম্পিটিশন : ফ্লাড প্রেডিকশন ডাটাসেট - ৯

গত এক সপ্তাহ থেকেই মনের মধ্যে একটা অস্বস্তি। কারণ আর কিছুই না - ক্যাগলের একটি ডাটাসেটের কম্পিটিশন এর রেজাল্ট। মডেলিং এর জন্য আমি সবসময়েই জুলিয়াস ইউজ করি। কিন্তু সেটি ইউজ করার পরেও মডেলের accuracy মাইনাস ফিগারে চলে গেছে। এদিকে ১ জুন ২০২৪ কম্পিটিশন এ ফাইল সাবমিট এর লাস্ট ডেট। তাই ছুটির দিনে সিদ্ধান্ত নিয়ে ফেললাম সব কাজ ফেলে আজকে মডেলের accuracy যেভাবেই হোক ঠিক করবো, এটলিস্ট ৮ টি কম্পিটিশন এ অংশগ্রহণ এর পরে এটুকু দক্ষতা তো হয়েছেই।

চলে আসি এবার আজকের কম্পিটিশন এর ডাটাসেট নিয়ে। বাংলাদেশ একটি কৃষি-নির্ভর দেশ যা প্রায়ই বন্যার সম্মুখীন হয়। বন্যা পূর্বাভাস এবং এর প্রতিরোধে কিছু নির্দিষ্ট বিষয় বিশেষভাবে গুরুত্বপূর্ণ। এই কম্পিটিশনে সেরকম একটি ডাটাসেট আছে যা কিনা বন্যা পূর্বাভাসে হেল্পফুল।

চলুন প্রথমেই দেখে নেই ডাটাসেটের হেড গুলো :

Monsoon Intensity - বর্ষা তীব্রতা

Topography - ভূপ্রকৃতি

River Management - নদী ব্যবস্থাপনা

Deforestation - বন নিধন

Urbanization - নগরায়ন

Climate Change - জলবায়ু পরিবর্তন

Dams Quality - বাঁধের গুণমান

Siltation - পলি জমা

Agricultural Practices - কৃষি অনুশীলন

Encroachments - দখলদারিত্ব

Ineffective Disaster Preparedness - অকার্যকর দুর্যোগ প্রস্তুতি

Drainage Systems - নিষ্কাশন ব্যবস্থা

Coastal Vulnerability - উপকূলীয় ঝুঁকি

Landslides - ভূমিধস

Watersheds - জলাশয়

Deteriorating Infrastructure - অবনতিশীল অবকাঠামো

Population Score - জনসংখ্যা স্কোর

Wetland Loss - জলাভূমির ক্ষতি

Inadequate Planning - অপর্যাপ্ত পরিকল্পনা

Political Factors - রাজনৈতিক কারণ

ডাটাসেটের এই হেডগুলোকে ১-১৮ এর একটি স্কেলে নেওয়া হয়েছে। ধরা যাক আপনি হবিগঞ্জ এ থাকেন। আপনার এরিয়া কোড 160005। আপনার এই এরিয়া কোডের ভিত্তিতে ডাটাসেটের যেই হেডগুলো বললাম সেগুলোকে মার্কিং করা হলো। যেমন ধরুন ডিফরেস্টেশন, যদি আপনি এই ডাটহেডে ১২ নম্বর পান বুঝে নিতে হবে আপনার এলাকায় গাছ কাটা এবং বননিধন বেশি হচ্ছে।

আশা করি ডাটার ওভারভিউ বুঝে ফেলেছেন।

এইবারের কম্পিটিশন এ আমার মডেল এর একুরেসি লেভেল 65% (এখানে একটা মন খারাপের ইমোজি হবে ), স্কোরিং ভালো না জানি কিন্তু আমার আগের স্কোর ছিল -87%, সেখান থেকে মডেলকে ডেভেলপ করে 65% এ নিয়ে এসেছি। মডেলের accuracy level ভালো না হলেও, ভুল কারেকশন করতে গিয়ে যেটা শিখেছি সেটি অনেককিছু।

১ জুন ২০২৪ এ কম্পিটিশন টির ফাইল সাবমিশন এর ডেডলাইন। আর এর মাঝে দিয়ে শেষ হলো আমার ক্যাগলের ৯টি কম্পিটিশন এ অংশগ্রহণ।

ক্যাগলের কম্পিটিশন লিংক : https://www.kaggle.com/competitions/playground-series-s4e5/data

আমার স্কোরিং ডিটেল :

Previousমোটু কাহিনী : মাল্টিক্লাস প্রেডিক্টর কম্পিটিশন - ৮Nextসোশ্যাল মিডিয়া ইনফ্লুয়েন্সার ডাটাসেট -১০

Last updated 1 year ago

৯টি কম্পিটিশন এর বিস্তারিত :

https://docs.google.com/spreadsheets/d/1FwngwX_pC8X5fcmmK7w9ThHQPwxizOb2bNx_Ss6gcLk/edit?usp=sharing