হাতেকলমে পাইথন ডীপ লার্নিং
  • হাতেকলমে পাইথন ডিপ লার্নিং
  • শুরুর ঘটনা
    • শুরুর কথা
    • প্রথম ফ্ল্যাপ
    • এই বইটা থেকে কি আশা করছি?
    • ‘ডিপ লার্নিং’ কি হাইপ? কেন এতো দেরি হলো?
    • কৃতজ্ঞতা
    • কেন শিখবেন মেশিন/ডিপ লার্নিং?
    • বইটা কিভাবে ব্যবহার করবেন?
    • কেন এই বইটা অন্য প্রোগ্রামিং বই থেকে একটু আলাদা?
    • গুগল কোলাব/জুপিটার টেন্সর-ফ্লো ২.x ডকার
    • কিছুই জানিনা, শুরু করবো কোথা থেকে?
    • কেন ডীপ লার্নিং?
      • স্পীচ রিকগনিশন
      • কৃষক আত্মহত্যার যোগসূত্র
      • ডীপফেইক
      • যদি নায়ক না থাকে?
      • 'সেন্টিমেন্ট অ্যানালাইসিস' আর শিক্ষার হারের যোগসূত্র
      • কনটেন্ট মডারেশন - অসুস্থতার যোগসূত্র
      • জাহাজ না আইসবার্গ?
      • গুগল ডুপ্লেক্স
      • টার্গেটের গল্প
    • ঝিঁঝিঁপোকার থার্মোমিটার
    • নিউরাল নেটওয়ার্কে ডাটা কিভাবে থাকে?
    • এক নজরে 'টেন্সর-ফ্লো' ইকো-সিস্টেম
    • ফ্যাশন MNIST ডেটাসেটের ক্লাসিফিকেশন
    • রিগ্রেশন এবং ক্লাসিফিকেশন
    • ডিপ লার্নিং কেন? নন-লিনিয়ার সমস্যা, ফিচার ক্রস
    • ডিপ লার্নিং দিয়ে ডিসিশন বাউন্ডারি, চাঁদ আকারের ডাটাসেট
    • নিউরাল নেটওয়ার্কের কনসেপ্ট এবং রিপ্রেজেন্টেশন লার্নিং
    • নিউরাল নেটওয়ার্কের নিউরাল, ওয়েট, বায়াস, অ্যাক্টিভেশন ফাংশন
    • ডিপ লার্নিং নেটওয়ার্ক: ফরওয়ার্ড এবং নেটওয়ার্ক অপটিমাইজেশনের জন্য ব্যাক প্রোপাগেশন
    • ডিপ নিউরাল নেটওয়ার্কের লেয়ারিং কনসেপ্ট
    • টেন্সর-ফ্লো ডেটাসেট এপিআই দিয়ে কনভল্যুশনাল নিউরাল নেটওয়ার্ক
    • কার্নাল কনভল্যুশন এবং ম্যাক্স পুলিং (সিএনএন)
    • সিএনএন, সিফার ডেটাসেট, টেন্সরবোর্ড/কেরাস কলব্যাক দিয়ে মডেল ট্র্যাকিং
    • কেরাস ‘প্রি-ট্রেইনড’ মডেল এবং তার ব্যবহার
    • ‘কনভলিউশনাল নিউরাল নেটওয়ার্ক’ এবং গ্লোবাল অ্যাভারেজ পুলিং
    • ট্রান্সফার লার্নিং, ‘প্রি-ট্রেইনড’ অক্সফোর্ড ইউনিভার্সিটি ভিজ্যুয়াল জিওমেট্রি গ্রূপের vgg16 ডেটাসেট
    • টেন্সর-ফ্লো মডেল থেকে প্রোডাকশন, টেন্সর-ফ্লো সার্ভিং এবং এপিআই
    • ‘টেন্সর-ফ্লো লাইট’, মোবাইল এবং এমবেডিং ডিভাইসে ডিপ লার্নিং ইনফারেন্স নিয়ে অ্যান্ড্রয়েড অ্যাপ (১)
    • মোবাইল অ্যাপের জন্য সাধারণ "এমনিস্ট" মডেল ট্রেনিং, টেন্সরফ্লো লাইট দিয়ে (২)
    • অ্যান্ড্রয়েড অ্যাপের জন্য "এমনিস্ট" হাতে লেখা ডিজিট চিনতে মডেল ট্রেনিং (৩)
    • অ্যান্ড্রয়েডে ফ্যাশন 'এমনিস্ট' অ্যাপ (৪)
    • বাংলা নাচারাল ল্যাঙ্গুয়েজ প্রসেসিং, টোকেনাইজেশন এবং ভেক্টরাইজেশন
    • এমবেডিং, ওয়ার্ড এমবেডিং, শব্দ এবং সংখ্যার কাছাকাছি এনকোডিং
    • সার্চে এমবেডিং: পরের শব্দটা কি হবে?
    • শব্দের সিমিলারিটি, কাছাকাছি অর্থ, লাইকলিহুড - সঙ্গে 'ফাস্টটেক্সট' এবং 'ওয়ার্ড২ভেক'
    • বাংলায় ছোট্ট সেন্টিমেন্ট অ্যানালাইসিস
    • বাংলায় এন্ড টু এন্ড অ্যাপ্লিকেশন, টেন্সর-ফ্লো হাব
    • একদম স্ক্র্যাচ থেকে টেন্সরফ্লো ২.x মডেল
    • কি করবো সামনে?
    • আরো সাহায্য এবং কৃতজ্ঞতা
Powered by GitBook
On this page

Was this helpful?

  1. শুরুর ঘটনা
  2. কেন ডীপ লার্নিং?

জাহাজ না আইসবার্গ?

Previousকনটেন্ট মডারেশন - অসুস্থতার যোগসূত্রNextগুগল ডুপ্লেক্স

Last updated 5 years ago

Was this helpful?

কৃষকদের আত্মহত্যার হার কমাতে স্যাটেলাইট ইমেজ, রিমোট সেন্সিং ডাটা আর ডীপ লার্নিং কিভাবে কাজ করেছে সেটা নিয়ে আলাপ করেছিলাম আরেকটা অংশে। শিকাগো থেকে আমার এক বন্ধু মাস কয়েক আগে জানিয়েছিলেন একটা কম্পিটিশনের কথা। ক্যাগলে। প্রাইজ মানি ৫০ হাজার ডলারের মতো। চেষ্টা করবো কিনা? দৌড়ের ওপর ছিলাম সেই মাসটা। তাই চেষ্টা করতে করতে দেরি হয়ে গেলো মাসখানিক। যখন ঢুকলাম, তখন প্রাইজ পেয়ে গেছে মানুষজন। তাতে কী? চেষ্টা করতে দোষ কোথায়?

সমস্যা দেখেই তো আমি মুগ্ধ! অসাধারণ!

নরওয়েজিয়ান এনার্জি কোম্পানি হিসেবে ‘স্ট্যাটওয়েল’ এর সমস্যা কম নয়। পৃথিবী জুড়ে তাদের যত অপারেশন্স আছে তার মধ্যে বেশিরভাগ অংশ জুড়ে রয়েছে হিমাঙ্কের নিচে থাকা সমুদ্র অংশে। ভুল বলেছি? নরওয়ের ম্যাপ দেখলেই বোঝা যাবে। একদিকে আইসল্যান্ড, গ্রীনল্যাণ্ড - অন্যদিকে খালি বরফ আর বরফ। পৃথিবী জুড়ে যত গ্যাস এবং তেলের ড্রিলিং রিগ দেখা যায়, তার ম্যাসিভ ইনফ্রাস্ট্রাকচারগুলোর বেশিরভাগ অংশ আছে বরফ সাগরগুলোতে।

মনে পড়ে আলাস্কার কথা? অথবা আর্কটিকের তেল উত্তোলনের কথা? সেগুলোর অপারেশন্স দেখলে সবার চোখ উঠবে কপালে। প্রাকৃতিক গ্যাস অথবা তেল উত্তোলনের জন্য এই ড্রিলিং রিগগুলো তৈরিতে খরচ হয় মিলিয়ন মিলিয়ন ডলার। ক্যানাডায় আমার কয়েক বন্ধু আছেন যারা এখনো অপারেট করছেন বিভিন্ন সাগরে। এই ড্রিলিং রিগে। বেশিরভাগ সময়ে এই ড্রিলিং রিগগুলো সাগরে তার সাপ্লাই বেজ থেকে বেশ কয়েক হাজার মাইল দূরে থাকে। ফলে তাদের এই রিগে যারা থাকেন - তাদের জন্য সব কিছুর বন্দোবস্ত রাখতে হয় বেশ লম্বা সময় ধরে। বলা যায় তাদের থাকা খাওয়া থেকে শুরু করে, সবকিছু।

সাগরের উত্তাল ঝড়, সুনামি, অশান্ত ঢেউ থেকে বাঁচতে একেকটা ড্রিলিং রিগ তৈরি হয় অনেক সময় ধরে। গোড়াটা তৈরি করে আসতে হয় সাগরের তলদেশ থেকে। সময় এবং খরচ দুটো মিলিয়ে এই পুরো ম্যাসিভ ইনফ্রাস্ট্রাকচার এর দাম হয়ে যায় অনেক অনেক বেশি। বরফ সাগরের সবচেয়ে বড় ভয় হচ্ছে পানিতে ডুবে থাকা নিরীহ ধরণের আইসবার্গগুলো। আর সেখানে এসে যদি আইসবার্গ লেগে যায় তাহলে সেই ক্ষতি কাটিয়ে উঠতে সেই কোম্পানিগুলোর মাথা খারাপ হয়ে যায়।

মনে আছে “টিপ অফ দ্যা আইসবার্গ” ব্যাপারটার কথা? তাই নয় কী? এর মানে হচ্ছে - আইসবার্গের ছোট্ট অংশটুকুই ভেসে থাকে, যেখানে বেশিরভাগ ডুবে থাকে পানির ভেতরে। ছোট্ট মাথার নিচে কতোবড় একটা আইসবার্গ থাকতে পারে সেটার ধারণা করার কোন উপায় নেই আগে থেকে। একরাতে তার ট্রাভেল করার অনেক রেকর্ড আছে এনার্জি কোম্পানিগুলোর কাছে।

ধরুন, সেই আইসবার্গ ভেসে এসে যদি একবার বাড়ি খায় এ ধরনের একটা রিগের ইনফ্রাস্ট্রাকচারের সাথে - তাহলে সেই কোম্পানিসহ শেয়ারহোল্ডারদের সবারই খবর আছে। সেদিক থেকে গ্রীনল্যাণ্ড, আইসল্যান্ড, নরওয়ে মানে স্ক্যান্ডেনেভিয়ান দেশগুলোর পাশাপাশি সাগরগুলোতে যেই রিগগুলো থাকে - সেগুলোর একটা বড় ভয় থাকে আইসবার্গের সাথে বাড়ি খাওয়া নিয়ে। তেল গ্যাস এক্সপ্লোরেশনের জাহাজগুলোর একই সমস্যা। কখন কোথায় লাগে। বিশেষ করে আইসবার্গে।

প্রথাগতভাবে এই ধরনের বিপদজ্জনক আইসবার্গগুলোকে আগে থেকে চেনার জন্য স্যাটেলাইট ইমেজিংএর মতো বেশ কিছু উন্নততর প্রযুক্তি কাজ করছে অনেকদিন ধরেই। সমস্যা হচ্ছে স্যাটেলাইট ইমেজিং ভালো - তবে দিনের বিভিন্ন সময়ে কুয়াশা, রাতের আঁধার, বৃষ্টি আর মেঘের ভেতর দিয়ে দেখতে হয় তাদের। পাশাপাশি তাদেরকে উড়তে হয় পৃথিবী থেকে ৬৮০ কিলোমিটার ওপর দিয়ে। সেকারণে দিনে ১৪ বার চক্কর দিতে হয় পৃথিবীর ওপর দিয়ে। একই জায়গা দিয়ে।

স্যাটেলাইট যে প্রযুক্তির ব্যবহার করছে সেটাকে আমরা বলছি ‘রিমোট সেন্সিং’। এর মাধ্যমেই আসলে আমরা ‘ডিটেক্ট’ করতে পারি সাগরের জাহাজ, বড় বড় সাগরের প্রাণী, আর এই দুষ্ট আইসবার্গগুলোকে। সেন্টিনেলের যে স্যাটেলাইট কন্সটেলেশন আছে সেটাই আসলে ব্যবহার করা হয় সমুদ্র এবং ভূমির এই বিভিন্ন অপারেশন। যেমন এর আগে দেখেছিলাম শস্যের রং দেখে কি কি ফলন হয়েছে এবার? আগেই বলেছি অ্যাক্যুরেসি রাখতে এই দুটো স্যাটলাইট প্রতিদিন পৃথিবীকে পাড়ি দেয় চোদ্দবার। মানে, বাকি রাখে না কোন জায়গা।

এখন আসি আমার নিজের বিষয়। মানে কমিউনিকেশন। এই স্যাটেলাইটগুলোর সাথে আছে সি ব্যান্ডের “সিনথেটিক অ্যাপারচার রাডার” যেটা আসলে তার ফ্রিকোয়েন্সি দিয়ে সব ধরনের আবহাওয়া থেকে শুরু করে অনেককিছুই মনিটর করতে পারে সে। বুঝতেই পারছেন - অত্যাধুনিক স্যাটলাইট - সেটাতে সমস্যা নেই। তবে, সমস্যা হচ্ছে সে যে ছবিগুলো তুলছে সেখান মানুষের বোঝার ক্ষমতা নেই যে সেটা আইসবার্গ, তিমি নাকি জাহাজ? আমি যেকোন একটা অবজেক্টের কথা বলছি যেটা সাগরে ভেসে বেড়াচ্ছে। দিন রাত। নিচে কয়েকটা ছবি দিচ্ছি বরং। বেশি কাহিনী হয়ে গেল? আসলেই সমস্যা। এই 'HH' আর 'HV' এর গল্পে আসছি পরে।