বিষয়বস্তুতে চলুন

হাগিং ফেস

উইকিপিডিয়া, মুক্ত বিশ্বকোষ থেকে
হাগিং ফেস ইনক.
ধরনব্যক্তি মালিকানাধীন
শিল্পকৃত্রিম বুদ্ধিমত্তা
মেশিন লার্নিং
সফটওয়্যার ডেভেলপমেন্ট
প্রতিষ্ঠাকাল২০১৬;  বছর আগে (2016)
সদরদপ্তর
বাণিজ্য অঞ্চল
বৈশ্বিক
প্রধান ব্যক্তি
  • ক্লেমেন্ট ডেলাঙ্গু (সিইও)
  • জুলিয়েন চাউমন্ড (সিটিও)
  • টমাস উলফ (সিএসও)
পণ্যসমূহমডেল, ডেটাসেট, স্পেসেস
আয়বৃদ্ধি মার্কিন$১৫ মিলিয়ন (২০২২)
কর্মীসংখ্যা
১৭০ (২০২৩)
ওয়েবসাইটhuggingface.co

হাগিং ফেস, ইনক. (ইংরেজি: Hugging Face, Inc.) নিউ ইয়র্ক সিটিতে অবস্থিত একটি ফরাসি-আমেরিকান কোম্পানি।[] তারা মেশিন লার্নিং ব্যবহার করে অ্যাপ্লিকেশন তৈরির জন্য কম্পিউটারের গণনার সরঞ্জাম বানায়। স্বাভাবিক ভাষা প্রক্রিয়াজাতকরণ নিয়ে কাজ করা অ্যাপ্লিকেশন তৈরির জন্য তাদের তৈরি করা ট্রান্সফরমার্স লাইব্রেরি সবচেয়ে বেশি পরিচিত। এছাড়াও তাদের একটি প্ল্যাটফর্ম আছে, যেখানে ব্যবহারকারীরা তাদের তৈরি করা মেশিন লার্নিং মডেল ও ডেটাসেট অন্যদের সাথে শেয়ার করতে পারে এবং তাদের কাজ দেখাতে পারে।

ইতিহাস

[সম্পাদনা]

কোম্পানিটি ২০১৬ সালে নিউ ইয়র্ক সিটিতে ফরাসি উদ্যোক্তা ক্লেমেন্ট ডেলাঙ্গু, জুলিয়েন চাউমন্ড এবং থমাস উলফ দ্বারা প্রতিষ্ঠিত হয়েছিল। প্রতিষ্ঠাকালীন সময়ে এটি কিশোর-কিশোরীদের লক্ষ্য করে একটি চ্যাটবট অ্যাপ তৈরি করার উদ্দেশ্য নিয়ে শুরু করেছিল।[] কোম্পানিটির নামকরণ করা হয়েছে আলিঙ্গনরত মুখের ইমোজি বা হাগিং ফেস (U+1F917 🤗) নামে।[] তাদের চ্যাটবটের চালিকা মডেলটিকে উন্মুক্ত-উৎসে আনার পর, কোম্পানিটি তাদের প্রধান উদ্দেশ্য পরিবর্তন করে মেশিন লার্নিংয়ের একটি প্ল্যাটফর্ম হিসেবে আত্মপ্রকাশ করে।

২০২১ সালের মার্চ মাসে হাগিং ফেস একটি সিরিজ বি ফান্ডিং রাউন্ডে ৪০ মিলিয়ন মার্কিন ডলার সংগ্রহ করেছে।[]

২০২১ সালের ২৮শে এপ্রিলে কোম্পানিটি একটি উন্মুক্ত বৃহৎ ভাষার মডেল প্রকাশের জন্য অন্যান্য কয়েকটি গবেষণা গোষ্ঠীর সাথে সহযোগিতায় বিগসায়েন্স গবেষণা কর্মশালা চালু করে।[] ২০২২ সালে কর্মশালাটি ১৭৬ বিলিয়ন প্যারামিটারসহ বহুভাষিক বৃহৎ ভাষার মডেল ব্লুমের ঘোষণার সাথে সমাপ্ত হয়।[][]

২০২২ সালের ডিসেম্বরে কোম্পানিটি পাইথনে মেশিন লার্নিং অ্যাপ্লিকেশন বিকাশের জন্য নির্মিত একটি ওপেন সোর্স লাইব্রেরি গ্র্যাডিও অধিগ্রহণ করে।[]

২০২২ সালের ৫ই মে কোম্পানিটি কোয়াচু ও সেকুইয়ার নেতৃত্বে তার সিরিজ সি ফান্ডিং রাউন্ড ঘোষণা করে।[] কোম্পানিটি ২ বিলিয়ন মার্কিন ডলার মূল্যায়ন পায়।

২০২২ সালের ৩রা আগস্ট কোম্পানি প্রাইভেট হাব ঘোষণা করে, এটি তার পাবলিক হাগিং ফেস হাবের একটি এন্টারপ্রাইজ সংস্করণ যা সাস বা অন-প্রিমিসেস স্থাপনাকে সমর্থন করে।[]

২০২৩ সালের ফেব্রুয়ারিতে কোম্পানি আমাজন ওয়েব সার্ভিসেস (এডব্লিউএস) এর সাথে অংশীদারিত্ব ঘোষণা করে, যা এডব্লিউএস গ্রাহকদের কাছে উপলব্ধ হাগিং ফেসের পণ্যগুলিকে তাদের কাস্টম অ্যাপ্লিকেশনগুলির জন্য বিল্ডিং ব্লক হিসাবে ব্যবহার করার অনুমতি দেবে। কোম্পানি আরও বলেছে যে, ব্লুমের পরবর্তী প্রজন্ম ট্রেনিয়ামে চালানো হবে, যা এডব্লিউএস দ্বারা তৈরি একটি মালিকানাধীন মেশিন লার্নিং চিপ[১০][১১][১২]

২০২৩ সালের আগস্টে কোম্পানি ঘোষণা করে যে, এটি একটি সিরিজ ডি তহবিলে $৪.৫ বিলিয়ন মূল্যায়নে $২৩৫ মিলিয়ন সংগ্রহ করেছে। তহবিলের নেতৃত্বে ছিল সেলসফোর্স এবং Google, Amazon, Nvidia, AMD, Intel, IBM, এবং কুয়ালকম থেকে উল্লেখযোগ্য অংশগ্রহণ পায়। [১৩]

২০২৪ সালের জুনে, কোম্পানি Meta এবং স্কেলওয়ের সাথে ইউরোপীয় স্টার্টআপগুলির জন্য একটি নতুন এআই অ্যাক্সিলারেটর প্রোগ্রাম চালু করার ঘোষণা দেয়। এই উদ্যোগের লক্ষ্য হল স্টার্টআপগুলিকে তাদের পণ্যগুলিতে ওপেন ফাউন্ডেশন মডেলগুলিকে একীভূত করতে, ইউরোপীয় এআই ইকোসিস্টেমকে ত্বরান্বিত করতে সহায়তা করা। প্যারিসের স্টেশন এফ ভিত্তিক প্রোগ্রামটি সেপ্টেম্বর ২০২৪ থেকে ফেব্রুয়ারি ২০২৫পর্যন্ত চলে। নির্বাচিত স্টার্টআপগুলি মেন্টরিং, এআই মডেল এবং সরঞ্জামগুলিতে অ্যাক্সেস এবং স্কেলওয়ের কম্পিউটিং শক্তি পাবে।[১৪]

২০২৪ সালের ২৩শে সেপ্টেম্বর আদিবাসী ভাষার আন্তর্জাতিক দশককে এগিয়ে নিতে, হাগিং ফেস মেটা এবং ইউনেস্কোর সাথে যৌথভাবে মেটার নো ল্যাঙ্গুয়েজ লেফট বিহাইন্ড উন্মুক্ত-উৎসের এআই মডেলের উপর নির্মিত একটি নতুন অনলাইন ভাষা অনুবাদক[১৫] চালু করতে, বিনামূল্যে পাঠ্য অনুবাদ সক্ষম করে। যেটি ছিলো ২০০টি ভাষাসহ, এমনকি অনেক কম-তথ্য থাকা ভাষাও তাতে অন্তর্ভুক্ত ছিল।[১৬]

২০২৫ সালের এপ্রিলে, হাগিং ফেস ঘোষণা করে যে তারা একটি হিউম্যানয়েড রোবোটিক্স স্টার্টআপ, পোলেন রোবোটিক্স অধিগ্রহণ করেছে। পোলেন রোবোটিক্স ফ্রান্স ভিত্তিক একটি রোবোটিক্স স্টার্টআপ যা ২০১৬ সালে ম্যাথিউ ল্যাপেয়ার এবং পিয়েরে রুয়ানেট দ্বারা প্রতিষ্ঠিত হয়েছিল।[১৭][১৮] একটি এক্স টুইটে, হাগিং ফেসের সিইও ক্লিমেন্ট ডেলাঙ্গু, কৃত্রিম বুদ্ধিমত্তা রোবোটিক্সকে ওপেন সোর্স করার জন্য তার দৃষ্টিভঙ্গি শেয়ার করেন।[১৯]

পরিষেবা এবং প্রযুক্তি

[সম্পাদনা]

ট্রান্সফরমার্স লাইব্রেরি

[সম্পাদনা]

ট্রান্সফরমার লাইব্রেরি হল একটি পাইথন প্যাকেজ যাতে টেক্সট, ইমেজ এবং অডিও টাস্কের জন্য ট্রান্সফরমার মডেলের ওপেন-সোর্স বাস্তবায়ন রয়েছে। এটি পাইটর্চ, টেন্সরফ্লো এবং জ্যাক্স ডিপ লার্নিং লাইব্রেরির সাথে সামঞ্জস্যপূর্ণ এবং এতে বার্ট এবং জিপিটি-২ এর মতো উল্লেখযোগ্য মডেলের বাস্তবায়ন অন্তর্ভুক্ত রয়েছে।[২০] লাইব্রেরিটিকে প্রথমে "পাইটর্চ-প্রিট্রেইন্ড-বার্ট" (pytorch-pretrained-bert)[২১] বলা হত, যা পরে "পাইটর্চ-ট্রান্সফর্মার্স" (pytorch-transformers) এবং অবশেষে "ট্রান্সফরমার্স" (transformers) নামে নামকরণ করা হয়।

একটি জাভাস্ক্রিপ্ট সংস্করণ (transformers.js [২২])ও তৈরি করা হয়েছে, যা ব্রাউজারে সরাসরি মডেল চালানোর অনুমতি দেয়।

হাগিং ফেস হাব

[সম্পাদনা]

দ্য হাগিং ফেস হাব হল হোস্টিং এর জন্য একটি প্ল্যাটফর্ম (কেন্দ্রীভূত ওয়েব পরিষেবা ):[২৩]

  • গিট-ভিত্তিক কোড রিপোজিটরি, আলোচনা এবং প্রকল্পের জন্য অনুরোধসহ।
  • মডেল, এছাড়াও গিট-ভিত্তিক সংস্করণ নিয়ন্ত্রণ সহ;
  • ডেটাসেট, প্রধানত পাঠ্য, চিত্র এবং অডিও;
  • ওয়েব অ্যাপ্লিকেশন ("স্পেস" এবং "উইজেটস"), মেশিন লার্নিং অ্যাপ্লিকেশনগুলির ছোট আকারের ডেমোগুলির জন্য উদ্দেশ্যে।

অনেকগুলি প্রাক-প্রশিক্ষিত মডেল রয়েছে যা বিভিন্ন পদ্ধতিতে সাধারণ কাজগুলিকে সমর্থন করে, যেমন:

  • ন্যাচারাল ল্যাঙ্গুয়েজ প্রসেসিং : টেক্সট শ্রেণীবিভাগ, নামকৃত সত্তা স্বীকৃতি, প্রশ্নের উত্তর, ভাষা মডেলিং, সংক্ষিপ্তকরণ, অনুবাদ, একাধিক পছন্দ এবং পাঠ্য প্রজন্ম।
  • কম্পিউটার দৃষ্টি : চিত্র শ্রেণীবিভাগ, বস্তু সনাক্তকরণ এবং বিভাজন।
  • অডিও: স্বয়ংক্রিয় বক্তৃতা স্বীকৃতি এবং অডিও শ্রেণীবিভাগ।

অন্যান্য লাইব্রেরি

[সম্পাদনা]
গ্র্যাডিও এআই উদাহরণ

ট্রান্সফরমার এবং হাগিং ফেস হাব ছাড়াও, হাগিং ফেস ইকোসিস্টেমে অন্যান্য কাজের জন্য লাইব্রেরি রয়েছে, যেমন ডেটাসেট প্রক্রিয়াকরণ ("ডেটাসেট"), মডেল মূল্যায়ন ("মূল্যায়ন"), এবং মেশিন লার্নিং ডেমো ("গ্র্যাডিও")।[২৪]

সেফটেনসর

[সম্পাদনা]

পাইথনে পিকল ফরম্যাটের সমস্যা সমাধানের জন্য ২০২১ সালের দিকে সেফটেনসর ফরম্যাট তৈরি করা হয়েছিল। এটি টেনসর সংরক্ষণ এবং লোড করার জন্য ডিজাইন করা হয়েছিল। পিকল ফরম্যাটের তুলনায়, এটি লেজি লোড করার অনুমতি দেয় এবং নিরাপত্তা সমস্যা এড়ায়।[২৫] একটি নিরাপত্তা নিরীক্ষার পর, এটি 2023 সালে ডিফল্ট ফর্ম্যাটে পরিণত হয়।[২৬]

ফাইল বিন্যাস:

  • হেডারের আকার: ৮ বাইট, একটি স্বাক্ষরবিহীন লিটল-এন্ডিয়ান ৬৪-বিট পূর্ণসংখ্যা।
  • হেডার: JSON UTF-8 string, formatted as {"TENSOR_NAME": {“dtype”: “F16”, “shape”: [1, 16, 256], “data_offsets”: [BEGIN, END]}, "NEXT_TENSOR_NAME": {…}, …}।
  • ফাইল: টেনসর সমন্বিত একটি বাইট বাফার।

এছাড়াও দেখুন

[সম্পাদনা]

তথ্যসূত্র

[সম্পাদনা]
  1. "Terms of Service – Hugging Face"huggingface.co। সংগ্রহের তারিখ ২৪ মে ২০২৪
  2. 1 2 "Hugging Face wants to become your artificial BFF"TechCrunch (মার্কিন ইংরেজি ভাষায়)। ৯ মার্চ ২০১৭। ২৫ সেপ্টেম্বর ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ১৭ সেপ্টেম্বর ২০২৩
  3. "Hugging Face raises $40 million for its natural language processing library"। ১১ মার্চ ২০২১। ২৮ জুলাই ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ৫ আগস্ট ২০২২
  4. "Inside BigScience, the quest to build a powerful open language model"। ১০ জানুয়ারি ২০২২। ১ জুলাই ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ৫ আগস্ট ২০২২
  5. "BLOOM"bigscience.huggingface.co। ১৪ নভেম্বর ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২০ আগস্ট ২০২২
  6. "Inside a radical new project to democratize AI"MIT Technology Review (ইংরেজি ভাষায়)। ৪ ডিসেম্বর ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২৫ আগস্ট ২০২৩
  7. Nataraj, Poornima (২৩ ডিসেম্বর ২০২১)। "Hugging Face Acquires Gradio, A Customizable UI Components Library For Python"Analytics India Magazine (মার্কিন ইংরেজি ভাষায়)। সংগ্রহের তারিখ ২৬ জানুয়ারি ২০২৪
  8. Cai, Kenrick। "The $2 Billion Emoji: Hugging Face Wants To Be Launchpad For A Machine Learning Revolution"Forbes (ইংরেজি ভাষায়)। ৩ নভেম্বর ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২০ আগস্ট ২০২২
  9. "Introducing the Private Hub: A New Way to Build With Machine Learning"huggingface.co। ১৪ নভেম্বর ২০২২ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২০ আগস্ট ২০২২
  10. Bass, Dina (২১ ফেব্রুয়ারি ২০২৩)। "Amazon's Cloud Unit Partners With Startup Hugging Face as AI Deals Heat Up"Bloomberg News। ২২ মে ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২২ ফেব্রুয়ারি ২০২৩
  11. Nellis, Stephen (২১ ফেব্রুয়ারি ২০২৩)। "Amazon Web Services pairs with Hugging Face to target AI developers"Reuters। ৩০ মে ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২২ ফেব্রুয়ারি ২০২৩
  12. "AWS and Hugging Face collaborate to make generative AI more accessible and cost efficient | AWS Machine Learning Blog"aws.amazon.com (মার্কিন ইংরেজি ভাষায়)। ২১ ফেব্রুয়ারি ২০২৩। ২৫ আগস্ট ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২৫ আগস্ট ২০২৩
  13. Leswing, Kif (২৪ আগস্ট ২০২৩)। "Google, Amazon, Nvidia and other tech giants invest in AI startup Hugging Face, sending its valuation to $4.5 billion"CNBC (ইংরেজি ভাষায়)। ২৪ আগস্ট ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২৪ আগস্ট ২০২৩
  14. "META Collaboration Launches AI Accelerator for European Startups"Yahoo Finance (মার্কিন ইংরেজি ভাষায়)। ২৫ জুন ২০২৪। সংগ্রহের তারিখ ১১ জুলাই ২০২৪
  15. {{Cite web |date=2024-09-23 |title=Hugging Face Spaces Translator |url=https://huggingface.co/spaces/UNESCO/nllb.html%5B%5D
  16. {{Cite web |date=2024-09-23 |title=UNESCO Translator Event |url=https://www.unesco.org/en/event/unesco-language-translator-powered-meta-and-hugging-face-launching-event?hub=68184.html
  17. Wiggers, Kyle (১৪ এপ্রিল ২০২৫)। "Hugging Face buys a humanoid robotics startup"TechCrunch (মার্কিন ইংরেজি ভাষায়)। সংগ্রহের তারিখ ১৫ এপ্রিল ২০২৫
  18. Koetsier, John। "Open Source Humanoid Robots That You Can 3D Print Yourself: Hugging Face Buys Pollen Robotics"Forbes (ইংরেজি ভাষায়)। সংগ্রহের তারিখ ১৫ এপ্রিল ২০২৫
  19. Knight, Will। "An Open Source Pioneer Wants to Unleash Open Source AI Robots"Wired (মার্কিন ইংরেজি ভাষায়)। আইএসএসএন 1059-1028। সংগ্রহের তারিখ ১৫ এপ্রিল ২০২৫
  20. "🤗 Transformers"huggingface.co। ২৭ সেপ্টেম্বর ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২০ আগস্ট ২০২২
  21. "First release"GitHub। ১৭ নভেম্বর ২০১৮। ৩০ এপ্রিল ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২৮ মার্চ ২০২৩
  22. "xenova/transformers.js"GitHub
  23. "Hugging Face Hub documentation"huggingface.co। ২০ সেপ্টেম্বর ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ২০ আগস্ট ২০২২
  24. "Hugging Face - Documentation"huggingface.co। ৩০ সেপ্টেম্বর ২০২৩ তারিখে মূল থেকে আর্কাইভকৃত। সংগ্রহের তারিখ ১৮ ফেব্রুয়ারি ২০২৩
  25. huggingface/safetensors, Hugging Face, ২১ সেপ্টেম্বর ২০২৪, সংগ্রহের তারিখ ২২ সেপ্টেম্বর ২০২৪
  26. "🐶Safetensors audited as really safe and becoming the default"huggingface.co। সংগ্রহের তারিখ ২২ সেপ্টেম্বর ২০২৪

বহিঃসংযোগ

[সম্পাদনা]

টেমপ্লেট:Generative AI