دوتا تکنیک کلی توی #پردازش_زبان_طبیعی وجود داره که به اونها تکالیف و ارزیابی‌های عمده پردازش زبان طبیعی هم می‌گن. بعضی از این ارزیابی‌ها کاربردهای مستقیم توی کار پردازش زبان طبیعی دارن و بعضی از اون‌ها به عنوان زیرتکلیف توی کمک به حل مسائل بزرگ‌تر کمک می‌کنن. تکنیک‌های عمده توی پردازش زبان طبیعی به دو گروه آنالیز معنایی و آنالیز نحوی تقسیم می‌شن . 👇❌مهم❌👇 ‌

♨️آنالیز نحوی آنالیز نحوی یا (Syntactic analysis) به موضوع نحو زبان (Syntax) مربوطه. نحو دانش مطالعه قواعد مربوط به چینش واژگان در جمله هست. این شاخه خیلی مهم از دستور زبان، ترتیب واژگان رو توی جمله به شکلی که برای ما معنادار باشه، بررسی می‌کنه. توی زبان‌شناسی، کلمات روی دو محور جانشینی و هم‌نشینی در جملات قرار می‌گیرن. نحو با محور هم‌نشینی در ارتباطه. و همچنین توی آنالیز نحوی از قوانین نحو توی زبان‌شناسی برای درک الگوهای نحوی جملات استفاده می‌شه. کامپیوتر برای درک نحو زبان انسانی، تکنیک‌ها و الگوریتم‌هایی رو مورد استفاده قرار می‌ده که بر اساس دانش بشری از نحو زبان طراحی شدن. بعضی از این تکنیک‌ها رو تیتر وار بهتون میگم:👇 ‌

کاهش یا لم‌سازی (Lemmatization) تقسیم‌بندی واژگان (Word Segmentation) تقسیم‌بندی مورفولوژیکی (Morphological segmentation) تشخیص نقش کلمات (Part of Speech Tagging) و... برای درک هر کدوم اسمشون رو توی گوگل سرچ کنین اینجا بگم از حوصله جمع خارجه ‌

‌ ♨️آنالیز معنایی آنالیز معنایی یا تجزیه و تحلیل معنایی به موضوع معناشناسی (Semantics) زبان مربوطه. معناشناسی دانشی هست برای بررسی و مطالعه معانی کلمات و جملات توی زبان‌های انسانی. این علم به ارتباط بین واژه و معنای اون و همچنین به تغییر معنای کلمات توی کاربردهای مختلف می‌پردازه به شدتتتت سخت ولی خفنه😂🤦‍♂ ‌

توی تکنیک آنالیز معنایی هدف ایجاد الگوریتم‌هایی برای کامپیوتره که به اونها توی درک کلمات، علامت‌ها و جملات زبان ما کمک می‌کنه. آنالیز معنایی یکی از سخت‌ترین بخش‌ها در کار و دانش پردازش زبان طبیعیه و پوست از سر اون کد نویس #پایتون می‌کنه و هنوز هم مسایل حل‌نشده خیلی زیادی داره. 😂😂🤦‍♂ درک معنی درست جملات یک متن به کمک تکنیک‌های آنالیز معنایی انجام میشه که چندتا از اونها رو بهتون میگم:👇 ‌

‌ شناسایی اسامی (Named Entity Recognition) ابهام‌زدایی از معنای کلمات (Word Sense Disambiguation) تولید زبان طبیعی (Natural Language Generation) و... ‌

خب آقا می‌دونم خیلی هاتون الان گیج شدین من خودمم وقتی به عمق ماجرا فکر میکنم دیوونه میشم آخه چجووووری باید بریم به نیم کیلو سیم و آهن و یکسری کد انگلیسی بفهمونیم که الان این کار رو نکن. بفهم دیگه لامصب بفهم😂🤦‍♂ همینکه چطوری زبون خودمون رو به کامپیوتر بفهمونیم و بهش یادبدیم که بفهمه بهش قدرت درک و فهم و شعور بدیم دنیای #پردازش_زبان_طبیعی رو خلق میکنه😁 ‌

‌ خلاصه که... درسته سخته ولی کد نویس های پایتونی این حوزه جزو ثروتمند ترین افراد هستن و روز به روز دارن پولدار تر میشن. همین chat GPT که دنیا رو بهم ریخته و همه می‌شناسیمش در هر دقیقه چندین میلیون دلار درآمد زایی برای شرکت open Ai داره😍💵 ‌

‌ اینم از مبحث سنگین و عجیب #پردازش_زبان_طبیعی که سعی کردم بهتون به ساده ترین روش بگم🥰❤️ از اینجا شروع به خوندن کنین👇 https://eitaa.com/codena/1789 ‌

‌ لطفا لطفا لطفا هر نقد و نظری دارین راجع به این مسئله بگین که واقعا مایه دلگرمی منه دمتون گرم که تا اینجا همراهم بودین بینایی ماشین بهتره یا NLP ؟؟؟ منتظرتونمممم👇 @CodenaSupport ‌

وسط کلییییی پیام درباره #هوش_مصنوعی بهم یک نفر از طرفدار های امنیت توجه‌م رو جلب کرد😁❤️ دمتون گرم که پیام میدین، حالمو خوب میکنین

شناسایی زنان بی‌حجاب با هوش مصنوعی این تصاویر در خیابان ولیعصر تهران و در چند روز گذشته ضبط شده است. ضابطان پلیس از زنان بی‌حجاب تصویر گرفته و با استفاده از هوش مصنوعی هویت آن‌ها را شناسایی می‌کنند. در برخی موارد نیز پرونده قضایی تشکیل و به قوه‌قضائیه ارسال شده است. @BisimchiMedia