استخراج برچسب برای آگهی‌های وب‌سایت مبتنی بر درون‌سازی واژه

نوع مقاله : مقاله پژوهشی

نویسندگان

1 دانشکده مهندسی کامپیوتر - بخش مهندسی نرم‌افزار، دانشگاه یزد

2 کارشناسی ارشد مهندسی کامپیوتر، دانشگاه یزد، یزد، ایران

10.22034/abmir.2024.20879.1041

چکیده

در جامعه امروزی اخبار و آگهی‌ها، جایگاه به‌خصوصی در رشد و ترقی جامعه دارند. با مشخص‌کردن واژگان اصلی آگهی، می‌توان به مفهوم کلی آن پی ‌برد. آماده‌سازی این واژگان به روش سنتی نیازمند صرف زمان و دانش تخصصی راجع به موضوع متن است.

سایت ایده‌کاو، سامانه‌ای هست که به جمع‌آوری پیام‌ها و آگهی‌های تلگرام می‌پردازد. نیازمندی سامانه ایده‌کاو، استخراج کلمات کلیدی از آگهی‌های منتشر شده در تلگرام بوده‌ است. کیفیت کلمات کلیدی استخراج شده، نقش بسزایی در بهبود سئو و آمار بازید آگهی‌ها دارد. با استفاده از الگوریتم‌های درون‌سازی، می‌توان صحبت‌های محاوره‌ای و ساختار معنایی متن را استخراج کرد، ازاین‌رو در تشخیص کلمات کلیدی در آگهی‌های تلگرام که اغلب به‌صورت عامیانه منتشر می‌شوند، مفید واقع می‌شود.

در این پژوهش با استفاده از داده‌های سامانه ایده‌‌کاو مدلی از روش‌های درون‌سازی پیاده‌سازی شده است. نوآوری استفاده شده در این پژوهش از ترکیب‌کردن روش‌های درون‌سازی واژه، بسامد کلمات و جایگاه کلمات ایجاد شده است. مدل درون‌سازی از کلمات دو کلمه‌ای ایجاد شده است. ایجاد مدل از کلمات دو کلمه‌ای، به ‌این دلیل است که اغلب کلمات کلیدی از دو کلمه به بالا تشکیل شده‌اند. جهت نمایش بهتر ارزیابی‌ها، مدل آی‌کِی (مدل پیشنهادی) با روش‌های آماری و روش‌های مبتنی بر گراف مقایسه شده است که نتایج به‌دست‌آمده نشان می‌دهد ترکیب مدل آی‌کِی دو-گرم عملکرد بهتری در استخراج کلمات کلیدی نسبت به سایر روش‌ها به وجود آورده است.

کلیدواژه‌ها

موضوعات


عنوان مقاله [English]

Extracting keywords from Telegram ads based on the integration of word embedding and statistical features

نویسنده [English]

  • Mohammad mehdi sedghian 2
2 Computer Engineering Department, Yazd University, Yazd
چکیده [English]

In today's society, news and advertisements have a special place in the growth and development of society. By specifying the main words of the ad, you can understand its general meaning. Preparing these words in the traditional way requires time and specialized knowledge about the subject of the text. Ideakav site is a system that collects Telegram messages and advertisements. The requirement of the idea search system was to extract keywords from the advertisements published in Telegram. The quality of extracted keywords plays a significant role in improving SEO and advertising statistics. By using embedding algorithms, it is possible to extract colloquial conversations and the semantic structure of the text, therefore, it is useful in identifying keywords in Telegram ads that are often published in popular form. In this research, a model of word embedding has been implemented using the data of the idea mining system. The innovation used in this research is created by combining word embedding methods, word frequency and word position. The embedding model is created from two-word words. Creating a model of two-word words is because most of the keywords consist of two words or more. In order to better display the evaluations, the IK model (proposed model) has been compared with statistical methods and graph-based methods, and the obtained results show that the combination of the two-gram IK model has produced a better performance in extracting keywords than other methods.

کلیدواژه‌ها [English]

  • Tag extraction
  • search engine optimization (SEO)
  • deep learning
  • word embedding