लेक्सिकल विश्लेषण क्या है? - टेक्नोपेडिया से परिभाषा

परिभाषा - लेक्सिकल विश्लेषण का क्या अर्थ है?

लेक्सिकल विश्लेषण एक अवधारणा है जिसे कंप्यूटर विज्ञान पर उसी तरह से लागू किया जाता है जैसा कि भाषाविज्ञान पर लागू होता है। अनिवार्य रूप से, शाब्दिक विश्लेषण का अर्थ है, अक्षरों की एक धारा को समूहीकृत करना या इकाइयों के सेटों में ध्वनियां करना जो सार्थक वाक्यविन्यास का प्रतिनिधित्व करते हैं। भाषा विज्ञान में, इसे पार्सिंग कहा जाता है, और कंप्यूटर विज्ञान में इसे पार्सिंग या टोकनिंग कहा जा सकता है।

Techopedia लेक्सिकल एनालिसिस की व्याख्या करता है

कंप्यूटर विज्ञान में लेक्सिकल विश्लेषण का विचार यह है कि लेक्सिकल विश्लेषण "लेक्समेस" में धाराएं तोड़ता है जहां एक टोकन अर्थ की मूल इकाई का प्रतिनिधित्व करता है। टोकन इस तरह से एक साथ जुड़े हुए हैं कि भाषा संकलक को वापस जाना चाहिए और उन्हें सही कंप्यूटिंग निर्देशों को लागू करने के लिए अलग करना चाहिए। मूल रूप से, मनुष्य और कंप्यूटर दोनों शाब्दिक विश्लेषण करते हैं, लेकिन कंप्यूटर इसे अलग तरीके से करते हैं, और बहुत अधिक तकनीकी तरीके से। जिस तरह से कंप्यूटर शाब्दिक विश्लेषण करते हैं, उसे मनुष्यों के लिए पारदर्शी होने की आवश्यकता नहीं है - यह सिर्फ कंप्यूटिंग सिस्टम में प्रोग्राम किया जाना है। कंप्यूटर विज्ञान में लेक्सिकल विश्लेषण करने वाले कार्यक्रमों को अक्सर लेक्सर्स, टोकनर्स या स्कैनर कहा जाता है।