Kanini Thamizh 04

கணினி ஆய்வில் தமிழ் – 04

கணினி ஆய்வில் தமிழ் – 03

சென்ற வாரம் மெஷின் ட்ரான்ஸ்லேஷன் பற்றி பார்த்தோம். இந்த வாரம் அனஃபோரா அனாலிசிஸ் (anaphora analysis) மற்றும் நேம்ட் என்டிட்டி ரெகக்னிஷன் (named entity recognition) பற்றி பார்ப்போம். முதலில் அனஃபோரா பற்றி பார்போம். அனஃபோரா அனாலிசிசை ப்ரோநெளன் ரெசல்யூஷன்  (pronoun resolution) என்றும் சொல்வார்கள். ஒரு எடுத்துக்காட்டுடன் இதனை பார்ப்போம்.

“சூரபத்மன் முருகனால் கொல்லப்பட்டான். அவன் மிகவும் கொடியவன்.”

இரண்டாம் வாக்கியத்தில் உள்ள “அவன்” என்கிற சொல் சூரபத்மனைத்தான் குறிக்கிறது என நாம் அறிவோம். கணினிக்கு அதை தெரிவிப்பது கடினம். அதாவது வாக்கியங்களில் வரும் ப்ரோனவுன் முந்தைய வாக்கியங்களில் உள்ள தகுந்த பெயர்ச் சொல்லை சரியாக கணினியால் எடுத்துக் கொள்ள வைப்பதை அனஃபோரா அனாலிசிஸ் (அ) ப்ரோநெளன் ரெசல்யூஷன் என்கிறோம். இதே போல் ப்ரோநெளன் பின்வரும் வாக்கியங்களில் உள்ள பெயர்ச்சொல்லை கணினி எடுத்துக் கொண்டால், கேட்டஃபோரா அனாலிசிஸ் (cataphora analysis) என்பார்கள். மேலே சொல்லப்பட்டுள்ள எடுத்துக்காட்டை பார்த்தோமேயானால் “அவன்” என்ற அனஃபோரா முந்தைய வாக்கியத்தில் உள்ள முருகனை குறிக்கவேண்டுமா அல்லது சூரபத்மனை குறிக்க வேண்டுமா என்ற முடிவை கணினி எடுப்பது கடினம். ஏனென்றால் சூரபத்மன் என்பவன் கொடியன்; முருகன் நல்லவன் என்பன போன்ற தெளிவான விதிகளை கணினிக்கு அளிப்பது கடினம். அனஃபோரா அனாலிசிசில் பெரும்பாலும் “அவன்” என்ற வார்த்தைக்கு மிக அருகில் இருக்கும் பெயர்ச்சொல்லையே குறிக்குமாறு கணினிக்கு விதி எழுதுவார்கள். அப்படி விதி இருந்தால் “அவன்” என்ற சொல் முருகனைக் குறித்து தவறான முடிவைத்தரும். இருப்பினும் அனஃபோரா அனாலிசிஸ் நூறு சதவீத சரியான விடையை தருவது கடினம். ஏனெனில் அனஃபோரா என்பது இன்னமும் தமிழ் மட்டுமல்லாமல் பல மொழிகளிலும் தீர்க்கப்படாத ஒரு பிரச்சனையாகவே இருக்கிறது. ஆய்வுகள் பல இத்துறையில் நடந்து கொண்டிருக்கின்றன.

அனஃபோரா அனாலிசிஸ் கூகுள்  போன்ற தேடு பொறிகளுக்கு மிகவும் இன்றியமையாத ஒன்று. வலைப் பக்கங்களை இன்டெக்ஸ் (index) செய்வார்கள். அதாவது முக்கியமான வார்த்தைகளை ஒரு பக்கத்தில் தேர்ந்தெடுத்து அப்பக்கத்தை டேட்டா பேசில் (database)வைத்திருப்பார்கள். உதாரணத்திற்கு ‘சென்னை’ என்று தேடு பொறியில் தேடினால், சென்னை என்கிற வார்த்தை எந்தெந்த ஆவணங்களில் இடம் பெற்றிருக்கிறது, எத்தனை முறை வந்திருக்கிறது போன்ற தகவல்களை டேட்டா பேசில் வைத்திருப்பார்கள். நாம் கூகுளில் க்வெரி (query)கொடுக்கும் போது இந்த இன்டெக்ஸ் (index)செய்யப்பட்ட வார்த்தைகள் மூலமாகவே அப்பக்கம் பயனருக்கு தரப்படுகிறது. அதை போன்ற முக்கியமான வார்த்தைகளை தேர்ந்தெடுக்க பல வழிகள் உள்ளன. அதில் ஒன்று, ஒரு வார்த்தை அதிகமான முறை ஒரு பக்கத்தில் இடம் பெற்றிருந்தால் அதை முக்கியமென எடுத்துக் கொள்ளலாம். சென்னையை பற்றிய விக்கிபீடியா பக்கத்தை எடுத்துக் கொள்வோம். அப்பக்கத்தில் சென்னையை “இந்நகரம்”, “மாநகரம்” என்று ப்ரோநெளன் மூலமாக சென்னையை விளக்கியிருந்தால் “சென்னை” என்கிற வார்த்தையின் முக்கியத்துவம் குறையக்கூடும். அம்மாதிரியான இடங்களில் அனஃபோரா அவசியம். அனஃபோரா அனாலிசிசில் சிக்கல்கள் இருந்த போதிலும் கூகுள் சிறப்பாக இயங்குகிறது. ஆனால் மேலும் சிறப்பாக இயங்க அனஃபோரா பற்றிய சிறந்த ஆய்வுகள் வெளிவர வேண்டும்.

நேம்ட் என்டிட்டி ரெகக்னிஷன் (named entity recognition) பற்றி சுருக்கமாக பார்ப்போம். அதாவது பெயர், இடம், தேதி, நேரம், பணம் போன்றவற்றை நேம்ட் என்டிட்டி என்பார்கள். ஒரு வலைப் பக்கத்தை இன்டக்ஸ்(index) செய்யும்பொழுது நேம்ட் என்டிட்டிக்கு முக்கியத்துவம் தருவது அவசியம். இவற்றை கண்டுபிடிப்பதற்கு பல முறைகள் உள்ளன. ஆங்கிலத்தில் நேம்ட் என்டிட்டிக்கள் காப்பிட்டல் (capital)எழுத்தகளில் இருக்கும். அதனால் ஆங்கிலத்தில் கண்டு பிடிப்பது சுலபம். தமிழில் அப்படி இல்லை; ஆகையால் இதுபற்றிய ஆய்வுகள் செய்வதும்  தமிழை பொறுத்தவரை கடினமாகும். அடுத்த வாரம் இதுபோன்ற விபரங்களைப் பார்ப்போம்.

வாழ்க தமிழ்! வளர்க தமிழ்!!

– சுபலலிதா

கணினி ஆய்வில் தமிழ் – 05

Comments

comments




816 thoughts on “கணினி ஆய்வில் தமிழ் – 04

  1. BookerRak

    sildenafil medana 50 mg
    viagra pills
    buying viagra london over counter
    [url=http://sildenafilcsj.com/index.html#]viagra without a doctor prescription[/url]
    can buy viagra bangladesh

  2. MichaelLob

    generico de sildenafil

    viagra going generic 2012
    [url=http://viagrahto.com/index.html#][/url]
    can you get viagra over the counter in the uk

  3. Davidpak

    generic viagra cialis levitra
    buy viagra women
    se comprar viagra sin receta medica farmacias
    [url=http://mbviagraghtorderke.com/#]how old do you have to be to buy viagra[/url]
    buy viagra online mastercard

  4. Destiny 6 Cheat

    I liked as much as you will receive performed proper here.The cartoon is tasteful, your authored material stylish.nonetheless, you command get bought an edginess over that you want be handing over the following.unwell without a doubt come further before once more as exactly the same nearly very incessantly inside case you shield this hike. Destiny 6 Cheat

  5. How to Hack Destiny 6

    Its like you learn my mind! You seem to know a lot approximately this, like you wrote the ebook in it or something.I believe that you simply could do with a few percent to drive the message house a bit, but instead of that, that is magnificent blog.An excellent read.I will certainly be back. How to Hack Destiny 6

  6. Rules of Survival Cheat

    Woah! I’m really enjoying the template/theme of this blog.It’s simple, yet effective.A lot of times it’s very hard to get that “perfect balance” between superb usability and visual appeal.I must say you’ve done a very good job with this.In addition, the blog loads super quick for me on Chrome.Superb Blog! Rules of Survival Cheat

  7. heroes evolved apk mod

    I was wondering if you ever thought of changing the layout of your blog? Its very well written; I love what youve got to say.But maybe you could a little more in the way of content so people could connect with it better.Youve got an awful lot of text for only having one or 2 images.Maybe you could space it out better? heroes evolved apk mod

  8. Knives Out Hack

    Today, I went to the beachfront with my children.I found a sea shell and gave it to my 4 year old daughter and said “You can hear the ocean if you put this to your ear.” She put the shell to her ear and screamed.There was a hermit crab inside and it pinched her ear.She never wants to go back! LoL I know this is completely off topic but I had to tell someone! Knives Out Hack

  9. แพมเพิส goon 1 แถม 1 โลตัส

    hey there and thanks for your information – I’ve certainly picked up anything new from right here.I did alternatively experience a few technical issues the usage of this website, as I experienced to reload the site a lot of occasions previous to I could get it to load correctly.I had been considering if your web hosting is OK? Now not that I’m complaining, but sluggish loading circumstances times will often affect your placement in google and could damage your high quality ranking if advertising and ***********|advertising|advertising|advertising and *********** with Adwords.Anyway I’m including this RSS to my e-mail and can look out for a lot more of your respective interesting content.Make sure you update this once more soon.. แพมเพิส goon 1 แถม 1 โลตัส

  10. Jurassic Survival 2018 Hack

    Almost all of the things you say is supprisingly legitimate and it makes me wonder the reason why I had not looked at this in this light before.Your article truly did turn the light on for me as far as this particular issue goes.Nevertheless at this time there is actually just one issue I am not really too comfy with and whilst I make an effort to reconcile that with the core theme of your position, allow me see what all the rest of your visitors have to say.Very well done. Jurassic Survival 2018 Hack

  11. Transformers Earth Wars

    I am writing to let you be aware of of the wonderful discovery my princess went through reading your blog.She realized such a lot of pieces, including how it is like to possess an amazing helping nature to let others smoothly have an understanding of several advanced topics.You undoubtedly exceeded readers’ desires.Many thanks for imparting these good, dependable, revealing and easy thoughts on your topic to Gloria. Transformers Earth Wars

  12. jurassic survival android

    Today, I went to the beachfront with my children.I found a sea shell and gave it to my 4 year old daughter and said “You can hear the ocean if you put this to your ear.” She put the shell to her ear and screamed.There was a hermit crab inside and it pinched her ear.She never wants to go back! LoL I know this is completely off topic but I had to tell someone! jurassic survival android

  13. Rules of Survival Hack

    Have you ever thought about writing an e-book or guest authoring on other sites? I have a blog centered on the same topics you discuss and would really like to have you share some stories/information.I know my subscribers would appreciate your work.If you’re even remotely interested, feel free to send me an e mail. Rules of Survival Hack

  14. Last Day On Earth survival tips

    Good – I should certainly pronounce, impressed with your site.I had no trouble navigating through all the tabs as well as related info ended up being truly easy to do to access.I recently found what I hoped for before you know it in the least.Quite unusual.Is likely to appreciate it for those who add forums or anything, site theme .a tones way for your customer to communicate.Excellent task.. Last Day On Earth survival tips

  15. slotomania free coins code

    I do enjoy the manner in which you have framed this matter plus it does give us a lot of fodder for thought.However, because of everything that I have experienced, I just hope when the actual reviews pack on that men and women continue to be on issue and in no way start on a soap box involving the news of the day.All the same, thank you for this outstanding point and though I do not go along with it in totality, I regard your standpoint. slotomania free coins code

  16. Jurassic Survival Android Mod

    There are definitely a number of details like that to take into consideration.That is a great level to convey up.I offer the ideas above as normal inspiration but clearly there are questions like the one you carry up the place crucial thing shall be working in trustworthy good faith.I don?t know if greatest practices have emerged round issues like that, however I’m positive that your job is clearly identified as a good game.Both girls and boys really feel the influence of only a moment’s pleasure, for the rest of their lives. Jurassic Survival Android Mod

  17. Jurassic Survival 2018 Hack

    Awesome blog! Do you have any suggestions for aspiring writers? I’m planning to start my own website soon but I’m a little lost on everything.Would you advise starting with a free platform like WordPress or go for a paid option? There are so many options out there that I’m totally confused ..Any tips? Thanks! Jurassic Survival 2018 Hack

  18. IOS Board Game Hack

    You really make it appear so easy with your presentation however I to find this topic to be really one thing that I feel I would by no means understand.It seems too complex and very broad for me.I’m looking ahead in your subsequent put up, I’ll try to get the grasp of it! IOS Board Game Hack