Merge pull request #885 from PySUST/master

[Bengali] 	Spell checked and add new stop words
This commit is contained in:
Ines Montani 2017-03-12 13:20:59 +01:00 committed by GitHub
commit e97a30b99a
2 changed files with 42 additions and 30 deletions

View File

@ -87,7 +87,7 @@ U.S. Federal law. Any choice of law rules will not apply.
7. Please place an “x” on one of the applicable statement below. Please do NOT
mark both statements:
* [ ] I am signing on behalf of myself as an individual and no other person
* [x] I am signing on behalf of myself as an individual and no other person
or entity, including my employer, has or will have rights with respect my
contributions.
@ -98,9 +98,9 @@ mark both statements:
| Field | Entry |
|------------------------------- | -------------------- |
| Name | |
| Name | Shuvanon Razik |
| Company name (if applicable) | |
| Title or role (if applicable) | |
| Date | |
| GitHub username | |
| Date | 3/12/2017 |
| GitHub username | shuvanon |
| Website (optional) | |

View File

@ -3,30 +3,42 @@ from __future__ import unicode_literals
STOP_WORDS = set("""
অতএব অথচ অথব অন অন অন অন অনতত অন অবধি অবশ অর
আই আগ আগ আগ আছ আজ আদযভ আপন আপনি আব আমর আম আম আম আমি আর আরও
ইতি ইহ উচি উনি উপর উপর
এই এক একই একজন একট একটি একব এক এখন এখনও এখ এখ এট এট এটি এত এতট এত এদ এব এব এমন এমনক এর এর এল এস এস
অতএব অথচ অথব অন অন অন অন অনতত অবধি অবশ অর অন অন অরধভ
আগ আগ আগ আছ আজ আদযভ আপন আপনি আব আমর আম আম আম আমি আর আরও
ইতি ইহ
উচি উনি উপর উপর উততর
এই এক একই একজন একট একটি একব এক এখন এখনও এখ এখ এট এস
এট এটি এত এতট এত এদ এব এব এমন এমনি এমনকি এর এর এল এস এস
ওই ওক ওখ ওদ ওর ওর
কখনও কত কথ কব কয কযকটি করছ করছ করত করব করব করল করল কর কর কর কর করি করি করি করি কর কর করি কর কর কর উক রও রণ ি ি ি ি ি উই নও
ি ি ি
চল
ি ি
জন জনক জন জন জনযওজ নত ি ি
ি ি তখন তত তথ তব তব রপর হল িনঐ িি িি ি মন
কব কব
ি ি ি ি ি ি ি ি ওয ওয খত
কখনও কত কথ কব কয কযকটি করছ করছ করত করব করব করল কয় কয়কটি করি করি কর
করল কর কর কর কর করি করি করি করি কর কর করি কর কর কর উক
রও রণ ি ি ি ি ি উই নও মন ি
ি ি ি ি ি
চল
ি ি
জন জনক জন জন জন নত ি ি ি ি
ি
ি
তখন তত তথ তব তব রপর রই হল িনই
িি িি ি মন
কব কব
ি ি ি ি ি ি ি ি ওয ওয খত
ি ি ওয় ওয় ি
ধর ধর
নয ি ি ি ি ি ি ি ি ওয ওয নয়
পক পর পর পর পর পরযন ওয ি রতি রভি
নয ি ি ি ি ি ি ি ি ওয নয় নত
পক পর পর পর পর পরযন ওয ি রতি রভি ওয় রথম থমি
ফল ি
বছর বদল বর বলত বলল বলল বল বল বল বল বস বহ ি িি ি িষযি যবহ
বছর বদল বর বলত বলল বলল বল বল বল বল বস বহ ি িি ি িষযি যবহ বকতব বন ি
মত মত মত মধযভ মধ মধ মধ মন যম
যখন যত যতট যথ যদি যদি ওয ওয িি মন
রকম রয
সঙ সঙ সব সব সমস সমরতি সময় সহ সহি তর ি পষ বয
হইত হইব হইয হওয হওয হওয হচ হত হত হত হন হব হব হয হয হযি হয হয হযি হয হয হল হল হল হল হল ি ি হয় হয় হয়
যখন যত যতট যথ যদি যদি ওয ওয িি
মন
রকম রয রয়
লক
রণ মন সঙ সঙ সব সব সমস সমরতি সময় সহ সহি তর ি পষ বয
হইত হইব হইয হওয হওয হওয হচ হত হত হত হন হব হব হয হয হযি হয হয হযি হয
হয় হল হল হল হল হল ি ি হয় হয় হয় হইয় হয়ি হয় হয়নি হয় হয়ত হওয় হওয় হওয়
""".split())