インターネット言語学(インターネットげんごがく、)は、イギリスの言語学者によって提唱された言語学の一分野である。インターネットや、ショートメッセージサービス(SMS)によるテキストメッセージといった他のニューメディアの影響のもとで生じた新しい言語のスタイルや形式を研究する。 ヒューマンコンピュータインタラクション(HCI)がコンピュータを介したコミュニケーション(CMC)やインターネットを介したコミュニケーション(IMC)へと発展して以来、.のような専門家は、ウェブインターフェースやユーザビリティの観点から、言語学がそこに寄与する役割を持つことを認めてきた。インターネット上に現れる言語を研究することは、概念的な体系化、翻訳、ウェブユーザビリティの改善に役立ちうる。こうした研究は、言語学者とウェブ利用者の双方に利益をもたらすことを目指している。
インターネット言語学の研究は、社会言語学、教育、文体論、応用言語学という四つの主要な観点から行われうる。 さらに、技術の進歩の結果として新たな側面も発展しており、その中にはテキストコーパスとしてのウェブの発展や、マスメディアや文学作品を通じてインターネットの普及がもたらした文体的変異の広がりと影響が含まれる。インターネットに接続する利用者の数が増え続けるなか、新しいコンピュータ媒介技術が次々と登場し、人々がこれらの新しいメディアに合わせて言語を適応させていくため、インターネットの言語学的な将来はまだ定まっていない。 インターネットは、人々に言語の使用を促す面でも、逆に言語の使用から注意をそらす面でも、依然として重要な役割を果たし続けている。
主要な観点 デイヴィッド・クリスタルは、さらなる研究のための四つの主要な観点を挙げている。すなわち、社会言語学的観点、教育的観点、文体的観点、応用的観点である。 これら四つの観点は事実上相互に関連しており、互いに影響し合っている。
社会言語学的観点 この観点は、社会がインターネットの発展が言語に与える影響をどのように捉えているかを扱う。 インターネットの登場は多くの点でコミュニケーションを一変させた。人々のコミュニケーションの仕方を変え、広範な社会的影響を持つ新たなプラットフォームを生み出した。重要な手段には、SMSによるテキストメッセージ、電子メール、チャットグループ、仮想世界、ウェブなどが含まれるが、これらに限られない。
これらの新しいコミュニケーション手段の進化は、言語の使われ方に関して多くの懸念を呼び起こした。クリスタル(2005年)によれば、こうした懸念は根拠のないものでも歴史上前例のないものでもなく、新しい技術的突破が言語に影響を与えるときにほぼ必ず現れる。15世紀に印刷が導入されたとき、19世紀に電話が発明されたとき、20世紀に放送が社会に浸透し始めたときにも見られたとおりである。
個人のレベルでは、SMSによるテキストメッセージや携帯端末による電子メール(プッシュメール)などのCMCは、即時的なコミュニケーションを大きく高めた。 その例としてiPhoneやBlackBerryが挙げられる。
学校では、教育者や生徒がコミュニケーションや交流のために個別の学校用電子メールアカウントを与えられることも珍しくない。授業での議論は、ますますディスカッションフォーラムという形でインターネット上に持ち込まれている。たとえば南洋理工大学では、学生は同大学のポータル「edveNTUre」で協調学習に取り組み、フォーラムでの議論やオンラインクイズに参加したり、講師が用意したストリーミングのポッドキャストを視聴したりしている。は2008年に大学との連携を始め、Appleの音楽サービスを、学術講義や学習教材を無料で提供するストアへと変えた。オックスフォード大学、ケンブリッジ大学、イェール大学を含む18か国600以上の教育機関と提携している。
こうした学術的なソーシャルネットワーキングやメディアは、世界中の教育者が学生をより良く関与させる新しい方法を模索し続けるにつれて、増加すると見込まれている。ニューヨーク大学では、学生が「Skypeを通じて意見を述べるゲストスピーカー、インスタントメッセージで支援を提供する図書館スタッフ、学外から図書館資源にアクセスする学生」とやり取りすることが一般的である。 学生と教師がこうしたCMCプラットフォームをより多く使うようになるにつれて、これは言語の使われ方に影響を及ぼす。
職業的なレベルでは、企業がコンピュータやノートパソコンを(有線・無線のインターネット接続を通じて)インターネットに接続し、従業員が個別の電子メールアカウントを持つことが一般的な光景である。これは組織内(社員間)および組織外(他者)とのコミュニケーションを大きく促進する。スマートフォンのような移動体通信も、企業の世界にますます入り込んでいる。たとえば2008年、AppleはActiveSyncを用いて統合機能(プッシュ電子メール、カレンダー、連絡先管理)を合理化する技術的発展を背景に、企業がiPhoneを社内環境に取り入れるのを積極的に支援する意向を表明した。
一般に、インターネットによって可能になったこれら新しいCMCは、人々の言語の使い方を変えた。非形式性が高まり、それに伴って言語の劣化への懸念が高まっている。しかしデイヴィッド・クリスタルが述べるように、これらは言語の創造性の力を反映するものとして肯定的にとらえるべきである。
テーマ インターネットの社会言語学は、相互に関連する五つのテーマを通じて検討することもできる。
多言語主義 – インターネット上のさまざまな言語の普及度と地位に注目する。 言語変化 – 社会言語学的観点からは、言語変化は技術の物理的制約(例:入力されたテキスト)や、グローバル化のような社会経済的優先順位の変化によって影響される。時間の経過に伴う言語的変化を、インターネット用語に重点を置いて探究する。 会話ディスコース – インターネット上の社会的相互作用やコミュニケーション実践のパターンの変化を探究する。 文体的拡散 – インターネット用語や関連する言語形式が一般的な用法へと広がっていくことの研究を含む。言語が変化するにつれ、会話ディスコースと文体的拡散は言語文体論の側面と重なり合う。 下記参照:文体的観点。 メタ言語と民間言語学 – インターネット上のこれらの言語形式や変化がどのように名づけられ論じられているかに注目する(例:インターネット用語の影響がアポストロフィの「消滅」や大文字化の喪失をもたらしたこと)。
教育的観点 インターネット言語学の教育的観点は、インターネットが形式的な言語使用、特に標準英語に与える影響を検討し、それがひいては言語教育に影響する。 インターネット利用の台頭と急速な普及は、インターネットというプラットフォーム特有の新しい言語的特徴をもたらした。これには、非形式的な書き言葉の使用の増加、書き方や文体の不統一、インターネットのチャットやSMSテキストメッセージにおける新しい省略形の使用などが含まれるが、これらに限られない。文字数に対する技術的制約が新しい省略形の台頭に寄与した。 こうした頭字語は主に実用的な理由で存在する。すなわち、技術的制約とは別に、これらの媒体を通じてコミュニケーションするのに必要な時間と労力を減らすためである。一般的な頭字語の例には、lol(「laughing out loud」、笑いの一般的な表現)、omg(「oh my god」)、gtg(「got to go」)がある。
教育的観点は、インターネットが言語教育に与える影響についての研究においてかなり確立されている。それは重要かつ決定的な側面であり、インターネット利用から生じる非形式的言語を、現在および将来の学生世代が適切かつ時宜にかなって使えるようにする教育に影響し、関わるからである。学生の学術論文における「guy」のようなくだけた語の使用や、「precede(先行する)」の代わりに「preclude(妨げる)」という語を選ぶことなど、非形式的な言語使用や誤った語の使用が学術的・形式的な状況へと浸透していくことへの懸念がある。教育者が指摘するように、学生の学術的成果物ではより高い頻度でつづりや文法の問題も生じており、「you」を「u」、「to」を「2」と省略するのが最も一般的である。
エレノア・ジョンソンのような言語学者や教授は、書き言葉における広範な誤りがインターネット利用と強く結びついていると推測しており、教育者も同様に学生の成果物に新しい種類のつづりや文法の誤りが見られると報告している。しかし、提唱されるこの結びつきを裏付ける科学的証拠はない。 は著書『Always On』で、インターネットチャット、SMSテキストメッセージ、電子メールなどのインターネットを介したコミュニケーション(IMC)の使用が、学生の文章に与える影響はほとんどないと論じている。 2009年に『British Journal of Developmental Psychology』が発表した研究では、日常的にテキストメッセージを送る(携帯電話でSMSを使ってメッセージを送る)学生ほど幅広い語彙を示すことが分かり、これが読解力の発達に良い影響を与える可能性がある。
インターネットの利用は、学術的・形式的な言語使用にふさわしくないとされる文体をもたらしたものの、インターネット利用は言語教育を妨げるどころか、むしろそれを助けうる。インターネットは、特に第二言語や外国語学習において、言語学習を高める潜在的な利益をもたらしうることをさまざまな形で証明してきた。インターネット言語学に関連するインターネットを通じた言語教育は、最も重要には、コミュニケーションの側面(電子メール、ディスカッションフォーラム、チャットメッセンジャー、ブログなどの使用)を通じて応用される。 IMCは言語学習者とその言語の母語話者との間のより大きな交流を可能にし、より多くの誤り訂正と標準語のより良い学習機会を提供し、その過程で交渉や説得といった特定の技能の習得を可能にする。
文体的観点 この観点は、インターネットとその関連技術が、特に文学において、言語における新しく異なる形の創造性をどのように促してきたかを検討する。 インターネットを、新しい言語現象が生じる媒体としてとらえる。この新しい言語様式は、話し言葉と書き言葉の両方の混合物であるため、研究する価値がある。たとえば、伝統的な書き言葉が静的であるのに対し、インターネット上の新しい言語は動的であり、コンピュータ画面上で語がさまざまな色やフォントサイズで現れうる。 しかし、この新しい言語様式には、自然言語には見られない他の要素も含まれる。一例は、電子メールやディスカッションフォーラムに見られる「フレーミング」の概念である。電子メールに返信する際、人々は一般に送信者のメッセージを枠組みとして自分のメッセージを書く。電子メールのある部分に返信し、他の部分は省くことを選べる。ディスカッションフォーラムでは、新しいスレッドを立ち上げることができ、物理的な場所にかかわらず誰もがインターネットを通じて示された考えに応答できる。これは通常、書き言葉には見られないものである。
今後の研究には、インターネットとそのさまざまな技術が絶えず生み出している新しい種類の表現や、それらが書き言葉だけでなく話し言葉に及ぼす影響も含まれる。 インターネット言語のコミュニケーションスタイルは、以下のCMCチャネルで最もよく観察される。そこでは、伝送の時間差といった技術的制約を克服し、書かれたテキストではしばしば曖昧になる社会的手がかりを再確立しようとする試みがしばしば見られるからである。
携帯電話 携帯電話は、基本的なコミュニケーション機能を超えた表現の可能性を持つ。これはガーディアンが開催したようなテキストメッセージ詩のコンテストに見ることができる。 携帯電話が課す160字の制限は、それを克服するために利用者に言語的創造性を発揮させる動機を与えた。文字数制限を持つ新技術の同様の例がTwitterであり、280字の制限がある。利用者のツイートに導入されたこうした新しい省略形が「怠惰」なのか、それとも創造的なコミュニケーションの断片なのかについては議論があった。議論が続いているとはいえ、Twitterが新しい用語で言語的景観に貢献し、また新しい次元のコミュニケーションをもたらしたことは疑いない。
携帯電話はまた、新しい文学ジャンル、すなわちケータイ小説を生み出した。典型的なケータイ小説はいくつかの章から成り、読者は短い分割配信としてダウンロードする。これらの小説は、伝統的な小説のような編集過程を経ないため「生」の形をとる。テキストメッセージに似た短い文で書かれる。 こうした小説の作者は、電子メールやオンラインのフィードバックチャネルを通じて、読者から感想や新しいアイデアを受け取ることもできる。伝統的な小説執筆とは異なり、読者のアイデアがストーリーに取り込まれることもあれば、作者が小説の需要や人気(通常はダウンロード数で測られる)に応じて筋書きを変えることを決める場合もある。 その人気にもかかわらず、これらの小説の「語彙の多様性の欠如」や貧弱な文法に関する批判もあった。
ブログ ブログの登場は日記を書く新しい方法をもたらした。言語学的観点からは、ブログで使われる言語は「その最も『裸の』形」にあり、正式な編集過程を経ずに世界に向けて公開される。ほぼ他のすべての印刷された言語が何らかの編集や標準化を経ているため、これがブログを際立たせている。 デイヴィッド・クリスタルは、ブログを「書き言葉の進化における新しい段階の始まり」と述べた。 ブログは非常に人気を博し、フォトブログ、ビデオブログ、音声ブログ、モブログの登場とともに、書かれたブログを超えて拡大した。 こうしたインタラクティブなブログの発展は新しい言語的慣習やスタイルを生み出しており、今後さらに多くが現れると見込まれている。
仮想世界 仮想世界は、利用者がこれらの新しい媒体内でのコミュニケーションのために自然言語の使用をどのように適応させているかについての知見を与える。テキストベースのチャットルームやコンピュータでシミュレートされた世界での利用者の相互作用を通じて生じたインターネット言語は、デジタル共同体内でのスラングの発展をもたらした。その例には「pwn」や「noob」がある。顔文字は、利用者がサイバースペースのコミュニケーションの制約に合わせてさまざまな表現を適応させてきたさらなる例であり、その一つが「情動性の喪失」である。
(MUD)のロールプレイングゲーム(RPG)や仮想世界といったニッチにおけるコミュニケーションは、速度、簡潔さ、自発性に重点を置いた、高度に双方向的なものである。その結果、CMCは一般により生き生きとし、変わりやすく、構造化されておらず、開かれている。会話の筋や短いターンのつながりには、しばしば複雑な連鎖や交換構造の組織が見られる。用いられるCMCの方策には、EMPHASISのような語の大文字化、*stress*のように語をアスタリスクで囲む使用、???!?!?!?のような句読点の創造的な使用などがある。 記号はディスコース機能にも使われ、たとえばアスタリスクは会話修復の標識として、矢印やキャレットはダイクシスや指示対象の標識として用いられる。 言語のこれら新しい形に貢献するほか、仮想世界は言語を教えるのにも使われている。は、学生に実生活環境のシミュレーションを提供し、言語技能を高める創造的な方法を見つけさせる。仮想世界は、若い学習者にとって、すでにそうした場所を「学び遊ぶ自然な場所」と見ているため、言語学習の良い道具である。
電子メール この観点のもとで研究される最も人気のあるインターネット関連技術の一つが電子メールであり、それは多くの点で言語の文体を拡張してきた。電子メールの言語的特徴に関する研究は、書式、文法、スタイルの点で話し言葉と書き言葉のスタイルの混成があることを示している。 電子メールは、その利便性、速度、自発性のため、伝統的な手紙書きに急速に取って代わりつつある。 それは一時的に感じられ、簡単に削除できるため、しばしば非形式性と結びつけられる。しかし、この通信媒体が成熟するにつれ、電子メールはもはや友人や親戚の間で非形式的なメッセージを送ることに限られなくなった。むしろ、業務上のやり取りもますます電子メールで行われるようになっている。求職者も潜在的な雇用主に履歴書を送るのに電子メールを使っている。より形式的な用法へと向かう動きの結果、この媒体は形式的なものから非形式的なものまで幅広い文体を表すものとなる。
電子メールは学生の文章における非形式的言語の使用増加の責を負わされてきたが、デイヴィッド・クリスタルは、電子メールは「言語教育にとって脅威ではない」と論じている。豊かな文体的表現力を備えた電子メールは、言語学習者が責任をもって自らの言語的選択を行う領域として機能しうるからである。さらに、若い世代の電子メール使用への高い傾向は、デジタル媒体を通じてであっても自分の考えを組み立てる努力ゆえに、彼らの文章力やコミュニケーション能力を向上させうる。
インスタントメッセージ 他のオンラインコミュニケーションの形式と同様に、インスタントメッセージも独自の頭字語や短縮形を発展させてきた。しかしインスタントメッセージは、参加者が私的に会話しながらリアルタイムで互いに交流できる点で、電子メールやチャットグループとはかなり異なる。 インスタントメッセージでは、参加者間の親しさという次元が加わる。この親密さの高まりは、言語における非形式性や「表記上の特異性」を大きくする。参加者の年齢差が非常に大きいこともあるため、文体的変異の出現も多い。たとえば孫娘がインスタントメッセージで祖母と近況を語り合える。共通の関心で集まるチャットグループとは異なり、ここでは言語を合わせるという圧力がない。
応用的観点 応用的観点は、インターネットの言語的活用を、そのコミュニケーション能力の良い面と悪い面の観点からとらえる。 インターネットは利用者が多言語主義を経験できるプラットフォームを提供する。英語は依然としてインターネット上で支配的に使われる言語であるが、他の言語も利用者数を徐々に増やしている。 世界のインターネット利用のページは、言語、国籍、地理別のインターネット利用者数についての情報を提供している。より多くの言語共同体がインターネットに接続するにつれ、この多言語環境は多様性を増し続けている。したがってインターネットは、少数言語や危機言語が言語使用の復興や認識喚起を図りうるプラットフォームである。これは、これらの言語に二つの重要な点、すなわち言語記録と言語復興において前進の機会を提供する二つの事例に見ることができる。
言語記録 第一に、インターネットは言語記録を促進する。音声や映像の記録といったメディアのデジタルアーカイブは、言語記録の保存に役立つだけでなく、インターネットを通じた世界的な普及も可能にする。 危機言語についての広報は、言語記録への世界的な関心を刺激するのに役立ってきた。
アルカディアから資金提供を受けたハンス・ラウジング危機言語プロジェクト(HRELP)のような財団も、言語記録への関心を育てるのに役立っている。HRELPは、危機言語を記録し、記録資料を保存・普及させることなどを目指すプロジェクトである。収集された資料は、その(ELAR)プログラムのもとでオンラインで利用可能になっている。
言語記録を支える他のオンライン資料には、危機言語に関する話題のニュースや記事を提供する Language Archive Newsletter がある。エスノローグのウェブ版も、世界の既知の現存するすべての言語の簡単な情報を提供している。危機言語や言語記録の資源や情報をインターネット上で利用可能にすることで、研究者はこれらの資料の上に構築でき、ひいては危機言語を保存できる。
言語復興 第二に、インターネットは言語復興を促進する。長年にわたり、デジタル環境は仮想的な接触を可能にするさまざまな洗練された形で発展してきた。電子メールからチャット、インスタントメッセージまで、これらの仮想環境はコミュニケーションを行う者の間の空間的距離を橋渡しするのに役立ってきた。電子メールの使用は、会議形式などのさまざまなスタイルで学生に会話させ、議論を生み出すために語学講座に取り入れられてきた。 同様に、電子メールの使用は、母語が話されていない場所に移った少数言語の話者がインターネットを利用して家族や友人と連絡を取り、母語の使用を維持できるという意味で言語復興を促進する。Skypeのような電話ブロードバンド通信の発展と利用の増加により、インターネットを通じた言語復興はもはや読み書きのできる利用者に限られなくなった。
ハワイの教育者は、言語復興プログラムでインターネットを利用してきた。 グラフィカルな電子掲示板システム Leoki(力強い声)は1994年に設立された。システムの内容、インターフェース、メニューはすべてハワイ語である。イマージョン・スクール・システム全体に導入され、電子メール、チャット、辞書、オンライン新聞などの要素を含む。Leokiシステムがまだ導入されていない大学などの高等教育機関では、教育者は Daedalus Interchange、電子メール、ウェブなど他のソフトウェアやインターネットツールを使って、ハワイ語の学生をより広い共同体とつなげている。
インターネットの別の使い方には、少数言語の学生が遠くの読者に向けて自らの母語で母文化について書くことがある。また、言語と文化を守ろうとする試みとして、オック語の話者は世界中の他のオック語話者に手を伸ばすためにインターネットを利用してきた。これらの方法は、少数言語でコミュニケーションすることによって、その言語を使う理由を提供する。 さらに、若い世代が「かっこいい」と考えるデジタル技術の使用は、彼らを引きつけ、ひいては母語への関心と使用を維持させる。
インターネットの悪用 インターネットはテロリズム、インターネット詐欺、といった活動にも悪用されうる。近年、匿名を保つのが比較的容易であることから、電子メールやInternet Relay Chat(IRC)などインターネットの使用が関わる犯罪が増加している。 こうした陰謀は安全と保護に関する懸念をもたらす。法言語学的観点からは、探究すべき潜在的領域が多くある。検索語のフィルタリングに基づくチャットルームの児童保護手続きの開発は有効であるが、この課題を助ける言語学的志向の文献はまだ乏しい。 他の領域では、セマンティック・ウェブが個人のデータ保護のような課題に関与し、詐欺の防止に役立っていることが観察されている。
諸側面 この節で扱う側面には、コーパスとしてのウェブの検討や、言語識別と正規化の問題が含まれる。日常生活へのインターネット言語学の影響は、インターネット文体の広がりと影響、インターネット上の言語変化の傾向、会話ディスコースのもとで検討される。
コーパスとしてのウェブ ウェブがデータと資源の巨大な貯蔵庫であるため、言語科学者や技術者はますます言語データを求めてウェブに向かっている。 コーパスが計算言語学の分野で正式に言及されたのは、1989年のバンクーバーでのACL会議が最初であった。理論的な整合性を欠くとして多くの論争を呼び、この分野での役割に多くの懐疑を招いたが、 1993年に学術誌『Using Large Corpora』が刊行されて、計算言語学とコーパスの関係が広く受け入れられるようになった。
ウェブがコーパスであるかどうかを確かめるには、マッケナリーとウィルソン(1996年、21頁)が確立した定義に立ち返る価値がある。
コーパスとしてのウェブにより近く関連して、マニングとシュッツェ(1999年、120頁)はこの定義をさらに簡潔にしている。
慎重に構成された検索エンジンのクエリのヒット数が、語義曖昧性解消エンジンへの入力として、語義の頻度の順位を特定するために用いられた。 この方法は、ローカル言語と主要言語に並行して存在する既存のウェブページをまとめる並行コーパスの概念の導入によってさらに探究された。 ある特定の言語による単一の文書から、その言語に固有のコーパスを構築することが可能であることが示された。
テーマ コーパスとしてのウェブという領域で起こりうる発展について、多くの議論がなされてきた。語義曖昧性解消のためのデータ源としてウェブを使う開発は、2002年のEU MEANINGプロジェクトで提起された。 それは、ある領域内では語がしばしば単一の意味を持ち、領域はウェブ上で識別可能であるという仮定を用いた。これは、Word Expert のウェブサイトで手作業による語義注釈を集めるためにウェブ技術を用いることによってさらに探究された。
言語モデルの領域では、ウェブはデータの疎性に対処するために用いられてきた。前置詞句の係り受けを解決するために語彙統計が集められ、 一方でウェブ文書はコーパスのバランスを求めるために用いられた。
情報検索の領域では、共同体のTREC評価イニシアチブの一構成要素としてWebトラックが統合された。この作業に用いられたウェブの標本は約100GBに達し、大部分は .gov トップレベルドメインの文書から成っていた。
イギリス国立コーパス には、英語の中核をなす1万語について、支配的な意味と用法のパターンに関する豊富な情報が含まれている。
イギリス国立コーパスの語数(約1億)は、言語学者や辞書編集者が言語について学ぶための多くの経験的方策にとって十分であり、、語の振る舞いに関する量的情報を入力として利用する技術(構文解析)にとって満足のいくものである。
しかし他のいくつかの目的には、語の頻度のジップ的な性質の結果として不十分である。語彙ストックの大部分はイギリス国立コーパスで50回未満しか現れないため、そのような語について統計的に安定した結論を導くには不十分である。さらに、より稀な語、一般的な語の稀な意味、語の組み合わせについては、データが見つからない。研究者は、非常に大量のデータに基づく確率的言語モデルは、より小さく整理されたデータセットからの推定に基づくものよりも優れていることを見出している。
多言語ウェブ ウェブは早くも2013年には多言語コーパスとして明確に認識されていた。Ivković, D. (2013). The Eurovision Song Contest on YouTube: A corpus-based analysis of language attitudes. Language@Internet, 10, article 1. (urn:nbn:de:0009-7-35977). インターネット上の言語・文化多様性観測所によれば、2024年時点で約750の言語がデジタルの符号化を持ち、2億の稼働中のウェブサイトによる推定500億のウェブページのうち、約20%が英語、19%が中国語で、以下スペイン語(7.7%)、ヒンディー語(3.8%)、ロシア語(3.7%)、アラビア語(3.7%)、フランス語(3.4%)、ポルトガル語(3.1%)と続く。同じ情報源は、言語族ごとにデータをまとめ、インターネットがこれまで存在した中で最も多言語的な領域であるという事実を強調する「言語のサイバー地理学」の数値にも言及している。今日、95%以上の人が第一言語または第二言語でインターネットと関わることができるが、既存の言語の90%は、主に少数言語や危機言語であり、デジタル上の存在を持たないままである。
課題 言語モデルの領域では、テキストの種類によって統計が異なるため、いかなる言語モデルの適用可能性にも限界がある。 言語技術のアプリケーションが実際に使われる(新しいテキストの種類に適用される)とき、その言語モデルが訓練コーパスに適用されたときと同じように機能するかは定かでない。訓練コーパスが変わると、モデルの性能に相当の変動があることが分かっている。 この理論の類型の欠如は、言語モデリングの有用性の評価を制限する。