GPT ਵਿੱਚ ਪੰਜਾਬੀ ਨੂੰ ਅੰਗਰੇਜ਼ੀ ਦੇ 2.44× ਟੋਕਨ ਲੱਗਦੇ ਹਨ — 41 ਭਾਸ਼ਾਵਾਂ ਵਿੱਚੋਂ ਸਭ ਤੋਂ ਮਹਿੰਗੀ

Jonhisking · 2026-10-01

ਅਸੀਂ ਇੱਕੋ ਕਸਟਮਰ-ਸਪੋਰਟ ਪ੍ਰੌਂਪਟ ਦਾ 41 ਭਾਸ਼ਾਵਾਂ ਵਿੱਚ ਅਨੁਵਾਦ ਕੀਤਾ ਅਤੇ OpenAI ਦੇ ਮੌਜੂਦਾ ਟੋਕਨਾਈਜ਼ਰ o200k_base (GPT-4o ਅਤੇ ਨਵੇਂ ਮਾਡਲ) ਨਾਲ ਟੋਕਨ ਗਿਣੇ। ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ 34 ਟੋਕਨ ਲੱਗਦੇ ਹਨ, ਪੰਜਾਬੀ ਵਿੱਚ 83 — ਯਾਨੀ 2.44×; 41 ਵਿੱਚੋਂ 41ਵਾਂ ਸਥਾਨ (1 = ਸਭ ਤੋਂ ਸਸਤੀ)। ਪੰਜਾਬੀ ਇਸ ਮਾਪ ਵਿੱਚ ਸਭ ਤੋਂ ਮਹਿੰਗੀ ਭਾਸ਼ਾ ਨਿਕਲੀ।

ਪੰਜਾਬੀ ਰੂਪ:

ਹੇਠਾਂ ਦਿੱਤੀ ਗਾਹਕ ਦੀ ਈਮੇਲ ਦਾ ਤਿੰਨ ਨੁਕਤਿਆਂ ਵਿੱਚ ਸਾਰ ਦਿਓ ਅਤੇ ਇੱਕ ਨਿਮਰ ਜਵਾਬ ਸੁਝਾਓ। ਗਾਹਕ ਕਹਿੰਦਾ ਹੈ ਕਿ ਆਰਡਰ ਦੋ ਦਿਨ ਦੇਰ ਨਾਲ ਪਹੁੰਚਿਆ ਅਤੇ ਡੱਬੇ ਵਿੱਚੋਂ ਇੱਕ ਚੀਜ਼ ਗਾਇਬ ਸੀ।

ਨਤੀਜੇ

ਭਾਸ਼ਾ	ਟੋਕਨ	ਅੰਗਰੇਜ਼ੀ ਦੇ ਮੁਕਾਬਲੇ	ਪੁਰਾਣਾ GPT-4 ਟੋਕਨਾਈਜ਼ਰ
English	34	1.00×	1.00×
简体中文	35	1.03×	1.53×
Español	40	1.18×	1.29×
Deutsch	43	1.26×	1.50×
한국어	49	1.44×	2.50×
हिन्दी	51	1.50×	4.59×
日本語	61	1.79×	2.21×
Čeština	68	2.00×	2.59×
Ελληνικά	70	2.06×	4.94×
ਪੰਜਾਬੀ	83	2.44×	7.41×

ਨਤੀਜੇ

ਅਜਿਹਾ ਕਿਉਂ ਹੁੰਦਾ ਹੈ

ਟੋਕਨਾਈਜ਼ਰ ਮੁੱਖ ਤੌਰ 'ਤੇ ਅੰਗਰੇਜ਼ੀ ਟੈਕਸਟ ਤੋਂ ਸਿੱਖਦਾ ਹੈ: " polite" ਜਾਂ " customer" ਵਰਗੇ ਸ਼ਬਦ ਇੱਕੋ ਟੋਕਨ ਹੁੰਦੇ ਹਨ, ਜਦਕਿ ਗੁਰਮੁਖੀ ਦੇ ਸ਼ਬਦ ਕਈ ਛੋਟੇ ਟੁਕੜਿਆਂ ਵਿੱਚ ਵੰਡੇ ਜਾਂਦੇ ਹਨ — ਅਕਸਰ ਇੱਕ ਅੱਖਰ ਜਾਂ ਇੱਕ ਲਗ-ਮਾਤਰ ਪ੍ਰਤੀ ਟੋਕਨ। ਦੇਵਨਾਗਰੀ ਵਿੱਚ ਲਿਖੀ ਹਿੰਦੀ ਸਿਰਫ਼ 1.50× ਹੈ, ਕਿਉਂਕਿ ਟੋਕਨਾਈਜ਼ਰ ਨੇ ਦੇਵਨਾਗਰੀ ਟੈਕਸਟ ਕਿਤੇ ਵੱਧ ਵੇਖਿਆ ਹੈ:

ਨੁਕਤਿਆਂ → ਨ | ੁ | ਕ | ਤ | ਿਆਂ · 5
ਪਹੁੰਚਿਆ → ਪ | ਹੁ | ੰ | ਚ | ਿਆ · 5
ਕਹਿੰਦਾ → ਕ | ਹ | ਿੰ | ਦਾ · 4

ਪੁਰਾਣੇ ਟੋਕਨਾਈਜ਼ਰ ਨਾਲ ਤੁਲਨਾ

GPT-4 ਦੌਰ ਦੇ ਟੋਕਨਾਈਜ਼ਰ (cl100k) 'ਤੇ ਇਹੀ ਪ੍ਰੌਂਪਟ 7.41× ਸੀ; ਹੁਣ 2.44× ਹੈ। ਖ਼ਰਚਾ ਤਿੰਨ ਗੁਣਾ ਤੋਂ ਵੱਧ ਘਟਿਆ ਹੈ, ਪਰ ਪੰਜਾਬੀ ਅਜੇ ਵੀ ਸਭ ਤੋਂ ਮਹਿੰਗੀ ਭਾਸ਼ਾ ਹੈ।

ਪੈਸਿਆਂ ਵਿੱਚ

ਪ੍ਰਤੀ 10 ਲੱਖ ਇਨਪੁਟ ਟੋਕਨ 2 ਡਾਲਰ ਲੈਣ ਵਾਲੇ ਮਾਡਲ 'ਤੇ ਇਹ ਪ੍ਰੌਂਪਟ 10 ਲੱਖ ਵਾਰ ਭੇਜਣ ਦਾ ਖ਼ਰਚਾ ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ 68 ਡਾਲਰ ਅਤੇ ਪੰਜਾਬੀ ਵਿੱਚ 166 ਡਾਲਰ ਹੈ। ਜੇ ਜਵਾਬ ਵੀ ਪੰਜਾਬੀ ਵਿੱਚ ਹੋਵੇ, ਤਾਂ ਇਹੀ ਗੁਣਕ ਆਉਟਪੁਟ ਟੋਕਨਾਂ 'ਤੇ ਵੀ ਲੱਗਦਾ ਹੈ, ਜੋ ਆਮ ਤੌਰ 'ਤੇ 4–5 ਗੁਣਾ ਮਹਿੰਗੇ ਹੁੰਦੇ ਹਨ।

ਬਚਤ ਕਿਵੇਂ ਕਰੀਏ

ਸਿਸਟਮ ਪ੍ਰੌਂਪਟ ਅਤੇ ਪੱਕੀਆਂ ਹਦਾਇਤਾਂ ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ ਲਿਖੋ; ਸਿਰਫ਼ ਯੂਜ਼ਰ ਦਾ ਇਨਪੁਟ ਪੰਜਾਬੀ ਵਿੱਚ ਰੱਖੋ।
ਵਿਚਕਾਰਲੇ ਕਦਮ (ਕਲਾਸੀਫ਼ਿਕੇਸ਼ਨ, ਐਕਸਟ੍ਰੈਕਸ਼ਨ, ਟੂਲ ਕਾਲ) ਅੰਗਰੇਜ਼ੀ ਜਾਂ JSON ਵਿੱਚ ਮੰਗੋ ਅਤੇ ਸਿਰਫ਼ ਅੰਤਿਮ ਜਵਾਬ ਪੰਜਾਬੀ ਵਿੱਚ।
ਪ੍ਰੌਂਪਟ ਦੇ ਪੱਕੇ ਹਿੱਸੇ ਲਈ ਪ੍ਰੌਂਪਟ ਕੈਸ਼ਿੰਗ ਵਰਤੋ।

ਸੀਮਾਵਾਂ

ਸਿਰਫ਼ ਇੱਕ ਪ੍ਰੌਂਪਟ ਮਾਪਿਆ ਗਿਆ ਹੈ; ਹੋਰ ਟੈਕਸਟਾਂ ਵਿੱਚ ਇਹ ਅਨੁਪਾਤ ±0.1–0.2 ਬਦਲ ਸਕਦਾ ਹੈ।
Claude ਅਤੇ Gemini ਦੇ ਟੋਕਨਾਈਜ਼ਰ ਵੱਖਰੇ ਹਨ; ਇਹ ਅੰਕੜੇ ਸਿਰਫ਼ OpenAI ਮਾਡਲਾਂ 'ਤੇ ਲਾਗੂ ਹੁੰਦੇ ਹਨ।
ਅਨੁਵਾਦ ਜਾਂਚੇ ਗਏ ਮਸ਼ੀਨੀ ਅਨੁਵਾਦ 'ਤੇ ਅਧਾਰਿਤ ਹੈ।

ਸਾਰੀਆਂ 41 ਭਾਸ਼ਾਵਾਂ ਦੇ ਨਤੀਜੇ (ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ): 41 ਭਾਸ਼ਾਵਾਂ ਦੀ ਤੁਲਨਾ

ਆਪਣਾ ਟੈਕਸਟ ਮਾਪੋ: ਤੁਹਾਡਾ ਪੰਜਾਬੀ ਪ੍ਰੌਂਪਟ ਅੰਗਰੇਜ਼ੀ ਦੇ ਮੁਕਾਬਲੇ ਕਿੰਨੇ ਟੋਕਨ ਅਤੇ ਕਿੰਨੇ ਪੈਸੇ ਲੈਂਦਾ ਹੈ, ਵੇਖੋ।

ਟੋਕਨ ਕਾਊਂਟਰ ਖੋਲ੍ਹੋ →