Explore
Back to Glossary
Language AIT

Transformer

Transformer

Attention वापरणारी neural-network architecture.

सोप्या भाषेत

हा शब्द म्हणजे काय?

2017 च्या Transformer paper ने recurrence शिवाय attention वर आधारित architecture मांडली. आज अनेक language models या कुटुंबातील रचना वापरतात, तरी प्रत्येक Transformer सारखा model एकसारखा नसतो.

Familiar example

सोपं उदाहरण

अनुवाद करताना input वाक्यातील संबंधित शब्दांवर एकाच वेळी लक्ष देणे.

Analogy

ओळखीच्या उदाहरणातून

वाक्य समजताना फक्त शेवटच्या शब्दावर नव्हे तर अर्थाला मदत करणाऱ्या अनेक शब्दांवर नजर टाकण्यासारखे.

एक महत्त्वाची मर्यादा

गैरसमज टाळा

Transformer मध्ये attention आहे म्हणून त्याला मानवी लक्ष किंवा समज आहे असे नाही.

Remember

हे लक्षात ठेवा

Transformer ही modern language models मध्ये वापरली जाणारी architecture आहे.

Trusted references

Sources