Розробка спеціальних алфавітів кодування та відновлення даних

Abstract

Запропонований варіант ущільнення даних, який використовує природну збитковість текстових повідомлень. Відомо, що середня збитковість європейських мов - 50 - 60%, тобто при втраті частини тексту є висока вірогідність відновлення його смислу. В роботі розглянуті і проаналізовані декілька підходів до ущільнення, кодування і відновлення даних, які враховують доцільність з точки зору розуміння тексту скорочення окремих типових слів і виразів. Аналіз багатьох прикладних текстів, включаючи і технічні, показав, що ступінь їх розуміння фахівцем навіть без спеціальних словників сягає 90%. Розроблений скорочений алфавіт з обмеженим набором біграм та триграм та смисловим словником, що дозволило суттєво зменшити об'єм переданої інформації.