Cấu trúc số liệu video MPEG-1  và MPEG -2 bao gồm 6 lớp :

+ khối : khối 8x8 các điểm ảnh tín  hiệu chói và tín hiệu màu dùng cho phương pháp nén DCT

+ tổ hợp (cấu trúc ) khối  : một cấu trúc khối là một nhóm các khối tương ứng với lượng thông tin chứ đựng trong kích thước 16x16 điểm trên bức ảnh . cấu trúc khối này cũng xđ lượng thông tin chưa  tr đó sẽ thay đổi tùy theo cấu trúc đc sd . thông tin đầu tiên tr cấu trúc mang dạng của nó (là cấu trúc khối Y hay CR và CB) và các vecto bù chuyển động tương ứng.

+mảng :mảng bao gồm một vài cấu trúc khối kề nhau . kích thước lớn nhất của mảng có thể bao gồm toàn bộ bức ảnh và kích thước nhỏ nhất là một cấu trúc khối . thông tin đầu của mảng chứa đựng vị trí của mảng trong toàn bộ ảnh , và hệ số cân bằng lượng tử . kích thước thông tin đầu mảng đc xđ bằng số lỗi cho phép xh trong mảng đối với mỗi ứng dụng nhất định

+ảnh :lớp ảnh cho phép bộ giải mã xđ loại ảnh đc mã hóa là ảnh  P,B, hay I . thông tin đầu dùng để chỉ thứ tự truyền khung để bộ giải mã có thể sắp xếp các ảnh theo mọt thứ tự đúng . trong thông tin đầu của ảnh còn chứa  thông tin về đồng bộ , độ phân giải và phạm vi của vecto chuyển đg.

+ nhóm ảnh (GOP ) : nhóm ảnh là tổ hợp của nhiều các khung ảnh I , P , B .cấu trúc nhóm ảnh đc xđ bởi 2 tham số m , n .mỗi nhóm ảnh bắt đầu bằng 1 khung I và xđ điểm bắt đầu để tìm kiếm và biên tập .thông tin đầu gồm 25 bit chưa mã định thời và điều khiển.

+đoạn (chương trình ) video  :đoạn video gồm thông tin đầu , một số nhóm ảnh và thông tin kết thúc đoạn . thông tin đầu của đoạn video chứa đựng kích thước cảu điểm ảnh , kích thước cảu điểm ảnh , tốc độ bit của dòng video số , tần số ảnh và bộ đệm tối thiểu cần có . đoạn video và thông tin đầu tạo thành một dòng bit đc mã hóa gọi là dòng cơ bản.