영상 부호화/복호화 방법, 장치 및 비트스트림을 저장하는 기록 매체
METHOD AND APPARATUS FOR ENCODING/DECODING IMAGE AND STORAGE MEDIUM FOR STORING BITSTREAM
특허 요약
이 명세서는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장하는 기록 매체를 개시한다. 영상 복호화 방법은, 비트스트림으로부터 주성분 정보, 신경망 정보 및 예측 정보를 획득하는 단계; 상기 예측 정보에 기초하여 현재 블록의 예측 블록을 생성하는 단계; 상기 예측 블록에 기초하여 현재 블록의 복원 블록을 생성하는 단계; 및 상기 신경망 정보에 기초하여 구성되는 신경망 기반 필터에 상기 주성분 정보와 상기 복원 블록을 입력하여 상기 복원 블록을 필터링하는 단계를 포함할 수 있다.
청구항
번호청구항
12

제11 항에 있어서,상기 필터링하는 단계는, 복수 개의 옵셋 값 중 하나를 선택하고 선택된 옵셋 값으로 조정된 기본 양자화 파라미터를 상기 신경망 기반 필터에 입력하는, 영상 복호화 방법.

13

제9 항에 있어서,상기 필터링하는 단계는, 상기 휘도 성분의 복원 블록과 상기 색차 성분의 복원 블록에 각각 다른 신경망 기반 필터를 적용하는 경우, 상기 휘도 성분과 색차 성분에 대한 복원 블록과 예측 블록, 경계 강도, 양자화 파라미터 및 블록 유형을 상기 신경망 기반 필터에 입력하는, 영상 복호화 방법.

1

비트스트림으로부터 주성분 정보, 신경망 정보 및 예측 정보를 획득하는 단계;상기 예측 정보에 기초하여 현재 블록의 예측 블록을 생성하는 단계;상기 예측 블록에 기초하여 현재 블록의 복원 블록을 생성하는 단계; 및상기 신경망 정보에 기초하여 구성되는 신경망 기반 필터에 상기 주성분 정보와 상기 복원 블록을 입력하여 상기 복원 블록을 필터링하는 단계를 포함하는, 영상 복호화 방법.

2

제1 항에 있어서,상기 주성분 정보는 상기 현재 블록과 상기 복원 블록의 차이로부터 추출되는 정보를 포함하고, 고유 값이 가장 큰 소정 개수의 성분에 대한 정보를 포함하는, 영상 복호화 방법.

3

제2 항에 있어서,상기 주성분 정보의 적어도 일부는 상기 현재 블록의 이웃 블록, 이웃 CTU, 이웃 슬라이스 또는 이웃 픽처의 주성분 정보에 기초하여 유도되는, 영상 복호화 방법.

4

제1 항에 있어서,상기 신경망 기반 필터는 복수 개의 계층으로 이루어지는 신경망의 집합인 모듈 복수 개를 포함하고, 상기 주성분 정보는 전환 모듈을 거쳐 상기 복수 개의 모듈 중 적어도 하나에 입력되는, 영상 복호화 방법.

5

제4 항에 있어서,상기 전환 모듈의 입력은, 상기 주성분 정보에 더해, 상기 현재 블록을 포함하는 영상의 부호화 정보와 상기 복원 블록 중 하나 이상을 포함하는, 영상 복호화 방법.

6

제5 항에 있어서,상기 현재 블록이 색차 성분 블록일 때, 상기 전환 모듈의 입력은 상기 현재 블록에 대응하는 휘도 블록의 복원 블록을 더 포함하는, 영상 복호화 방법.

7

제1 항에 있어서,상기 필터링하는 단계는, 복수 개의 신경망 기반 필터 중에서 하나의 신경망 기반 필터를 선택하되, 이웃 블록, 이웃 CTU, 이웃 슬라이스 또는 이웃 픽처의 필터링 결과에 기초하여 상기 하나의 신경망 기반 필터를 선택하는, 단계를 포함하는, 영상 복호화 방법.

8

제1 항에 있어서,상기 획득하는 단계는 상기 신경망 기반 필터의 적용 여부 정보 및 상기 신경망 기반 필터의 선택 정보를 포함하는 신경망 정보를 픽처, 슬라이스, CTU 또는 블록 수준에서 획득하는, 영상 복호화 방법.

9

제1 항에 있어서,상기 필터링하는 단계는, 휘도 성분의 복원 블록과 색차 성분의 복원 블록에 하나의 신경망 기반 필터를 적용하거나, 상기 휘도 성분의 복원 블록과 상기 색차 성분의 복원 블록에 각각 다른 신경망 기반 필터를 적용하는, 영상 복호화 방법.

10

제9 항에 있어서,상기 필터링하는 단계는, 상기 휘도 성분의 복원 블록과 상기 색차 성분의 복원 블록에 하나의 신경망 기반 필터를 적용하는 경우, 상기 색차 성분의 블록을 상기 휘도 성분의 블록의 해상도로 업샘플링한 후 상기 하나의 신경망 기반 필터에 입력하는, 영상 복호화 방법.

11

제10 항에 있어서,상기 필터링하는 단계는, 상기 휘도 성분의 복원 블록과 상기 색차 성분의 복원 블록에 하나의 신경망 기반 필터를 적용하는 경우, 상기 휘도 성분과 색차 성분에 대한 복원 블록과 예측 블록, 기본 양자화 파라미터, 슬라이스 양자화 파라미터 및 슬라이스 유형을 상기 하나의 신경망 기반 필터에 입력하는, 영상 복호화 방법.

14

제13 항에 있어서,상기 필터링하는 단계는,, 상기 색차 성분의 복원 블록에 상기 신경망 기반 필터를 적용할 때 상기 휘도 성분의 블록을 상기 색차 성분의 블록의 해상도로 다운샘플링한 이후 상기 신경망 기반 필터에 입력하는, 영상 복호화 방법.

15

제13 항에 있어서,상기 필터링하는 단계는, 두 개의 참조 픽처 리스트 내 특정 픽처에서 콜로케이티드 블록의 복원 블록을 상기 신경망 기반 필터에 입력하는, 영상 복호화 방법.

16

현재 블록의 예측 블록을 생성하고 상기 예측 블록에 기초하여 상기 현재 블록의 잔차 블록을 생성하는 단계;상기 잔차 블록의 부호화와 복호화를 거처 얻은 복원 잔차 블록에 기초하여 상기 현재 블록의 복원 블록을 생성하는 단계;상기 복원 블록과 상기 현재 블록의 차이로부터 추출되는 주성분 정보를 얻는 단계;상기 주성분 정보에 기초하는 신경망 기반 필터를 통해 상기 복원 블록을 필터링하는 단계; 및상기 주성분 정보와 상기 신경망 기반 필터에 대한 신경망 정보를 부호화하는 단계를 포함하는, 영상 부호화 방법.

17

영상 정보에 대한 비트스트림을 저장하는 컴퓨터가 판독 가능한 저장 매체에 있어서,상기 영상 정보는,현재 블록의 예측 블록을 생성하고 상기 예측 블록에 기초하여 상기 현재 블록의 잔차 블록을 생성하는 단계;상기 잔차 블록의 부호화와 복호화를 거처 얻은 복원 잔차 블록에 기초하여 상기 현재 블록의 복원 블록을 생성하는 단계;상기 복원 블록과 상기 현재 블록의 차이로부터 추출되는 주성분 정보를 얻는 단계;상기 주성분 정보에 기초하는 신경망 기반 필터를 통해 상기 복원 블록을 필터링하는 단계; 및상기 주성분 정보와 상기 신경망 기반 필터에 대한 신경망 정보를 부호화하는 단계를 포함하는 영상 부호화 방법에 의해 생성되는, 저장 매체.