v1.3.0

[jssinn]

ksanGW

AWS S3-Compatible API 지원

• (NEW) EC(Erasure Code) 추가 (gw - EC(ErasureCode) 추가 #125)
• (ENHANCEMENT) POLICY에 IP 설정 추가 (policy - ip 설정  #130)
• (NEW) GW Config log 옵션에 따라 Log를 생성 (gw - log 동작 #131)
• (NEW) KsanRestore, KsanStorageMove 추가 (KsanRestoreObject, KsanStorageMove 추가 #132)
• (ENHANCEMENT) 각 Request에서 필요한 Data를 얻기 위해 따로 구현했던 Data Class들을 S3RequestData로 통합 (gw - S3DataRequest class 정리 #137)
• (ENHANCEMENT) S3Metadata에서 fastxml을 사용하지 않도록 수정, 속도 향상 (gw - S3Metadata 관련 수정 #138)
• (ENHANCEMENT) ACL에 display name이 없는 경우에도 정상 동작하도록 수정 (gw - ACL, display name이 없는 경우 처리 필요 #141)
• (ENHANCEMENT) 다양한 Object 저장 시스템에 적용하기 위해서 IObjectManager로 인터페이스화 하고 기존 S3ObjectOperation 클래스를 VFSObjectManager로 변경 새로 작성, Multipart 방식을 새로운 방식으로 변경. CompleteMultipartUpload에서 생성된 파일은 Part 파일에 대한 정보로 구성되도록 함. (gw - S3ObjectOperation class 변경 #169)
• (BUG-FIX) PutObject 시에 Replica에 저장되지 않는 버그 수정 (gw - putObject 시, replica가 해당 disk에 저장되지 않음. #170)
• (BUG-FIX) VFSObjectManager에서 OSD/getObject를 하는 경우 sourceRange와 encryption key 순서를 반대로 지정하는 버그 수정 (gw - getObject from OSD 버그 #171)
• (BUG-FIX) https로 접근이 되지 않는 버그 수정 (gw - https로 접근이 되지 않는 현상 #172)
• (BUG-FIX) VFSObjectManager/PutObject에서 기존 Metadata의 versionId로 Object를 생성하는 버그를 새로운 versionId로 생성하도록 수정 (gw - versioning enable 에서 putObject 시, 새로운 versionId로 생성되지 않음 #173)
• (BUG-FIX) PostObject Request 시에, object meta에 content length를 설정하지 않는 버그 수정 (gw - PostObject set contents length 버그 #174)
• (ENHANCEMENT) Encryption 관련 클래스를 통합하고 KMS 추가 (gw - encryption 관련 수정 #175)
• (BUG-FIX) UploadPartCopy 시에 source object가 multipart object인 경우 인식하지 못하는 버그 수정 (gw - uploadPartCopy 버그 수정 #176)
• (BUG-FIX) HeadObject에서 x-amz-version-id를 두 번 response로 보내는 버그 수정 (gw - HeadObject에서 response로 X_AMZ_VERSION_ID를 두번 보냄 #180)

\

ObjManager

• (ENHANCEMENT) 독립적인 ObjManager 설정 및 적용
• (BUG-FIX) Listobject performance improvements

\

ksanOSD

• 변경 사항 없음

ksanAgent

• (ENHANCEMENT) rabbitmq 서버 연결 실패 시 retry 기능 추가
• (BUG-FIX) 서비스 추가 시 .ServiceId 파일의 ServiceId 중복되는 버그 수정

ksanApiPortal

• (NEW) DiskpoolType에 PERFORMANCE 타입 추가
• (NEW) User Name, Diskpool Name으로 User Storage class 변경 API 추가
• (NEW) objManager Config 설정 기능 추가(Portal에 objManager Config 관리기능 추가 #160)
• (NEW) User Storage Class 관리 API 추가(Portal UI에 User Storage Class 등록기능 추가 #150)
• (ENHANCEMENT) Disk Week 상태 로직 변경(DIsk Week 로직 변경 #165)
• (ENHANCEMENT) 최초 설치시 설정한 사용자 명과 비밀번호를 Portal의 메인 계정으로 설정(All in one 최초 설치시 설정한 사용자명과 비밀번호를 Portal 의 메인 계정으로 설정 #163)
• (ENHANCEMENT) 불필요한 Service Type 제거(Portal 불필요한 ServiceType 제거 #161)
• (ENHANCEMENT) objManager config를 Portal에서 받아가도록 변경(backend 에서 objManager config를 Portal에서 받아가도록 변경 #168)
• (ENHANCEMENT) mariadb와 mongodb간의 스키마가 다른 부분 수정
• (ENHANCEMENT) backend 관련 서비스 등록 기능 추가(portal ui에서 backend 관련 서비스 등록 기능 추가 #156)
• (ENHANCEMENT) EC의 K, M 값 입력 가능하도록 변경
• (ENHANCEMENT) 기본 디스크풀 변경 기능 추가(portal ui에서 diskpool관련 변경사항 #154)
• (ENHANCEMENT) 기본 디스크풀 변경 API를 Post에서 Put으로 변경
• (ENHANCEMENT) 할당된 디스크들에 대한 예외처리를 추가(Disk 상태가 변경되지 않는 버그 #152)
• (BUG-FIX) ksanUser의 Storage Class 등록이 안되는 버그 수정(portal UI에서 ksanUser의 Storage Class 등록이 안되는 버그 #159)
• (BUG-FIX) Disk 상태가 반영되지 않는 버그 수정(Disk 상태가 변경되지 않는 버그 #152)
• (BUG-FIX) Config 설정시 알람이 가지 않는 버그 수정(Config 설정시 알람이 가지 않는 버그 #151)

ksanPortal (WEB UI)

• (NEW) Portal UI 추가
• (ENHANCEMENT) 새로고침 기능 개선(portal UI 새로고침 기능개선 #166)
• (ENHANCEMENT) 각모듈의 이름에 필터링 기능 추가(Portal 각 모듈명에 정규식 필터링 추가 #162)
• (ENHANCEMENT) portal에서 DiskPool의 EC값 입력기능 지원(portal UI에서 DiskPool의 EC값 입력기능 지원 요청 #158)
• (ENHANCEMENT) 서비스를 선택하지 않을 경우 삭제,시작,정지,재시작버튼 비활성화
• (ENHANCEMENT) 추가폼을 열때마다 초기화 하도록 변경
• (ENHANCEMENT) storage class 예시 추가
• (ENHANCEMENT) 기본 디스크풀 변경 기능 추가(portal ui에서 diskpool관련 변경사항 #154)
• (BUG-FIX) 로그아웃 안되는 버그 수정 (Portal UI logout 버그 #167)
• (BUG-FIX) 불필요한 경고문 제거(portal UI에서 경고가 너무 많음 #157)
• (BUG-FIX) Diskpool 추가 실패 버그 수정(DiskPool에서 EC 설정을 하지 않았을때 DiskPool 추가가 실패하는 버그 #164, KsanUser에 DiskPool 매핑이 안되는 버그 #155)

ksanLifecycleManager

• (ENHANCEMENT) objManager 기반으로 Object Metadata를 접근하도록 변경
• (ENHANCEMENT) s3backend의 공통 라이브러리를 사용하도록 변경

ksanLogManager

• (NEW) mongoDB 지원
• (ENHANCEMENT) s3backend의 공통 라이브러리를 사용하도록 변경

ksanReplicationManager

• (ENHANCEMENT) objManager 기반으로 Object Metadata를 접근하도록 변경
• (ENHANCEMENT) s3backend의 공통 라이브러리를 사용하도록 변경

CLI & Utility

통합 관리 도구(CLI)

• (BUG-FIX) CLI의 Usage 오기 수정
• (BUG-FIX) cbalance 유틸리티 컨트롤 버그 수정
• (BUG-FIX) fsck 유틸리티 컨트롤 버그 수정
• (ENHANCEMENT) MA(Maintenance) 타입의 Disk 관리 기능 추가
• (ENHANCEMENT) Diskpool의 Tolerance 변경을 허용 (EC 제외)
• (ENHANCEMENT) Diskpool 조회시 Default Diskpool이 표기되도록 변경
• (ENHANCEMENT) 특정 User가 정의한 “STANDARD” 타입의 S3 호환 Storage Class의 수정을 허용
• (ENHANCEMENT) KsanGetattr support display disk and osd server name
• (BUG-FIX) KsanFsck and KsanCbalance move object from the rest of disk to specific disk in the pool bug fix

ETC

설치 스크립트

• (ETC) docker 기반의 rabbitmq의 정상적인 구동을 위한 docker-compose.yml 수정

한계 및 향후 계획

한계 및 알려진 문제점

• ksanReplicationManager
  • DeleteMarker 동기화 기능 동작시 DeleteObjects로 삭제한 오브젝트의 동기화가 올바르게 동작하지 않음
  • CopyObject로 업로드한 오브젝트가 복제되지 않음
  • DeleteMarker 버전 아이디가 동일하게 복제되지 않음

향후 계획

• WEB 기반 KSAN 관리 인터페이스 개발 및 공개 (프로토타입)
• ksanReplicationManager
  • 알려진 문제점 해결 (DeleteMarker, CopyObject 대응 등)
  • config 변경시 자동으로 반영되도록 기능 지원
• ksanLifecycleManager
  • config 변경시 자동으로 반영되도록 기능 지원
  • 알려진 문제점 해결
• ksanLogManager
  • config 변경시 자동으로 반영되도록 기능 지원
• ksanGW
  • S3 서비스 성능 최적화
  • Azure Blob Service 안정화
  • Erasure Coding 기능 안정화
  • GCS 서비스 기능 추가
  • Multipart 관련 성능 최적화
• ksanFSCK
  • 개선된 Erasure Coding 오브젝트 정합성 검사 및 복구 지원

---

This discussion was created from the release v1.3.0.