HDFS

연결 구성 샘플

이 섹션에서는 연결을 만들 때 구성할 다양한 필드의 샘플 값이 표시됩니다.

사용자 이름 및 비밀번호 연결 유형

작업

이 섹션에서는 이 커넥터에서 일부 작업을 수행하는 방법을 보여줍니다.

MakeDirectory 작업

이 작업은 지정된 경로에 디렉터리를 만듭니다.

MakeDirectory 작업의 입력 매개변수

MakeDirectory 작업을 구성하는 방법의 예시는 예시를 참고하세요.

ListStatus 작업

이 작업은 제공된 경로의 콘텐츠를 나열합니다.

ListStatus 작업의 입력 매개변수

ListStatus 작업을 구성하는 방법의 예시는 예시를 참고하세요.

GetHomeDirectory 작업

이 작업은 현재 사용자의 홈 디렉터리를 가져옵니다.

GetHomeDirectory 작업의 입력 매개변수

GetHomeDirectory 작업을 구성하는 방법의 예시는 예시를 참고하세요.

DeleteFile 작업

이 작업은 파일 또는 디렉터리를 삭제합니다.

DeleteFile 작업의 입력 매개변수

DeleteFile 작업을 구성하는 방법의 예시는 예시를 참고하세요.

GetContentSummary 작업

이 작업은 파일 또는 폴더의 콘텐츠 요약을 가져옵니다.

GetContentSummary 작업의 입력 파라미터

GetContentSummary 작업을 구성하는 방법의 예시는 예시를 참고하세요.

RenameFile 작업

이 작업은 파일 또는 디렉터리의 이름을 바꿉니다.

RenameFile 작업의 입력 매개변수

RenameFile 작업을 구성하는 방법의 예시는 예시를 참고하세요.

SetPermission 작업

이 작업은 경로의 권한을 설정합니다.

SetPermission 작업의 입력 매개변수

SetPermission 작업을 구성하는 방법의 예시는 예시를 참고하세요.

SetPermission 작업

이 작업은 경로의 권한을 설정합니다.

SetPermission 작업의 입력 매개변수

SetPermission 작업을 구성하는 방법의 예시는 예시를 참고하세요.

SetOwner 작업

이 작업은 경로의 소유자와 그룹을 설정합니다.

SetOwner 작업의 입력 매개변수

SetOwner 작업을 구성하는 방법의 예시는 예시를 참고하세요.

UploadFile 작업

이 작업은 파일을 업로드합니다.

UploadFile 작업의 입력 매개변수

UploadFile 작업을 구성하는 방법의 예시는 예시를 참고하세요.

DownloadFile 작업

이 작업을 수행하면 파일을 다운로드합니다.

DownloadFile 작업의 입력 매개변수

DownloadFile 작업을 구성하는 방법의 예시는 예시를 참고하세요.

AppendToFile 작업

이 작업은 파일을 추가합니다.

AppendToFile 작업의 입력 매개변수

AppendToFile 작업을 구성하는 방법의 예시는 예시를 참고하세요.

GetFileChecksum 작업

이 작업은 파일의 체크섬을 가져옵니다.

GetFileChecksum 작업의 입력 매개변수

GetFileChecksum 작업을 구성하는 방법의 예시는 예시를 참고하세요.

작업 예시

이 섹션에서는 이 커넥터에서 일부 작업 예시를 수행하는 방법을 보여줍니다.

예시 - 디렉터리 만들기

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. MakeDirectory 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예 - 홈 디렉터리 가져오기

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. GetHomeDirectory 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

     {}
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Path": "/user/hduser"
}]

예시 - 파일 삭제

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. DeleteFile 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser/testFile"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예시 - 파일 상태 나열

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. ListStatus 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "path": "/user/hduser/deletefile"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "fileId": 16471.0,
  "PathSuffix": "data.txt",
  "owner": "hduser",
  "group": "supergroup",
  "length": 38.0,
  "permission": "644",
  "replication": 1.0,
  "storagePolicy": 0.0,
  "childrenNum": 0.0,
  "blockSize": 1.34217728E8,
  "modificationTime": "2024-08-16 16:12:01.921",
  "accessTime": "2024-08-16 16:12:01.888",
  "type": "FILE"
}, {
  "fileId": 16469.0,
  "PathSuffix": "file2.txt",
  "owner": "hduser",
  "group": "supergroup",
  "length": 53.0,
  "permission": "644",
  "replication": 1.0,
  "storagePolicy": 0.0,
  "childrenNum": 0.0,
  "blockSize": 1.34217728E8,
  "modificationTime": "2024-08-16 16:12:01.762",
  "accessTime": "2024-08-16 16:12:01.447",
  "type": "FILE"
}]

예 - 파일의 콘텐츠 요약 가져오기

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. GetContentSummary 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser/appendtofile"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

  [{
  "DirectoryCount": "1",
  "FileCount": "1",
  "Length": 52.0,
  "Quota": -1.0,
  "SpaceConsumed": 52.0,
  "SpaceQuota": -1.0,
  "ecpolicy": "",
  "snapshotdirectorycount": "0",
  "snapshotfilecount": "0",
  "snapshotlength": "0",
  "snapshotspaceconsumed": "0"
}]

예 - 파일 이름 바꾸기

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. hdfs_RenameFile_action 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser/renamefile_second/file1.txt",
     "Destination": "/user/hduser/renamefile_second/file1rename"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예시 - 파일 권한 설정

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. SetPermission 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser/gcpdirectory",
     "Permission": "777"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예시 - 파일 소유자 설정

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. SetOwner 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   {
     "Path": "/user/hduser/gcpdirectory",
     "Owner": "newowner"
   }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예 - 파일 업로드

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. UploadFile 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

      { "Path": "/user/newfile9087.txt", "Content": "string" }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[{
  "Success": true
}]

예 - 파일 다운로드

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. DownloadFile 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   { "Path": "/user/sampleFile/file1.txt" }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[ { "Output": "This is sample File\nfor this testing\ncontent" } ]

예 - 파일 추가

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. AppendToFile 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   { "Path": "/user/sampleFile/file1.txt", "Content": "content" }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[ { "Success": true } ]

예시 - 파일의 체크섬 가져오기

1. Configure connector task 대화상자에서 Actions를 클릭합니다.
2. GetFileChecksum 조치를 선택한 다음 완료를 클릭합니다.
3. 데이터 매핑 섹션에서 Open Data Mapping Editor를 클릭한 후 Input 필드에 다음과 유사한 값을 입력합니다.

   { "Path": "/user/sampleFile/file1.txt" }
   

작업이 성공하면 커넥터 태스크의 connectorOutputPayload 응답 매개변수가 다음과 비슷한 값을 갖습니다.

[ { "Algorithm": "MD5-of-0MD5-of-512CRC32C", "Bytes": "00000200000000000000000080f5b53ae8c165ae56e86109b8bb2a1700000000", "Length": 28 } ]

항목 작업 예시

이 섹션에서는 이 커넥터에서 일부 항목 작업을 수행하는 방법을 보여줍니다.

예 - 모든 파일의 데이터 나열

이 예시에서는 Files 항목에 있는 모든 파일의 데이터를 가져옵니다.

1. Configure connector task 대화상자에서 Entities를 클릭합니다.
2. Entity 목록에서 Object를 선택합니다.
3. List 작업을 선택한 후 완료를 클릭합니다.

예시 - 권한 데이터 가져오기

이 예시에서는 Permission 항목에서 지정된 ID가 있는 권한의 데이터를 가져옵니다.

1. Configure connector task 대화상자에서 Entities를 클릭합니다.
2. Entity 목록에서 Permission를 선택합니다.
3. Get 작업을 선택한 후 완료를 클릭합니다.
4. 커넥터 태스크의 태스크 입력 섹션에서 EntityId를 클릭한 후 기본값 필드에 /user/hduser/appendfile을 입력합니다.

   여기서 /user/hduser/appendfile은 Permission 항목의 고유 ID입니다.