teratail header banner
teratail header banner
質問するログイン新規登録

質問編集履歴

6

質問内容の修正

2019/06/11 02:44

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -81,7 +81,7 @@
81
81
  とかは作られます
82
82
 
83
83
  ログを見るとエラーとかは出てなくて
84
-
84
+ `
85
85
  [TASK_MANAGER ]I: Loading finished for table 'db_test'.'users_test' (Id = 1) by subtask 1. 0 records transferred. (replicationtask.c:2278)
86
-
86
+ `
87
87
  とずっとレコードが0になってターゲットにテーブル自体も作られません

5

質問内容の修正

2019/06/11 02:44

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -17,7 +17,8 @@
17
17
 
18
18
  ### 追記:
19
19
 
20
- テストのためにCSVファイルは公式ドキュメントと同じにしています
20
+ テストのために新規バケットでCSVファイルは1つだけ公式ドキュメントと同じものをおいています
21
+ /users/201906/1.csv
21
22
  ```
22
23
  101,Smith,Bob,4-Jun-14,New York
23
24
  102,Smith,Bob,8-Oct-15,Los Angeles

4

質問内容の修正

2019/06/11 02:43

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -81,6 +81,6 @@
81
81
 
82
82
  ログを見るとエラーとかは出てなくて
83
83
 
84
- [TASK_MANAGER ]I: Loading finished for table 'db_test'.'user_test' (Id = 1) by subtask 1. 0 records transferred. (replicationtask.c:2278)
84
+ [TASK_MANAGER ]I: Loading finished for table 'db_test'.'users_test' (Id = 1) by subtask 1. 0 records transferred. (replicationtask.c:2278)
85
85
 
86
86
  とずっとレコードが0になってターゲットにテーブル自体も作られません

3

質問内容の修正

2019/06/11 02:41

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -72,4 +72,15 @@
72
72
  }
73
73
  ]
74
74
  }
75
- ```
75
+ ```
76
+
77
+ db_test 自体は存在していて
78
+ タスクの制御テーブル設定で db_test を指定すると
79
+ awsdms_apply_exceptions
80
+ とかは作られます
81
+
82
+ ログを見るとエラーとかは出てなくて
83
+
84
+ [TASK_MANAGER ]I: Loading finished for table 'db_test'.'user_test' (Id = 1) by subtask 1. 0 records transferred. (replicationtask.c:2278)
85
+
86
+ とずっとレコードが0になってターゲットにテーブル自体も作られません

2

質問内容の修正

2019/06/11 02:40

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -12,4 +12,64 @@
12
12
  ```
13
13
  /users/<YYYYMMDD>/<user_id>.csv
14
14
  ```
15
- のような形でたまっているS3データはソースにすることはできないのでしょうか
15
+ のような形でたまっているS3データはソースにすることはできないのでしょうか
16
+
17
+
18
+ ### 追記:
19
+
20
+ テストのためにCSVファイルは公式ドキュメントと同じにしています
21
+ ```
22
+ 101,Smith,Bob,4-Jun-14,New York
23
+ 102,Smith,Bob,8-Oct-15,Los Angeles
24
+ 103,Smith,Bob,13-Mar-17,Dallas
25
+ 104,Smith,Bob,13-Mar-17,Dallas
26
+ ```
27
+
28
+ JSONは
29
+ ```
30
+ "TableName": "users_test",
31
+ "TablePath": "users/*/",
32
+ "TableOwner": "db_test",
33
+ ```
34
+ の部分だけいろいろかえて試行錯誤してますがどれもうまくいきません
35
+
36
+ ```
37
+ {
38
+ "TableCount": "1",
39
+ "Tables": [
40
+ {
41
+ "TableName": "users_test",
42
+ "TablePath": "users/*/",
43
+ "TableOwner": "db_test",
44
+ "TableColumns": [
45
+ {
46
+ "ColumnName": "Id",
47
+ "ColumnType": "INT8",
48
+ "ColumnNullable": "false",
49
+ "ColumnIsPk": "true"
50
+ },
51
+ {
52
+ "ColumnName": "LastName",
53
+ "ColumnType": "STRING",
54
+ "ColumnLength": "20"
55
+ },
56
+ {
57
+ "ColumnName": "FirstName",
58
+ "ColumnType": "STRING",
59
+ "ColumnLength": "30"
60
+ },
61
+ {
62
+ "ColumnName": "HireDate",
63
+ "ColumnType": "DATETIME"
64
+ },
65
+ {
66
+ "ColumnName": "OfficeLocation",
67
+ "ColumnType": "STRING",
68
+ "ColumnLength": "20"
69
+ }
70
+ ],
71
+ "TableColumnsTotal": "5"
72
+ }
73
+ ]
74
+ }
75
+ ```

1

質問内容の修正

2019/06/11 02:34

投稿

退会済みユーザー
title CHANGED
File without changes
body CHANGED
@@ -3,11 +3,13 @@
3
3
  S3 をソースにするドキュメントが
4
4
  https://docs.aws.amazon.com/ja_jp/dms/latest/userguide/CHAP_Source.S3.html
5
5
  これぐらいしかなく
6
-
6
+ ```
7
7
  /schemaName/tableName/LOAD001.csv
8
-
8
+ ```
9
9
  という形の取り込み方しか乗っていません
10
10
 
11
11
  たとえば
12
+ ```
12
13
  /users/<YYYYMMDD>/<user_id>.csv
14
+ ```
13
15
  のような形でたまっているS3データはソースにすることはできないのでしょうか