Запуск конвейера фабрики данных через JavaScript

Question

Запуск конвейера фабрики данных через JavaScript

1

Я сделал этот конвейер в Azure Data Factory, который копирует данные из таблицы хранения Azure в таблицу базы данных Azure SQL.

Таблице хранения Azure предоставляются данные из чата-браузера Javascript, который записывает ответы и сохраняет их в таблице. Я хотел бы вызвать CopyTabletoSQL через мое приложение javascript, как только все ответы будут записаны.

Это мой конвейер CopyTableToSQL.

{
"name": "CopyTabletoSQL",
"type": "Copy",
"policy": {
    "timeout": "7.00:00:00",
    "retry": 0,
    "retryIntervalInSeconds": 30,
    "secureOutput": false
},
"typeProperties": {
    "source": {
        "type": "AzureTableSource"
    },
    "sink": {
        "type": "SqlSink",
        "writeBatchSize": 10000
    },
    "enableStaging": false,
    "dataIntegrationUnits": 0
},
"inputs": [
    {
        "referenceName": "tableInputDataset",
        "type": "DatasetReference"
    }
],
"outputs": [
    {
        "referenceName": "OutputSqlTable1",
        "type": "DatasetReference"
    }
]
}

Есть ли способ выполнить это из приложения javascript? Документация (https://docs.microsoft.com/en-us/azure/data-factory/concepts-pipeline-execution-triggers) упоминает только.net, Powershell, REST API и SDK Python, но ничего для node.js

BergBerg 12 июль 2018, в 11:51

Источник

0

Мне удалось использовать docs.microsoft.com/en-us/rest/api/datafactory/pipelines/… чтобы создать пробу и попробовать его, и это было успешно. POST -URL- Авторизация: Носитель -случайные символы- Тип контента: application / json Как мне реализовать это в моем приложении javascript, чтобы я мог вызвать его в конце запуска моего приложения? Большое спасибо!
BergBerg 13 июль 2018, в 08:48

Теги:

javascript

azure

json

azure-data-factory

azure-table-storage

2 ответа

Ещё вопросы

Мне удалось использовать docs.microsoft.com/en-us/rest/api/datafactory/pipelines/… чтобы создать пробу и попробовать его, и это было успешно. POST -URL- Авторизация: Носитель -случайные символы- Тип контента: application / json Как мне реализовать это в моем приложении javascript, чтобы я мог вызвать его в конце запуска моего приложения? Большое спасибо!

Jay Gong · Answer 1 · 2018-07-13T06-27-00.000Z

1

Azure Data Factory nodejs sdk пока не поддерживается. Основываясь на вашем описании, вы уже создали конвейер в своей учетной записи adf. Вы можете использовать Azure Data Factory Pipelines - Create Run REST api для его выполнения.

В этом процессе вам нужно создать токен авторизации в заголовках. Вы можете обратиться к ADAL nodejs sdk для создания токена.

До этого вам необходимо предоставить разрешение adf для вашего рекламного приложения.

Надеюсь, это поможет вам.

Jay Gong 13 июль 2018, в 06:27

0

Мне удалось использовать docs.microsoft.com/en-us/rest/api/datafactory/pipelines/… чтобы создать пробу и попробовать его, и это было успешно. POST -URL- Авторизация: Носитель -случайные символы- Тип контента: application / json Как мне реализовать это в моем приложении javascript, чтобы я мог вызвать его в конце запуска моего приложения? Большое спасибо!
BergBerg 13 июль 2018, в 08:47
0

@BergBerg Вы можете отправить запрос с токеном авторизации в вашем приложении js. О создании токена, пожалуйста, обратитесь к SDK, упомянутому в моем ответе выше.
Jay Gong 13 июль 2018, в 08:50
0

Спасибо за вашу помощь / проблемы! Я нашел это: pastebin.com/urtabdvL отсюда stackoverflow.com/questions/14873443/… Кажется, все в порядке, но я не уверен, что писать в var postData = "Some data"; Я предполагаю, что это как-то связано с телом JSON? также мне нужно было бы добавить Authorization: Bearer -random symbols- как-нибудь? Я посмотрю на упомянутый вами SDK о том, как генерировать токен! Большое спасибо!
BergBerg 13 июль 2018, в 08:59
0

Для данных поста вы можете просто сослаться на то, что отправил пользовательский интерфейс Я думаю, что пустой объект {} должен работать, если вам не нужно передавать значение параметра.
Fang Liu 13 июль 2018, в 12:01
0

Для некоторого дополнительного контекста: Вот как сейчас выглядит мое приложение pastebin.com/fbp3ddzD . Я собрал его, следуя инструкциям и инструкциям из документов Microsoft и некоторого googleing / stackoverflow. Это простой чатбот, который задает 3 вопроса, записывает ответы, а затем у меня есть конвейер, который копирует ответы из моей таблицы в базу данных SQL. Все работает нормально, бот запрашивает и записывает ответы, а конвейер копирует их в мою базу данных SQL, я ищу способ автоматического запуска копирования из таблицы в базу данных после завершения диалога.
BergBerg 13 июль 2018, в 14:17

Показать ещё 3 комментария

Fang Liu · Answer 2 · 2018-07-12T11-26-00.000Z

Вы можете вызвать rest api в JavaScript.