В JMeter, как добавить строку подключения Cosmos DB и как настроить все необходимые параметры драйвера JDBC в JMeter для подключения Cosmos DB?

В зависимости от того, сколько вы хотите инвестировать с точки зрения денег и времени, есть варианты:
Существует Java SDK для CosmosDB, поэтому вы можете скачать клиентскую библиотеку добавить его в Путь к классам JMeter и использовать Класс DocumentClient для установления соединения и выполнения операций из Сэмплер JSR223 с использованием языка заводной.
Ознакомьтесь со статьей Учебное пособие по NoSQL: создание консольного приложения Java API SQL для получения подробных инструкций, примера кода и т. д.