Author Archive: admin

Скрипт парсинга курсов Bestchange

admin 17.09.2019 0 Comments

Скрипт проводит выборку курсов по заданным входным параметрам и может выдавать готовую json структуру по заданным направлениям. Выборка курсов производится через публичный API и содержит в себе всю необходимую информацию по лучшим курсам и параметрам обменных пунктов: Минимальная цена заявки…
Read more

Без рубрики

bestchange, парсер, скрипт, скрипты

Golang — использование envconfig для environment variables

admin 10.09.2019 0 Comments

Для работы с переменными окружения в Golang без использования библиотеки envconfig просто не обойтись:

//AppConfig struct to manage configuration env vars
type AppConfig struct {
	DBHost       string `envconfig:"DB_HOST" required:"true"`
	DBPort       int    `envconfig:"DB_PORT" required:"true"`
	DBUser       string `envconfig:"DB_USER" required:"true"`
	DBName       string `envconfig:"DB_NAME" required:"true"`
	DBPassword   string `envconfig:"DB_PASSWORD" required:"true"`	
}

...

// and let's use it in our main func:
var cfg AppConfig
err := envconfig.Process("myApp", &cfg)
if err != nil {
	return nil, err
}

// finally, let's use our app configuration
fmt.Println(cfg.DBHost)

//AppConfig struct to manage configuration env vars

type AppConfig struct {

DBHost string `envconfig:"DB_HOST" required:"true"`

DBPort int `envconfig:"DB_PORT" required:"true"`

DBUser string `envconfig:"DB_USER" required:"true"`

DBName string `envconfig:"DB_NAME" required:"true"`

DBPassword string `envconfig:"DB_PASSWORD" required:"true"`

}

...

// and let's use it in our main func:

var cfg AppConfig

err := envconfig.Process("myApp", &cfg)

if err != nil {

return nil, err

}

// finally, let's use our app configuration

fmt.Println(cfg.DBHost)

Библиотека также поддерживает default значения, required флаги, custom декодеры и многое многое другое.

Без рубрики

envconfig, golang

Golang sqlmock db tests — SELECT тесты

admin 27.08.2019 0 Comments

func TestFindAll(t *testing.T) {
	dbMock, mock, err := sqlmock.New()
	if err != nil {
		t.Errorf("An error '%s' was not expected when opening a stub database connection", err)
	}
	defer dbMock.Close()

	columns := []string{"id", "date", "name", "code"}

	expectedData := Data{
		Id: 1,
		Date:   time.Time{},
		Name:   "Name",
		Code:   "Code",
	}

	dbConn := sqlx.NewDb(dbMock, "")

	mock.ExpectQuery(`SELECT id,date,name,code FROM datas ORDER BY name ASC`).
		WillReturnRows(sqlmock.NewRows(columns).AddRow(expectedData.Id, expectedData.Date, expectedData.Name, expectedData.Code))

	r := NewRepository(dbConn)
	currencies, err := r.FindAll()
	assert.NoError(t, err)

	if err := mock.ExpectationsWereMet(); err != nil {
		t.Error(err)
	}

	expectedListOfDatas := []*Currency{&expectedData}
	assert.Equal(t, expectedListOfDatas, datas)
}

func TestFindAll(t *testing.T) {

dbMock, mock, err := sqlmock.New()

if err != nil {

t.Errorf("An error '%s' was not expected when opening a stub database connection", err)

}

defer dbMock.Close()

columns := []string{"id", "date", "name", "code"}

expectedData := Data{

Id: 1,

Date: time.Time{},

Name: "Name",

Code: "Code",

}

dbConn := sqlx.NewDb(dbMock, "")

mock.ExpectQuery(`SELECT id,date,name,code FROM datas ORDER BY name ASC`).

WillReturnRows(sqlmock.NewRows(columns).AddRow(expectedData.Id, expectedData.Date, expectedData.Name, expectedData.Code))

r := NewRepository(dbConn)

currencies, err := r.FindAll()

assert.NoError(t, err)

if err := mock.ExpectationsWereMet(); err != nil {

t.Error(err)

}

expectedListOfDatas := []*Currency{&expectedData}

assert.Equal(t, expectedListOfDatas, datas)

}

Без рубрики

go, sqlmock

Docker — сохранить image в tar

admin 20.08.2019 0 Comments

Для сохранения image в tar контейнер достаточно выполнить:

docker save my_image > my_image.tar

1	docker save my_image > my_image.tar

Теперь мы можем спокойно переносить docker image и далее «загружать» image:

docker load <input_path>/my_image.tar

1	docker load <input_path>/my_image.tar

Без рубрики

docker

Golang — Mock для sqlx драйвера базы данных

admin 06.08.2019 0 Comments

Для написания юнит тестов часто требуется «мокать» часть зависимостей, одна из самых распространенных — соединение и операции с базой данных. Если нет возможности использовать внедрение зависимости и использовать интерфейсы типа ExecerContext на входе функции то в дело вступают не совсем чистые…
Read more

Без рубрики

golang, mock, sqlx, unit tests

Полезные curl для Digital Ocean API

admin 23.07.2019 0 Comments

При автоматизации инфраструктуры под Terraform понадобилось найти id SSH ключей и типы дроплетов чтобы их было возможно использовать в конфигурации. Делюсь примерами curl запросов к Digital Ocean API (статья будет дополняться со временем). Вывод SSH id keys, привязанных к аккаунту:…
Read more

Без рубрики

API, curl, DigitalOcean, сниппеты

GitHub API — пара полезных curl примеров

admin 16.07.2019 0 Comments

Список команд в организации:

curl GET --url 'https://api.github.com/orgs/<organization-name>/teams?access_token=<TOKEN>’

1	curl GET --url 'https://api.github.com/orgs/<organization-name>/teams?access_token=<TOKEN>’

Работа с GitHub Status API, установка badge для Pull Request:

curl -d '{"state": "success","target_url": "https://example.com/build/status","description": "The build succeeded!","context": "continuous-integration/jenkins"}' -H "Content-Type: application/json" -X POST "https://api.github.com/repos/<organization-name>/<project-name>/statuses/<sha-of-the-commit>?access_token=<github-token>”

curl -d '{"state": "success","target_url": "https://example.com/build/status","description": "The build succeeded!","context": "continuous-integration/jenkins"}' -H "Content-Type: application/json" -X POST "https://api.github.com/repos/<organization-name>/<project-name>/statuses/<sha-of-the-commit>?access_token=<github-token>”

Данный сниппет может быть использован для установки badges на определенном pull request. При возникновении новых интересных запросов данный пост будет пополняться.

Без рубрики

API, curl, github, сниппет

Установка Kubernetes nginx controller на bare metal

admin 09.07.2019 0 Comments

Подробная инструкция как установить nginx ingress controller на чистый bare metal кластер: https://kubernetes.github.io/ingress-nginx/deploy/#bare-metal Или по шагам: Устанавливаем ingress-nginx service с type NodePort:

kubectl apply -f https://raw.githubusercontent.com/kubernetes/ingress-nginx/master/deploy/provider/baremetal/service-nodeport.yaml

1	kubectl apply -f https://raw.githubusercontent.com/kubernetes/ingress-nginx/master/deploy/provider/baremetal/service-nodeport.yaml

Проверим, что установка завершена успешно:

kubectl get services -n ingress-nginx

1	kubectl get services -n ingress-nginx

Видим:

ingress-nginx   ingress-nginx NodePort 10.245.213.134 <none> 80:31462/TCP,443:30310/TCP  2s

1	ingress-nginx ingress-nginx NodePort 10.245.213.134 <none> 80:31462/TCP,443:30310/TCP 2s

Поздравляем! Nginx контроллер успешно установлен, теперь можем сделать curl…
Read more

Без рубрики

Kubernetes, nginx

Получение данных Jira тикета по Atlassian API

admin 02.07.2019 0 Comments

Для получения данных по Jira тикету достаточно воспользоваться Atlassian REST API

curl -D- \
   -X GET \
   -H "Authorization: Basic <base64 encoded stuff>“ \
   -H "Content-Type: application/json" \
   "https://yourcompany.atlassian.net/rest/api/2/issue/TICKET-NUMBER"

curl -D- \

-X GET \

-H "Authorization: Basic <base64 encoded stuff>“ \

-H "Content-Type: application/json" \

"https://yourcompany.atlassian.net/rest/api/2/issue/TICKET-NUMBER"

В качестве токена авторизации можно (но не рекомендуется) воспользоваться base64 представлением вашего пароля:

echo -n 'your-email-in-jira@example.com:your-password' | openssl base64

1	echo -n '[email protected]:your-password' \| openssl base64

Без рубрики

API, atlassian, jira

Шаблон Golang table testing

admin 25.06.2019 0 Comments

Допустим у нас имеется некая функция:

NormalizeEndpoint(endpointBefore string) string

1	NormalizeEndpoint(endpointBefore string) string

Подготовим тесты на эту функцию:

func TestNormalizeEndpoints(t *testing.T) {
	type runnerTest struct {
		name           string
		endpointBefore string
		endpointAfter  string
	}

	var tests = []runnerTest{
		{"Test 1", "https://case1.com", "case1"},
                {"Test 2", "https://case2.com", "case2"},
	}

	for _, tt := range tests {
		t.Run(tt.name, func(t *testing.T) {
			assert.Equal(t, tt.endpointAfter, NormalizeEndpoint(tt.endpointBefore))
		})
	}
}

func TestNormalizeEndpoints(t *testing.T) {

type runnerTest struct {

name string

endpointBefore string

endpointAfter string

}

var tests = []runnerTest{

{"Test 1", "https://case1.com", "case1"},

{"Test 2", "https://case2.com", "case2"},

}

for _, tt := range tests {

t.Run(tt.name, func(t *testing.T) {

assert.Equal(t, tt.endpointAfter, NormalizeEndpoint(tt.endpointBefore))

})

}

При помощи нехитрой конструкции можно написать неплохие table тесты, которые легко обновлять и добавлять новые кейсы.

Без рубрики

golang, table tests, unit тесты