Родился 20 апреля (2 мая) 1873 г. в д. Паантвардис Ковенской губернии. Окончил гимназию в Ковно. В 1893 году приехал в Москву. Окончил Московский университет. Печатался с 1898 года в «Журнале для всех» В.С. Миролюбова. В этом же году вместе с С.А. Поляковым основал издательство «Скорпион». Сотрудничал и печатался в газете «Русь», журналах «Весы», «Правда», «Золотое руно», «Русская мысль», «Русские ведомости», «Северные записки». Переводил – Байрона, Ибсена, Гауптмана, Ибсена, Гамсуна, Уайльда, Стриндберга, Киркегора, Тагора, Седерберга. Первая книга стихов «Земные ступени» опубликована в 1911 году. Второй сборник – «Горная тропа» (1912). Стихи писал по-русски и по-литовски. В 1920-1939 годах был руководителем литовской миссии в Москве и чрезвычайным посланником Литвы.
Печатался в русских эмигрантских изданиях «Эпопея», «Струги». В 1939 году был переведен Литовским правительством в Париж с сохранением звания Министра. В 1940 году стихи Б. были опубликованы в «Новом журнале» (Нью-Йорк). Автор книг на литовском языке: «Венок из слез», в 2-х частях, «Жертвенный дым», в 3-х частях, поэма «Новоселье крыс». Эти книги изданы в Литве в 1942 году в количестве 10 000 экземпляров и были распроданы за два месяца.
Третья (последняя) книга стихов – «Лилия и серп», вышла в 1948 году в Париже. В сборник включены ранние стихи (1897-1912), не вошедшие в книги: «Зеленые Ступени» и «Горная тропа».