По общему правилу приставки пишутся слитно, но, согласно § 138 Правил русской орфографии и пунктуации под ред. В. В. Лопатина, пишутся через дефис наречия с приставкой по-, оканчивающиеся на -ому, -ему, -ски, -цки, -ьи, образованные от прилагательных (в том числе от местоименных прилагательных мой, наш, всякий и т. п.), напр.: по-новому, по-пустому, по-прежнему, по-хорошему, по-вашему, по-твоему, по-своему, по-другому, по-всякому (так же пишется вводное слово по-видимому), по-Петиному (от прилагательного Петин); по-всячески, по-людски, по-дружески, по-русски, по-немецки, по-казацки, по-лисьи, по-собачьи (и просторечные по-ихнему, по-нашенски, по-каковски); наречия по-его, по-её, по-их, образованные от несклоняемых местоименных прилагательных; по-социал-демократически, по-жюль-верновски, по-тёти-Валиному.

Наречие по-другому всегда пишется через дефис. Правильно: Как вы это делаете? – По-другому. Правило таково: пишутся через дефис наречия, образованные от прилагательных и местоимений,  начинающиеся с по-  и  оканчивающиеся  на -ки, -ьи, -ому, -ему, например: по-русски, по-немецки (а также по-латыни), по-птичьи, по-соловьиному, по-иному, по-моему, по-пустому, по-прежнему, по-видимому.

Однако раздельно пишется сочетание предлога по и прилагательного другому, например: вчера я обращался к вам по одному вопросу, а сегодня обращаюсь по другому.

1. Правильно: по собственному желанию. 2. Наречия, образованные от прилагательных и местоимений, начинающиеся с по- и оканчивающиеся на -ки, -ьи, -ому, -ему, например: по-русски, по-немецки, по-птичьи, по-соловьиному, по-иному, по-моему, по-пустому, по-прежнему, по-видимому. См. в учебнике С. Г. Бархударова «Правила русской орфографии и пунктуации».