Прежде всего отметим, что словосочетание правила русского языка не вполне корректно: о правилах можно говорить применительно не к языку, а к правописанию (правописание и язык – не одно и то же, хотя в школе на уроках русского языка учат главным образом правильному письму, поэтому у многих и создается впечатление, что изучение языка – это изучение правил орфографии и пунктуации). Применительно к языку следует говорить о нормах – в данном случае (если речь идет о роде слова кофе) нормах грамматических. Нормы фиксируются словарями и грамматиками, и фиксация нормы, разумеется, всегда вторична: не «так говорят, потому что так в словаре», а «так в словаре, потому что так говорят».

Главная особенность нормы – ее динамичность. Если в языке ничего не меняется, значит язык мертв. В живом языке постоянно рождаются новые варианты и умирают старые; то, что вчера было недопустимо, сегодня становится возможным, а завтра – единственно верным. И если лингвист видит, что норма меняется, он обязан зафиксировать это изменение. Появление в языке новых вариантов, действительно, приводит (со временем, иногда спустя очень долгое время) к их фиксации в словарях – это не «подгонка правил под ошибки», а объективная фиксация изменившейся нормы; по словам известного лингвиста К. С. Горбачевича, научная деятельность не должна сводиться «ни к искусственному консервированию пережитков языка, ни к бескомпромиссному запрещению языковых новообразований». В то же время словари, в которых зафиксированы языковые варианты, должны выполнять нормализаторскую функцию, поэтому в них разработана строгая система помет: какие-то варианты признаются неправильными, какие-то допустимыми, а какие-то – равноправными. И это, пожалуй, самое сложное в работе лингвиста–кодификатора: определить, какие варианты сейчас можно считать допустимыми, а какие – нет. Эта работа, разумеется, всегда вызывала и будет вызывать критику, поскольку язык – это достояние всех его носителей и каждого в отдельности.

Таким образом, фиксация новых вариантов, ранее признававшихся недопустимыми, – это не самоцель для лингвиста, а его обязанность, часть его работы (не случайно В. И. Даль писал: «Составитель словаря не указчик языку, а служитель, раб его»). Вместе с тем лингвист обязан отделить правильное от неправильного, нормативное от ненормативного и дать рекомендации относительно грамотного словоупотребления (т. е. все-таки стать указчиком – для носителей языка). Критериев признания правильности речи, нормативности тех или иных языковых фактов несколько, при этом массовость и регулярность употребления – только один из них. Например, ударение звОнит тоже массово распространено, но нормативным в настоящее время не признается, поскольку такое ударение не отвечает другим критериям, необходимым для признания варианта нормативным. Хотя очень вероятно, что  со временем такое ударение и станет допустимым (а через пару столетий, возможно, и единственно верным).

После этого долгого, но необходимого предисловия ответим на Ваш вопрос. Употребление слова кофе как существительного среднего рода сейчас признается допустимым в непринужденной разговорной речи. На письме (а также в строгой, официальной устной речи) слово кофе по-прежнему следует употреблять как существительное мужского рода – такова сейчас литературная норма.

Действительно, приставка недо- имеет значение неполноты, недостаточности (по сравнению с нормой), а раздельное написание не до-... используется, когда нужно обозначить не доведенное до конца действие. Поэтому глаголы недолюбил и недомечтал следует писать в этом контексте слитно.

Что касается глагола недописал / не дописал, то здесь есть аргументы как в пользу слитного, так и в пользу раздельного написания. Фраза, на наш взгляд, будет выглядеть гармоничнее, если все три глагола Вы напишете слитно.

Корректно: 1. В г. Усть-Джегута. 2. В г. Мирном. 3. В г. Коврове. 4. В г. Кольчугино. 5. В г. Озеры. 6. В г. Александрове. 7. В г. Орле. 8. В г. Юрьеве-Польском. 9. В г. Гусь-Хрустальном.
О склонении географических названий см. в «Письмовнике».

Вопрос о выборе окончания в форме родительного падежа множественного числа слова килограмм не является орфографическим, это проблема грамматической нормы. О ней Вы можете прочитать в ответе на вопрос № 290583.

Правила 1956 года и правила 2006 года, о которых Вы спрашиваете, – это своды орфографических и пунктуационных законов. Вот их полные библиографические описания: 

Правила русской орфографии и пунктуации : утв. Акад. наук СССР, М-вом высш. обр. СССР и М-вом просвещ. РСФСР / [наибольшее уч. в сост. принимали С. Г. Бархударов, К. И. Былинский, В. В. Виноградов, И. С. Истрина, И. А. Каиров, Е. И. Корневский, С. Е. Крючков, С. П. Обнорский, Д. Н. Ушаков, А. Б. Шапиро, Л. В. Щерба]. – Москва : Учпедгиз, 1956. – 176 с.   

Правила русской орфографии и пунктуации. Полный академический справочник : одобрено Орфографической комиссией РАН / [авт. Н. С. Валгина, Н. А. Еськова, О. Е. Иванова, С. М. Кузьмина, В. В. Лопатин, Л. К. Чельцова ; отв. ред. В. В. Лопатин] ; Рос. акад. наук, Отд. историко-филол. наук, Ин-т рус. яз. им. В. В. Виноградова. – Москва : Эксмо, 2006. – 478, [1] с. – Справочник представляет собой дополненную редакцию действующих «Правил русской орфографии и пунктуации» 1956 г. – Издания после 2006 г. стер.

Свод 2006 года нельзя признать реформирующим наше письмо, хотя по тем публикациям, которые выходили в СМИ в начале 2000-х, такой вывод вполне можно было сделать. Но журналистам нужна сенсация, им свойственно демонизировать любую ситуацию.

Вот, что написано в предисловии к правилам 2006 года: «Основной задачей этой работы была подготовка полного и отвечающего современному состоянию русского языка текста правил русского правописания. Действующие до сих пор «Правила русской орфографии и пунктуации», официально утвержденные в 1956 г., были первым общеобязательным сводом правил, ликвидировавшим разнобой в правописании. Со времени их выхода прошло ровно полвека, на их основе были созданы многочисленные пособия и методические разработки. Естественно, что за это время в формулировках «Правил» обнаружился ряд существенных пропусков и неточностей.

Неполнота «Правил» 1956 г. в большой степени объясняется изменениями, произошедшими в самом языке: появилось много новых слов и типов слов, написание которых «Правилами» не регламентировано. Например, в современном языке активизировались единицы, стоящие на грани между словом и частью слова; среди них появились такие, как мини, макси, видео, аудио, медиа, ретро и др. В «Правилах» 1956 г. нельзя найти ответ на вопрос, писать ли такие единицы слитно со следующей частью слова или через дефис. Устарели многие рекомендации по употреблению прописных букв. Нуждаются в уточнениях и дополнениях правила пунктуации, отражающие стилистическое многообразие и динамичность современной речи, особенно в массовой печати.

Таким образом, подготовленный текст правил русского правописания не только отражает нормы, зафиксированные в «Правилах» 1956 г., но и во многих случаях дополняет и уточняет их с учетом современной практики письма» (с. 9).

Нужно признать, что расхождения в рекомендациях свода 1956 года и свода 2006 года есть. Но они совершенно незначительны. Некоторыми из них мы обязаны еще Д. Э. Розенталю. Он в своих руководствах по правописанию не воспроизводил правила 1956 г., а уточнял, детализировал их и в некоторых случаях менял рекомендации. Все эти изменения связаны с изменениями, произошедшими в самом языке. 

Кроме сводов правил, орфографическую норму фиксируют и орфографические словари. Работа над созданием академического орфографического словаря поручена Институту русского языка им. В. В. Виноградова РАН. Там работают специалисты, которые ведут постоянные исследования в области орфографии, изучают современную практику письма, историю его нормирования и вырабатывают рекомендации по написанию слов, на наших глазах входящих в русский язык. Ими же готовятся к изданию новые редакции академического орфографического словаря. Наиболее полным из них на данный момент является 4-е издание  «Русского орфографического словаря» (М., 2012). Соответствуют рекомендациям этого словаря данные орфографического ресурса, которым любой желающий может пользоваться на нашем портале в разделе «Проверка слова».

Рекомендация странная. В словаре под ред. Д. Н. Ушакова заслужить, заслуживать ЧТО - только в следующих значениях: "оплатить за услугу, возместить услугу услугой" (прост.) и "загладить прежнюю провинность, грехи последующими поступками" (обл.). В других словарях аналогично.

Сочетание корректно.

Большой (в сочет. с сущ., характеризующими человека по его свойствам, способностям) - "обладающий какими-л. свойствами в высшей мере; чрезвычайный; исключительный". Б. добряк, гурман. Б-ая плакса. Б. приятель (очень близкий).

Академическим орфографическим словарем современного русского языка зафиксированы как нормативные два варианта написания этого наименования: КамА́З, -а и КАМА́З, -а (Камский автомобильный завод; автомобиль этого завода). 

В словарях приводятся и причастие конченный, и прилагательное конченый. См. также ответ на вопрос 308416.

Прилагательное карьерный, образованное от существительного карьера, зафиксировано в словарях (например, в "Большом толковом словаре" С. А. Кузнецова).