В начале XIV века арабский географ Абульфеда, после краткого перечисления основных памятников Константинополя, заметил: «Внутри города находятся засеянные поля, сады и много разрушенных домов». В самом начале XV века испанский путешественник Рюи Гонзалес де Клавихо (Ruy Gonzales de Clavijo) писал: «В городе Константинополе есть много больших зданий, домов и церквей, и монастырей, из которых большая часть в развалинах. Однако ясно, что раньше Константинополь был одной из самых благородных столиц мира». Что же касается Пиры, то когда Клавихо посетил эту генуэзскую колонию, он заметил: «Это всего лишь маленький город, но очень населенный. Она окружена мощной стеной, в ней есть прекрасные, очень хорошо построенные дома». В то же самое время флорентинец Буондельмонти писал по поводу одной из самых известных церквей Константинополя — церкви Святых Апостолов — что она была практически разрушена (ecclesia jam derupta). Тем не менее, благочестивые паломники из разных стран, посетившие Константинополь в XIV и в XV веках, в том числе семь русских, были поражены и очарованы убранством и реликвиями константинопольской церкви. В 1287 году монах Раббан Саума, специальный посланник монгольского властителя, после встречи с императором Андроником II и со специальным разрешением последнего, благочестиво посетил церкви и реликвии столицы. При Мануиле II, в 1422 г. бургундский путешественник, дипломат и моралист Гильберт де Лануа (Ghillebert de Lannoy) был любезно принят императором и его молодым сыном и наследником. Путешественник получил разрешение посетить «достопримечательности и древности города и церквей».
В 1437 г. испанский путешественник Перо Тафур встретил наилучший прием в Константинополе у императора Иоанна VIII. Когда на обратном пути из Крыма и Трапезунда он опять посетил Константинополь, им управлял тогда «деспот Драгас», брат императора, ввиду того, что сам император находился в отъезде в Италии. Тафур замечает, что «церковь, называемая Валайерна (Valayerna, то есть Влахерны) настолько повреждена, что не может быть восстановлена», что «порт должен был быть раньше восхитительным и даже сейчас он достаточен для приема судов». «Дворец императора был великолепен, но сейчас он в таком состоянии, что и он, и город показывают те беды, которые народ пережил и до сих пор переживает… Население в городе редкое… Жители не очень хорошо одеты, грустны и несчастны, демонстрируя тяжесть своей судьбы, которая не столь плоха, как они заслуживают, ибо это порочный народ, погрязший в грехе». Видимо, имеет смысл привести и следующее суждение Тафура: «Императорский двор столь же блистателен, как и всегда ранее, ибо ни одна из прежних церемоний не пропускается, но, по правде говоря, он подобен епископу без епархии».
После турецких и сербских завоеваний на Балканском полуострове во второй половине XIV века, Константинополь с его ближайшими владениями во Фракии был окружен турецкими владениями и мог лишь с трудом поддерживать морем сношения с территориями, составлявшими пока еще часть Византии, а именно с Фессалоникой, Фессалией и Морейским деспотатом, которые жили поэтому порою почти независимой от центра жизнью, получая вид самостоятельных государственных образований. В этих новых условиях, когда морская дорога с северного берега Черного моря, весьма важная для снабжения столицы зерном, была перерезана турками, остров Лемнос, на севере Архипелага, стал на некоторое время житницей Константинополя.
Вследствие феодальных процессов внутри государства, которые начались до Палеологов, искусно налаженный центральный государственный аппарат стал постепенно ослабевать. Временами центральным ведомствам и делать было нечего: настолько все было разъединено. Финансовые силы и возможности страны, в корне подорванные латинским хозяйством, окончательно истощились при Палеологах. Налоги из опустошенных немногих остававшихся в руках императора провинций не поступали. Все денежные остатки были истрачены, императорские драгоценности проданы, солдат кормить было не откуда, нищета царила повсюду.
Историк XIV века Никифор Григора, описывая свадебные торжества по случаю брака Иоанна V, писал: «В те времена дворец был охвачен такою бедностью, что в нем не было ни одной чаши, ни одного бокала из золота или серебра, некоторые из них были из олова, все же прочие глиняные… я уже оставляю в стороне, что царские венцы и одеяния на том празднестве имели, по большей части, лишь вид золота и драгоценных камней. (На самом деле) они были из кожи, и были лишь позолочены, как делают иногда кожевники, частью из стекла, отсвечивавшего различными цветами. Кое-где, лишь изредка, были драгоценные камни, имевшие настоящую прелесть, и блеск жемчугов, который не обманывает глаз. До такой степени упали, совершенно погасли и погибли древнее благоденствие и блеск Римской державы, так что я не без стыда могу изложить вам рассказ об этом».
Города, которым особенно угрожали турки, начинали пустеть. После захвата Каллиполи (Галлиполи) турками, часть населения Константинополя уехала на Запад. В 1425 году много людей уехало из Фессалоники, а некоторые из них отправились в Константинополь в надежде, что столица более безопасна, чем Фессалоника. Время было действительно критическим: Фессалоника была занята венецианцами и турки были близки к захвату города, что и случилось в 1430 г.
Сильно уменьшившаяся территория империи и незначительность населения делали невозможным для правительства Палеологов содержание большой национальной армии. В результате она состояла из наемников различных национальностей. При Палеологах появляются испанские (каталонские) дружины, турки, генуэзцы и венецианцы, сербы и болгары. Были, также как и раньше, англосаксонские наемники, так называемые варяги или англо-варяги, и вардариоты тюркского происхождения. Не имея возможности хорошо оплачивать наемные иностранные части, правительство должно было выносить иногда высокомерное своеволие и ограбления целых провинций и более или менее крупных центров недовольными иностранцами, как то было, например, с кровавым прохождением по провинциям империи каталонцев. При слабом состоянии сухопутного войска Палеологи тщетно старались иногда хоть несколько возродить пришедший в упадок византийский флот. Мануил Палеолог смог кое-что сделать. Однако его преемник Андроник II снова пренебрег флотом, так что острова Архипелага, находившиеся под контролем империи, не были более защищены от пиратских нападений. Греческие корабли ничего не могли сделать против хорошо оснащенных и сильных флотов Генуи и Венеции или даже против турецкого флота, который тогда только зарождался. Черное и Эгейское море оказались полностью вне византийского контроля, и в XIV и в первой половине XV в. итальянские торговые республики были здесь полновластными хозяевами.
Прежнее областное или фемное устройство империи, будучи нарушено латинским владычеством, не могло правильно функционировать при Палеологах. Для областного управления прежнего типа империя не имела достаточно территории. Прежний титул наместника фемы стратиг полностью исчез при Комнинах и был заменен на более скромный титул дуки (дукса). Термин «фема» иногда употреблялся современными исследователями для провинций Македония и Фессалия в XIV веке. Однако, провинция, отделенная от столицы турецкими и сербскими владениями, становилась своего рода деспотатом, правитель которого был почти независим от центральной власти. Обычно во главе такого нового государственного образования стоял один из членов императорской семьи. Так, в конце XIV века Фессалоника получила в качестве деспота одного из сыновей Иоанна V. Морейский деспотат также управлялся сыновьями или братьями императора.
Социальные отношения между высшими и низшими классами были при Палеологах весьма напряженными. Сельское хозяйство, всегда составлявшее реальную основу экономического благополучия империи, было в упадке. Многие плодородные провинции были утрачены, остаток был разорен почти непрекращающимися гражданскими войнами и фатальным по своему характеру продвижением каталонских отрядов. В Малой Азии экономическое процветание пограничных поселенцев (акритов), также базирововавшееся на сельском хозяйстве, было подорвано репрессивными мерами Михаила VIII и победоносным продвижением турок.
