В это время (1284) Олег Рыльский воротился от Телебуги и, совершив поминки по убитым боярам, послал сказать Святославу, что напрасно он стал действовать как разбойник и тем положил позор на князей; пусть идет оправдываться в Орду к Ногаю. Но Святослав гордо отвечал, что он сам себе судья и что он прав в этом деле; так как мстил своим врагам, избил поганых кровопийц. Олег послал на это сказать: «Мы присягали друг другу быть обоим в одной думе; когда рать пришла, ты не бежал со мной к царю, а спрятался в воронежских лесах, чтобы после действовать разбоем. Теперь нейдешь ни к своему царю [Телебуге], ни к Ногаю для оправдания; то пусть нас Бог рассудит». Олег снова отправился в Золотую Орду, привел оттуда татар, напал на Святослава и убил его. Но преемник последнего, брат Александр, в свою очередь, пошел в Орду, дарами склонил хана на свою сторону, получил от него войско и убил Олега Рыльского с двумя сыновьями.
В таком жалком положении находилась Северская Русь и так нравственно упали потомки рыцарственных героев «Слова о полку Игореве»!
Только новгородцы в это тяжелое время ограничивались одной данью татарам и не испытывали той тяжести ига, которая налегла на остальные земли Северной и Восточной Руси. Они продол жали развивать свою торговлю и промышленность, а также свое народоправление, благодаря слабости и затруднениям великих князей Владимирских, преемников Александра Невского; причем умели пользоваться помощью последних против своих внешних врагов. В это время часто встречаем в летописи известия о враждебных столкновениях Новгорода с эстонскими датчанами и особенно со шведами. Главным поводом к вражде со шведами служила данница Великого Новгорода, отчасти перешедшая в русскую веру, Карела, которую шведы постоянно пытались подчинить себе и обратить в католическую религию. Во второй половине XIII века мы видим целый ряд крестовых походов, которые, как и во время Александра Невского, направлялись преимущественно в устье Невы и в Ладожское озеро. Но походы эти большей частью были отбиты новгородцами и ладожанами; а также и сама Карела, озлобленная постоянным требованием дани с двух сторон (от Руси и от шведов) и насильственным обращением в католичество, иногда платила шведам жестокими поражениями и истязаниями пленников, иногда восставала и против новгородцев, но обыкновенно была усмиряема. Возбужденное неудачами с этой стороны шведское правительство по временам старалось мешать торговле Новгорода с немецкой Ганзой; запрещало немецким купцам возить в Россию оружие и вообще железо.