Гарри Поттер и Анализ Данных

В строке "Пейринги и персонажи" записаны, как это ни странно, пейринги и персонажи, в одну кучу. Что-то вроде : Пэйринг и персонажи: Джинни Уизли/Гарри Поттер, Драко Малфой/Гермиона Грейнджер, ОЖП, Рон Уизли, Нарцисса Малфой. На самом деле, извлечь пейринги из строки довольно просто, что я и сделал, поместив пейринги в отдельный столбец. Анализировал я их с таким же подходом, как и жанры - то есть выбрал самые популярные пейринги (так как тут повторений меньше - я выбрал те, которые есть хотя бы в 100 фанфиках) и сделал все те же махинации, что были описаны в предыдущей части. Кстати, тут есть один нюанс. На сайте фикбука пейринг "Гарри Поттер/Дафна Гринграсс" и пейринг "Дафна Гринграсс/Гарри Поттер" - разные пейринги, хотя пары-то одни и те же. Я читал информацию о том, что порядок имеет значение - мол инициатором является тот, кто первый. С другой стороны, у меня вопрос к аудитории - а насколько это важно, особенно для читателей? Вот вы когда выбираете фик, смотрите на порядок пейринга или только на персонажей в этом пейринге? В общем, я решил унифицировать пейринги, то есть написал простую функцию, которая сортирует персонажей в рамках одного пейринга по алфовиту, таким образом, для моих данных все пейринги, состоящие из одинаковых персонажей одинаковы, вне зависимости от порядка. Начнём.

***

ДЛЯ ВСЕГО ФЭНДОМА Общая картина: ТОП 20 самых популярных пейринга у авторов: [('zero', 4729), ('Гермиона Грейнджер/Драко Малфой', 3362), ('Гарри Поттер/Драко Малфой', 1613), ('Гарри Поттер/Том Марволо Реддл', 1098), ('Гарри Поттер/Джинни Уизли', 884), ('Джеймс Поттер/Лили Поттер', 745), ('Гермиона Грейнджер/Рон Уизли', 670), ('Римус Люпин/Сириус Блэк III', 604), ('Гермиона Грейнджер/Северус Снейп', 571), ('Гарри Поттер/Северус Снейп', 505), ('Драко Малфой/ОЖП', 479), ('Люциус Малфой/Нарцисса Малфой', 428), ('Гарри Поттер/Гермиона Грейнджер', 421), ('ОЖП/Том Марволо Реддл', 408), ('ОЖП/Сириус Блэк III', 378), ('ОЖП/Северус Снейп', 373), ('Гермиона Грейнджер/Теодор Нотт', 320), ('Гермиона Грейнджер/Том Марволо Реддл', 295), ('ОЖП/Фред Уизли', 285), ('ОЖП/Теодор Нотт', 266)] Ничего не изменилось zero - пейринги не указаны. Я сам удивился, когда увидел, что большая часть авторов не указывает пейринги (речь именно о пейрингах, самих персонажей они могут указывать), но факт есть факт. Из пейрингов самым популярным оказался Драмиона - ну почему я не удивлён? На втором месте Гарри/Драко. Крепкая мужская дружба - она такая. Ну и Гарри/Волдеморт на третьем... Мда... Ладно, таблицу выше я написал, вы и сами всё видите. Напомню, что цифра после самого пейринга - количество фанфиков с этим пейрингом из всей выборки. Смотрим на популярность. Пейринги. Напомню, как я считаю "влияние на популярность". Беру медиану (или среднее) количество лайков у всех фанфиков с данным пейрингом и вычитаю медиану (или среднее) количества лайков у всех фанфиков без пейринга. Если разница положительная - значит пейринг делает фанфики популярней, если отрицательный - то наоборот, он снижает популярность. Таблица (эта и послледующая) устроена так: сначала идёт сам пейринг, потом числовое значение влияния и затем общее число фанфиков с этими пейрингами. Пейрингов не так уж и много, потому мы можем вывести ВСЕ пейринги, которые используются в более чем ста фанфиках. Выведем медианы. От тех, кто плохо влияет к тем, кто хорошо. name,median_diff,count zero,-31.0,4729 Лили Поттер/Северус Снейп,-21.5,184 ОЖП/Римус Люпин,-21.0,124 Драко Малфой/ОЖП,-19.0,439 Джеймс Поттер/Лили Поттер,-17.0,733 ОЖП/Сириус Блэк III,-17.0,360 Джордж Уизли/ОЖП,-16.5,170 ОЖП/Фред Уизли,-15.0,259 Лаванда Браун/Рон Уизли,-14.0,129 ОЖП/ОМП,-14.0,235 Гарри Поттер/ОЖП,-13.0,183 Астория Гринграсс/Драко Малфой,-13.0,235 Нимфадора Тонкс/Римус Люпин,-12.0,115 Гермиона Грейнджер/Фред Уизли,-12.0,105 Гарри Поттер/Джинни Уизли,-12.0,870 Блейз Забини/Джинни Уизли,-12.0,247 ОЖП/Теодор Нотт,-10.0,242 Блейз Забини/Дафна Гринграсс,-9.0,109 Гермиона Грейнджер/Рон Уизли,-8.0,666 Римус Люпин/Сириус Блэк III,-8.0,534 ОЖП/Регулус Блэк,-4.0,177 Гарри Поттер/Панси Паркинсон,-2.0,139 ОЖП/Северус Снейп,-2.0,311 Люциус Малфой/Нарцисса Малфой,0.5,422 ОЖП/Том Марволо Реддл,3.0,334 Джеймс Поттер/ОЖП,5.5,96 Гермиона Грейнджер/Драко Малфой,8.0,2788 Ремус Люпин/Сириус Блэк,9.0,109 Джеймс Поттер/Регулус Блэк,11.0,199 Гермиона Грейнджер/Теодор Нотт,19.5,266 Северус Снейп/Сириус Блэк III,28.0,119 Гарри Поттер/Драко Малфой,29.0,1291 Беллатрикс Лестрейндж/Гермиона Грейнджер,32.0,191 Гермиона Грейнджер/Том Марволо Реддл,33.0,239 Гарри Поттер/Гермиона Грейнджер,38.0,413 Ремус Люпин/Сириус Блэк III,43.5,142 Гермиона Грейнджер/Северус Снейп,48.0,445 Гарри Поттер/Дафна Гринграсс,73.5,128 Гарри Поттер/Северус Снейп,91.0,427 Гарри Поттер/Том Марволо Реддл,148.5,928 В целом, картина не сильно изменилась, где-то чуть порядок поменялся Как вы понимаете, таблица идёт от худшего к лучшему, то есть самый последний пейринг лучше всего влияет на популярность. Странно, что среди гетеросексуальных пейрингов, самым популярным не является Драмиона (хотя лично я не люблю этот пейринг). Говорить о том, кто популярный, кто нет бессмысленно - всё есть в таблице выше. Как вы понимаете, медианные показатели говорят о том, как влияют пейринги на среднестатистические фанфики, а среднестатистические - будем честны, очень не очень. Если смотреть средние значения - то несколько очень хороших фанфиков могут повлиять на показатели, грубо говоря, непопулярный пейринг станет популярным и наоборот. Статистика по средним лайкам с одной стороны хуже отражает реальную ситуацию, с другой стороны, учитывает популярных авторов - то есть в некотором смысле даже лучше показывает вкусы аудитории. Сморим на них. name,mean_diff,count Гермиона Грейнджер/Фред Уизли,-100.53912298732443,105 ОЖП/Теодор Нотт,-99.824047676922,242 Римус Люпин/Сириус Блэк III,-97.51109934344419,534 Нимфадора Тонкс/Римус Люпин,-91.53277940756394,115 ОЖП/ОМП,-87.41593216138463,235 Драко Малфой/ОЖП,-86.72861965770359,439 Джеймс Поттер/Регулус Блэк,-83.8358850363306,199 ОЖП/Северус Снейп,-81.65511178010719,311 Джеймс Поттер/Лили Поттер,-78.02636246430819,733 Джордж Уизли/ОЖП,-75.05487425739527,170 Лили Поттер/Северус Снейп,-71.79189507146253,184 Блейз Забини/Джинни Уизли,-67.24684618786785,247 ОЖП/Сириус Блэк III,-66.54786731249084,360 ОЖП/Фред Уизли,-60.67204220757999,259 Ремус Люпин/Сириус Блэк,-60.448550875729765,109 Лаванда Браун/Рон Уизли,-57.41747290462064,129 Астория Гринграсс/Драко Малфой,-49.9046322201209,235 ОЖП/Регулус Блэк,-45.878555758256766,177 Джеймс Поттер/ОЖП,-39.87877761567319,96 Гарри Поттер/Джинни Уизли,-37.75319654067738,870 Северус Снейп/Сириус Блэк III,-35.59361719754406,119 Гарри Поттер/ОЖП,-35.01905561094591,183 Гермиона Грейнджер/Рон Уизли,-33.55436312507075,666 Ремус Люпин/Сириус Блэк III,-23.83890812881259,142 Гермиона Грейнджер/Северус Снейп,-23.56001217736852,445 ОЖП/Римус Люпин,-20.73514484397859,124 Гермиона Грейнджер/Том Марволо Реддл,-19.82326128494347,239 Гарри Поттер/Панси Паркинсон,-18.69947387954298,139 Беллатрикс Лестрейндж/Гермиона Грейнджер,-14.499294880409394,191 zero,-5.64050622344169,4729 Гарри Поттер/Драко Малфой,-4.566660438198767,1291 Гарри Поттер/Гермиона Грейнджер,6.240850896481504,413 Блейз Забини/Дафна Гринграсс,30.130310616331087,109 Гермиона Грейнджер/Теодор Нотт,36.55995173186375,266 ОЖП/Том Марволо Реддл,39.37822062370003,334 Гермиона Грейнджер/Драко Малфой,39.99155181194135,2788 Люциус Малфой/Нарцисса Малфой,44.14250322565738,422 Гарри Поттер/Дафна Гринграсс,58.92280157513696,128 Гарри Поттер/Северус Снейп,76.76447331171025,427 Гарри Поттер/Том Марволо Реддл,282.47831499965105,928 В целом, картина не сильно изменилась, где-то чуть порядок поменялся Если смотреть по средним показателям, то мы наблюдаем забавную картину: большая часть пейрингов отрицательно влияют на популярность, кроме нескольких (каких именно вы и сами увидите в таблице). Выборка из популярных работ Анализ выше был по всей выборке. Они отражают очень усреднённые вкусы читателя. Однако, то, какие именно работы становятся самыми популярными - тоже что-то говорит о читательских вкусах. Грубо говоря - у нас есть 100500 фанфиков, у многих из которых мало оценок. Мы видим по медиане, какие из этих 100500 фанфиков с малым количеством лайков при прочих равных будут иметь их больше. Но давайте посмотрим на более популярные работы - в данном случае, это будут те, которые имеют 432 и больше лайков. Это нижний предел для 20% самых лучших (по количеству лайков) фанфиков. В этом случае картина немного меняется. Когда мы рассматриваем только популярные работы - а это выходит 3869 фанфика, то повторяющихся пейрингов становится очень мало. Посмотрим на них: [('Гермиона Грейнджер/Драко Малфой', 834), ('zero', 784), ('Гарри Поттер/Том Марволо Реддл', 540), ('Гарри Поттер/Драко Малфой', 403), ('Гарри Поттер/Северус Снейп', 179), ('Гарри Поттер/Джинни Уизли', 149), ('Гермиона Грейнджер/Северус Снейп', 134), ('Гермиона Грейнджер/Рон Уизли', 120), ('Гарри Поттер/Гермиона Грейнджер', 116), ('Джеймс Поттер/Лили Поттер', 109), ('Люциус Малфой/Нарцисса Малфой', 86), ('ОЖП/Том Марволо Реддл', 85), ('Римус Люпин/Сириус Блэк III', 75), ('Гермиона Грейнджер/Теодор Нотт', 67), ('Гермиона Грейнджер/Том Марволо Реддл', 60), ('ОЖП/Сириус Блэк III', 57), ('Драко Малфой/ОЖП', 55), ('Беллатрикс Лестрейндж/Гермиона Грейнджер', 54), ('Гарри Поттер/Дафна Гринграсс', 43), ('Ремус Люпин/Сириус Блэк III', 41)] Сами пейринги немного поменялись. Это говорит о том, что из-за ограниченной выборки и малого числа повторяющихся пейрингов - данные не очень устойчивы. Но их стало, по крайней мере, больше Очень не густо. Я взял на анализ только те пейринги, фанфиков с которыми >= 40, меньше просто бессмысленно рассматривать, хотя и тут статистика будет очень неточной. Так что, верить этой статистике можно на свой страх и риск, и тем не менее: По медиане name,median_diff,count Гермиона Грейнджер/Северус Снейп,-165.0,112 Римус Люпин/Сириус Блэк III,-140.0,65 Ремус Люпин/Сириус Блэк III,-130.5,35 Беллатрикс Лестрейндж/Гермиона Грейнджер,-106.5,52 Джеймс Поттер/Лили Поттер,-103.0,109 Гарри Поттер/Джинни Уизли,-72.0,145 Гарри Поттер/Дафна Гринграсс,-56.0,43 Гарри Поттер/Драко Малфой,-50.0,295 Гермиона Грейнджер/Том Марволо Реддл,-49.0,46 Гарри Поттер/Гермиона Грейнджер,-46.0,112 Гарри Поттер/Северус Снейп,-43.0,159 ОЖП/Северус Снейп,-30.5,35 ОЖП/Сириус Блэк III,-26.0,53 Драко Малфой/ОЖП,-25.5,49 Люциус Малфой/Нарцисса Малфой,-4.0,86 Гермиона Грейнджер/Рон Уизли,1.0,120 Гермиона Грейнджер/Теодор Нотт,26.0,59 Гермиона Грейнджер/Драко Малфой,72.0,654 Гарри Поттер/Том Марволо Реддл,76.0,450 zero,124.5,784 ОЖП/Том Марволо Реддл,144.0,69 Картина немного поменялась. Как ни странно, среди популярных на первом месте по медиане ОЖП/Волжеморт. Странно что Гарри/Гермиона имеет отрицательное влияние среди популярных. А вот Драмиону народ любит. Теперь глянем по средним:

name,mean_diff,count Римус Люпин/Сириус Блэк III,-332.39, 65 Гермиона Грейнджер/Северус Снейп,-315.63, 112 Ремус Люпин/Сириус Блэк III,-308.68, 35 Беллатрикс Лестрейндж/Гермиона Грейнджер,-301.84, 52 Джеймс Поттер/Лили Поттер,-225.38, 109 Гарри Поттер/Гермиона Грейнджер,-210.67, 112 Гермиона Грейнджер/Том Марволо Реддл,-185.35, 46 ОЖП/Северус Снейп,-184.29, 35 Гарри Поттер/Северус Снейп,-180.65, 159 Гарри Поттер/Драко Малфой,-174.92, 295 Гарри Поттер/Дафна Гринграсс,-168.54, 43 ОЖП/Сириус Блэк III,-154.94, 53 Драко Малфой/ОЖП,-136.98, 49 Гермиона Грейнджер/Рон Уизли,-82.11, 120 Гарри Поттер/Джинни Уизли,-52.89, 145 Гермиона Грейнджер/Драко Малфой,38.61, 654 Гермиона Грейнджер/Теодор Нотт,60.38, 59 Гарри Поттер/Том Марволо Реддл,120.83, 450 ОЖП/Том Марволо Реддл,163.49, 69 Люциус Малфой/Нарцисса Малфой,200.23, 86 zero,242.28618743217123,784

Как ни странно - отсутствие пейринга положительно влияет на популярность. В общем, вы увидели общую картину, теперь двинемся дальше и проанализируем влияние конкретных персонажей. Но это уже в следующей части.