花弁

Статистическое исследование населения анонимного портала iichan.ru 28 April 2009 (Tue) 02:31 No.1803

File: stat.jpg
Jpg, 113.29 KB, 758×720 - Click the image to expand

Доброе время суток.
Я приехал к вам учиться по обмену.
Мне требуется научный руководитель для написания дипломной работы по социологии.

Тема работы: Статистическое исследование населения анонимного портала iichan.ru.

Предварительная постановка задачи:
1. Выбор внешнего сервиса для перехвата кликов с получением максимального количества личных данных
2. Длительный сбор данных.
3. Написание программного средства анализа полученных профилей с дальнейшим превращением в простой для манипуляции формат.
4. Составление профилей посетителей.

Направление дальнейших исследований:

Сопоставление данных профилей с профилями посетителей других анонимных сайтов, а также сравнение с профилями случайных пользователей сети интернет.

Текущее состояние работы:
1. В качестве средства перехвата нажатий выбран портал ЖЖ
2. Данные собираются в течение 4 месяцев, собрано 300 профилей.
3. Реализовано средство парсинга ЖЖ-профилей на базе языка python
4. Сейчас ведутся работы над составлением всяких красивых диаграмок.

Планируется написание работы в pdf-формате и её публикация в интернетах, возможна защита в качестве дипломного проекта Университета Доброчана.

Социологи-куны, просьба откликнуться. Капча в тему - убого сможем.

28 April 2009 (Tue) 23:51 No.1809

>>1807 Ожидаемый ответ. Если вы считаете себя лишним в собранной выборке - сообщите об этом и я исключу вас.

Но все-таки, хотелось бы получить комментарии от социологов - какие соотношения каким образом правильно визуализировать (пироги, линии, тренды. столбики, ...)? Какие графики было бы интересно построить? Какие гипотезы имеет смысл проверить?

29 April 2009 (Wed) 03:33 No.1810

File: 86ee96ed7df7cd0add2256df28d6b2308fca6ade.jpg
Jpg, 95.12 KB, 500×500 - Click the image to expand

ок, мм, ну я не социолог, так что мало что могу посоветовать. впрочем сейчас прикину, статистику я все таки учил.

очевидное, тебе необходимо взять и проверить нормальность распределения, например с помошью критерия пирсона. как им пользоваться легко найди в гугле, тут я не спец, всю конкретную математику я забыл, это надо смотреть учебник

самая его суть - он тебе покажет является ли распределение определенных признаков (например женат аноним или нет, старше 20 лет или нет, мальчик или девочка, богатый или бедный, общительный или нет и т.п.) в выборке случайным (т.е. "нормальным")или нет. если ты выберешь ряд таких признаков и проверишь их критерием пирсона (или другим подобным) это будет более чем достаточно на полноценную статью т.к. ты покажешь характерные черты анонима ычана, те которые не являются случайным совпадением

Анонимус 29 April 2009 (Wed) 14:10 No.1815

File: 1200092024699.jpg
Jpg, 40.57 KB, 494×700 - Click the image to expand

>>1810 хех, чтобы проверять нормальность распределения, надо сначала сделать 2 вещи:

определиться с тем, какие именно характеристики исследуются (пример: возраст)
определиться с проверяемой гипотезой распределения величины (пример: нормальное распределение)

Хотелось бы получить побольше идей о том, что именно можно исследовать.

У меня имеются следующие данные:
Для всех:

(даты) Даты создания и последнего обновления ЖЖ
(числа) Количество написанных постов, количество оставленных и полученных комментов, использованных юзерпиков, тэгов, меморизов, картинок в альбоме ЖЖ
(категориальные) Тип журнала
(списки) интересы, френды, сообщества

Для некоторых:

(дата) Дата рождения (для половины пользователей)
(категориальные) Страна, регион, город, места учебы и для каждого также страна, регион, город.
(категориальные: y/n) ICQ, mail, website, lastfm, jabber, msn, aim, gizmo, google-talk, skype, yahoo, lj-jabber

Что из этого и как можно анализировать? Какие гипотезы применять к каким полям? Равноправны ли 0 и не-0 в числовых полях или их имеет смысл рассматривать отдельно? Можно ли что-то интересное узнать из графа взаимной дружбы? Какие величины имеет смысл проверить на корреляцию? Имеет ли смысл собрать еще какие-нибудь данные?

Анонимус 30 April 2009 (Thu) 02:50 No.1820

>>1815

> определиться с тем, какие именно характеристики исследуются (пример: возраст)
> определиться с проверяемой гипотезой распределения величины (пример: нормальное распределение)

мм, в чем проблема? считай что ты только что определился.

по моему ты какой то фигней в этом треде занимаешся. все данные которые у тебя есть проверь на нормальное распределение и все, этого хватит. какие там графы и прочая лажа. для тех для кого есть дата рождения проверь возрастнополовой состав на нормальное распределение, половина это больше сотни, вполне достаточно, регионы, теги, интересы, друзей и сообщества на нормальное распредление (придумай, пронумеруй из например) и т.п.

Анонимус 30 April 2009 (Thu) 18:53 No.1824

>>1820 На оп-картинке виднеется график распределения годов рождения. Он не описывается нормальным распределением.

Однако, если я сгруппирую года парами, (... 1985-86, 1987-88, 1989-90 и т.п.), то должно будет выровняться по идее.

Корректно ли такое действие, когда я говорю о выборке около сотни человек, а диапазон возрастов в основе своей лежит в 1980-1992???

Анонимус 02 May 2009 (Sat) 18:17 No.1830

> Корректно ли такое действие, когда я говорю о выборке около сотни человек, а диапазон возрастов в основе своей лежит в 1980-1992???

таким макаром ты намеренно понижаешь точность теста. зачем?

алсо я надеюсь что ты понимаешь что доказав что распределение не нормальное ты можешь смело утверждать что существует перекос в ту сторону кого в твоей выборке больше всего, т.е. он и так существует но теперь ты знаешь что он не случаен а вызван привлекательностью ычана для этой категории людей

Анонимус 04 May 2009 (Mon) 01:10 No.1838

>>1830 Неожиданность в том, что у полученного распределения 2 пика, т.е. оно похоже на сумму двух нормальных:

интенсивного, с максимумом в районе 1987
менее мощного, с максимумом в районе 1983

Очень жалею, что нет статистики о населении Ичана до падения Два.ча, есть подозрение, что добавочное распределение - один из лагерей беженцев с Усопшего.

Анонимус 04 May 2009 (Mon) 23:05 No.1845

File: nhk_01.jpg
Jpg, 177.40 KB, 1006×1024 - Click the image to expand

>>1815
по этим данным можно:
считать средние значения. тогда можно проверить гипотезу, правда ли анону 20 лет и он бородат.
качественные данные переводи в количественные, допустим, интерес "аниме" встречается у n анонов.
можно считать взаимосвязь между наличием (0/1) тех или иных интересов и количеством френдов, например.
алсо, можно из пункта "числа) Количество написанных постов, количество оставленных и полученных комментов, использованных юзерпиков, тэгов, меморизов, картинок в альбоме ЖЖ" сделать некую общую характеристику и ранжировать по ней всех, группировать, строить диаграммы.

типы диаграмм выбраны правильные, ибо пространственная выборка.

алсо, хотеть себе данные, погонять.

Анонимус 16 May 2009 (Sat) 15:32 No.1980

File: 1242469246474.jpg
Jpg, 76.38 KB, 1046×659

File: 1242463950886.jpg
Jpg, 44.35 KB, 799×504

>>1966 Зарылся в дела. Совершенно не до всего этого.
Но как разгребу дела, обязательно опубликую результаты тут.
Кстати, тут на Ичане социологический тред как раз в тему произошел, удалось сравнить результаты с реальным опросником. Аномальный провал посещаемости в районе 24 лет подтвердился. Я не знаю как это трактовать.

Анонимус 16 May 2009 (Sat) 16:24 No.1981

>>1980
Очевидно же. Анон заканчивает университет, уходит с головой в открывшуюся новую жизнь, заново ищет свое место в мире: на интернеты времени не остается. Постепенно ситуация стабилизируется, анон успокаивается и вспоминает про имиджборды.

Анонимус 16 May 2009 (Sat) 16:45 No.1982

>>1980

> Аномальный провал посещаемости в районе 24 лет подтвердился. Я не знаю как это трактовать.

самое очевидное -- 24-летних людей может просто быть меньше на данный момент, чем остальных. в разные годы может быть разная рождаемость. к прискорбию, по госстатовским таблицам это не проверишь, т.к. там разбивка возрастных групп по 4 года -- http://www.gks.ru/bgd/regl/b08_11/IssWWW.exe/Stg/d01/05-02.htm

Анонимус 21 May 2009 (Thu) 02:26 No.2082

>>2077 Думаю, что психически здоровые люди старше школьного возраста на имиджбордах практически не оседают. Что-то должно сильно обидеть их в прошлом. Отчисление из университета - вполне себе повод. "Здесь-то я начну блистать своим непризнанным интеллектом! Не прощая и не забывая." Да, пожалуй для этого употребляется термин "батхерт", в котором на отдельных тематических досках принято уличать каждого первого.