Поиск Карта сайта Главная страница

           

Добро пожаловать! Поиск | Активные темы | Вход | Регистрация

Проверка нормальности распределения рыночных данных в электронной таблице Опции · Вид
sovconsult
От: Tuesday, November 22, 2022 12:31:43 PM Ссылка на сообщение

Ранг: Кандидат
Группа: Участник

Зарегистрирован: 6/22/2016
Сообщений: 46
Местонахождение: Санкт-Петербург
Проверка нормальности распределения рыночных данных --- это один из первых этапов анализа этих данных при оценке стоимости. Судя по отзывам ряда оценщиков, Python пока практически не используется в работе. Поэтому я создал электронную таблицу для проверки нормальности распределения рыночных данных с помощью пяти тестов (в порядке убывания мощности):
1) Шапиро-Уилка;
2) Андерсона-Дарлинга;
3) Харке-Бера;
4) Колмогорова-Смирнова;
5) Хи-квадрат.
Необходимо просто вставить свои данные на листе "Dashboard" и всё посчитается само. Единственное: для построения гистограммы и проведения теста Хи-квадрат необходимо изменить число "интервалов" в зависимости от количества наблюдений. Формулы для расчёта числа интервалов также есть на листе "Dashboard".

Testing the normality of the distribution of market data is one of the first steps in analyzing this data when estimating value. Relying on the feedback of a number of appraisers, Python is not practically used in the work so far. Therefore, I've created a spreadsheet to check a normality of a distribution of market data using five tests (in descending order of power:
1) Shapiro-Wilk;
2) Anderson-Darling;
3) Jarque-Bera;
4) Kolmogorov-Smirnov;
5) Chi-squared.
You just need to insert your data in the "Dashboard" sheet and everything will calculate itself. Remind only that to build a histogram and perform the Chi-squared test, it is necessary to change the number of bins depending on the number of observations. The formulas for calculating the number of intervals are also in the "Dashboard" sheet.

https://drive.google.com/file/d/1Ft8VtvlpXALMmcqExKipWgD_bGZwK5r1/view?usp=sharing
В начало
 
Владимир Коломна
От: Tuesday, November 22, 2022 3:24:26 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
sovconsult сообщал(а):
Проверка нормальности распределения рыночных данных --- это один из первых этапов анализа этих данных при оценке стоимости. Судя по отзывам ряда оценщиков, Python пока практически не используется в работе. Поэтому я создал электронную таблицу для проверки нормальности распределения рыночных данных с помощью пяти тестов (в порядке убывания мощности):
1) Шапиро-Уилка;
2) Андерсона-Дарлинга;
3) Харке-Бера;
4) Колмогорова-Смирнова;
5) Хи-квадрат.
Необходимо просто вставить свои данные на листе "Dashboard" и всё посчитается само. Единственное: для построения гистограммы и проведения теста Хи-квадрат необходимо изменить число "интервалов" в зависимости от количества наблюдений. Формулы для расчёта числа интервалов также есть на листе "Dashboard".

Testing the normality of the distribution of market data is one of the first steps in analyzing this data when estimating value. Relying on the feedback of a number of appraisers, Python is not practically used in the work so far. Therefore, I've created a spreadsheet to check a normality of a distribution of market data using five tests (in descending order of power:
1) Shapiro-Wilk;
2) Anderson-Darling;
3) Jarque-Bera;
4) Kolmogorov-Smirnov;
5) Chi-squared.
You just need to insert your data in the "Dashboard" sheet and everything will calculate itself. Remind only that to build a histogram and perform the Chi-squared test, it is necessary to change the number of bins depending on the number of observations. The formulas for calculating the number of intervals are also in the "Dashboard" sheet.

https://drive.google.com/file/d/1Ft8VtvlpXALMmcqExKipWgD_bGZwK5r1/view?usp=sharing

Вся эта теория какое отношение имеет к практике? Вы хлеб (продукты) кушаете в теории или в практике? Вся теоретическая оценка не имеет ничего общего с рыночными отношениями.
В начало
 
sovconsult
От: Tuesday, November 22, 2022 3:31:26 PM Ссылка на сообщение

Ранг: Кандидат
Группа: Участник

Зарегистрирован: 6/22/2016
Сообщений: 46
Местонахождение: Санкт-Петербург
Владимир Коломна сообщал(а):
sovconsult сообщал(а):
Проверка нормальности распределения рыночных данных --- это один из первых этапов анализа этих данных при оценке стоимости. Судя по отзывам ряда оценщиков, Python пока практически не используется в работе. Поэтому я создал электронную таблицу для проверки нормальности распределения рыночных данных с помощью пяти тестов (в порядке убывания мощности):
1) Шапиро-Уилка;
2) Андерсона-Дарлинга;
3) Харке-Бера;
4) Колмогорова-Смирнова;
5) Хи-квадрат.
Необходимо просто вставить свои данные на листе "Dashboard" и всё посчитается само. Единственное: для построения гистограммы и проведения теста Хи-квадрат необходимо изменить число "интервалов" в зависимости от количества наблюдений. Формулы для расчёта числа интервалов также есть на листе "Dashboard".

Testing the normality of the distribution of market data is one of the first steps in analyzing this data when estimating value. Relying on the feedback of a number of appraisers, Python is not practically used in the work so far. Therefore, I've created a spreadsheet to check a normality of a distribution of market data using five tests (in descending order of power:
1) Shapiro-Wilk;
2) Anderson-Darling;
3) Jarque-Bera;
4) Kolmogorov-Smirnov;
5) Chi-squared.
You just need to insert your data in the "Dashboard" sheet and everything will calculate itself. Remind only that to build a histogram and perform the Chi-squared test, it is necessary to change the number of bins depending on the number of observations. The formulas for calculating the number of intervals are also in the "Dashboard" sheet.

https://drive.google.com/file/d/1Ft8VtvlpXALMmcqExKipWgD_bGZwK5r1/view?usp=sharing

Вся эта теория какое отношение имеет к практике? Вы хлеб (продукты) кушаете в теории или в практике? Вся теоретическая оценка не имеет ничего общего с рыночными отношениями.


Оценка по ФСО вообще не имеет отношения к рыночной практике. Просто юридическая процедура. Но есть ряд сфер, где исследование стоимости и поиск наиболее вероятных значений весьма востребованы. Банки, страхование, лизинг. И автоматизация оценки тоже востребована.

По существу тестов можете что-то сказать?
В начало
 
Яскевич Евгений Евстафьевич
От: Tuesday, November 22, 2022 6:01:53 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 1/16/2007
Сообщений: 1,520
Местонахождение: Москва
Проверка нормальности распределения предшествует выводу об однородности выборки.
Оценщики, оперирующие малыми выборками, обычно ссылаются на книгу "питерской школы", в которой сначала утверждалось, что выборка однородна при коэффициенте вариации 20%, а в последнем издании - 33%.
Есть неплохая книга в свободном доступе: Б.Ю.Лемешко Проверка гипотез об однородности, Новосибирск, 2018 г., в которой делаются выводы о минимальном количестве тестов для построения выборки и о том, что коэффициенты вариации (рассчитываемые исходя из нормальности распределения, НИКАКОГО ОТНОШЕНИЯ К ОДНОРОДНОСТИ ВЫБОРКИ не имеют.
Мне довелось наблюдать построение нормальности распределения по критерию Колмогорова-Смирнова на базе 18 (!!!) тестов. С меньшим количеством НЕ ВСТРЕЧАЛСЯ.
К сожалению, выборку на базе хотя-бы 25 тестов в настоящее время не построить.



В начало
 
blinov-a-v
От: Wednesday, November 23, 2022 9:02:29 AM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 12/18/2009
Сообщений: 1,092
Местонахождение: Москва
sovconsult сообщал(а):
Проверка нормальности распределения рыночных данных --- это один из первых этапов анализа этих данных при оценке стоимости.

Один из первых, но не первый. Первый и основополагающий этап любого статистического анализа - это собственно формирование выборки. До тех пор, пока выборку делает конкретный оценщик по каким-то своим соображениям, все последующие "мощные тесты", по сути, сводятся к классической истории про меткого стрелка (который сначала стреляет, а потом рисует мишень в месте попадания).

sovconsult сообщал(а):
Но есть ряд сфер, где исследование стоимости и поиск наиболее вероятных значений весьма востребованы. Банки, страхование, лизинг. И автоматизация оценки тоже востребована.

Интересно, приводит ли текущая востребованность решения данных задач к мысли о необходимости формирования базы данных ценовой информации? Прецеденты были: https://cyberleninka.ru/article/n/k-voprosu-o-metodicheskom-i-informatsionnoanaliticheskom-obespechenii-otsenki-stoimosti-nedvizhimogo-imuschestva-v-postkrizisnyy/viewer
В начало
 
Владимир Коломна
От: Wednesday, November 23, 2022 12:06:42 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
sovconsult сообщал(а):


По существу тестов можете что-то сказать?

Разные оценщики, находясь по разным сторонам дела, получат тот результат, который устраивает своего Заказчика - это самый основной тест.
В начало
 
Владимир Коломна
От: Wednesday, November 23, 2022 12:08:16 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
blinov-a-v сообщал(а):
Первый и основополагающий этап любого статистического анализа - это собственно формирование выборки. До тех пор, пока выборку делает конкретный оценщик по каким-то своим соображениям, все последующие "мощные тесты", по сути, сводятся к классической истории про меткого стрелка (который сначала стреляет, а потом рисует мишень в месте попадания).


Классика оценочной деятельности.
В начало
 
Владимир Коломна
От: Wednesday, November 23, 2022 12:30:42 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
sovconsult сообщал(а):

По существу тестов можете что-то сказать?

Вот по тесту по вознаграждению и расходам судебного эксперта можно и подискутировать, но к сожалению, мало кто может эту тему осилить))))
В начало
 
Olegovich
От: Wednesday, November 23, 2022 7:50:49 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
sovconsult сообщал(а):
По существу тестов можете что-то сказать?

по существу здесь на форуме на эту тему что-то грамотное могут сказать несколько человек. на вскидку это С.В.Грибовский, Е.И.Нейман и А.А.Слуцкий..
но их я давно уже здесь не видел.
большая часть остальных даже не понимают, что кроме оценки по ФСО, могут быть еще и оценки не по ФСО (и это далеко не о судебке)
В начало
 
Владимир Коломна
От: Wednesday, November 23, 2022 9:10:12 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
Olegovich сообщал(а):
что кроме оценки по ФСО, могут быть еще и оценки не по ФСО (и это далеко не о судебке)

И что? Какую обязательность для применения сторонами несет некая оценка, которая не в соответствии с нпа? Что вы подразумеваете под словом "оценка"? Баллы в школе, ВУЗе? Оценка качества работы? Вроде здесь профессиональный форум))))
В начало
 
Olegovich
От: Friday, November 25, 2022 12:21:03 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
ну Вот Вам и пример)))))
В начало
 
Владимир Коломна
От: Saturday, November 26, 2022 1:55:44 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
Olegovich сообщал(а):
ну Вот Вам и пример)))))

Вы как всегда на своей волне))))
В начало
 
Olegovich
От: Sunday, November 27, 2022 11:56:45 AM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
на своей волне те, кто дальше своего носа ничего не видят.
237-ФЗ это Вам не НПА?
В начало
 
Владимир Коломна
От: Sunday, November 27, 2022 2:42:48 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
Olegovich сообщал(а):
на своей волне те, кто дальше своего носа ничего не видят.
237-ФЗ это Вам не НПА?

И где вы там увидели, например: Шапиро-Уилка?
В начало
 
Olegovich
От: Sunday, November 27, 2022 2:57:08 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
в пункте 26.3 МР...
но суть здесь даже не в том... а в профессионализме участников профессионального форума )))

В начало
 
Владимир Коломна
От: Sunday, November 27, 2022 9:17:42 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
Olegovich сообщал(а):
в пункте 26.3 МР...
но суть здесь даже не в том... а в профессионализме участников профессионального форума )))


Как раз дело в сути и её очень хорошо озвучил выше Блинов.
А тесты - игра в наперстки.

А то что у некоторых не получилось в ВС оспорить по судебной кадастровой оценке, то это еще раз подтверждает "профессионализм" некоторых в оценочной деятельности и нужность частных оценщиков при определении/оспаривании кадастровой стоимости))))
В начало
 
Olegovich
От: Tuesday, November 29, 2022 6:18:53 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
Владимир Коломна сообщал(а):
А то что у некоторых не получилось в ВС оспорить по судебной кадастровой оценке, то это еще раз подтверждает "профессионализм" некоторых в оценочной деятельности и нужность частных оценщиков при определении/оспаривании кадастровой стоимости))))

так до сих пор читать не научились и продолжаете эту муть везде лепить в тему и не в тему? все уже доступно в соответствующей ветке расписал... не можете усвоить материал - ну значит не судьба - живите дальше в своих фантазиях.. спорить нет желания.. хочется подойти, обнять за плечи, ласково заглянуть в глаза и спросить: "Ну как же ты живешь без мозгов-то, а?"...
В начало
 
Olegovich
От: Tuesday, November 29, 2022 6:31:39 PM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 11/26/2009
Сообщений: 1,839
Местонахождение: -
sovconsult сообщал(а):
Необходимо просто вставить свои данные на листе "Dashboard" и всё посчитается само.

вставил набор данных.. но что-то само ничего не посчиталось... может какую кнопку волшебную еще нажать нужно?
вообще хорошо бы для тех кто плохо учил английский перевести на русский )
В начало
 
NB
От: Thursday, December 01, 2022 9:36:36 AM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 1/9/2009
Сообщений: 2,010
Местонахождение: Санкт Петербург
C 2015 года здесь висит утилита http://www.appraiser.ru/default.aspx?SectionId=35&Id=3844
Более 2000 просмотров и никаких обсуждений.
Предлагая что-то новое, хорошо бы показывать - чем оно лучше старого и в каких ситуациях.

Но не это главное. Главное - что и зачем проверять на нормальность в оценке?
Свою утилиту мы писали чтобы проверять остатки регрессионных моделей, не обращаясь к макросу "Регрессия".
Потом показали, что и при отсутствии нормальности выражения для оценки доверительного интервала ( неопределенности оценки) работают. Необходимость в доказывании нормальности отпала.
Еще подозрительные точки на выбросы оценить можно этой утилитой.

Цены на большие ансамбли разных объектов недвижимости на рынке хорошо описываются лог нормальным законом (см. публикации Ласкина М.Б. сотоварищи).
Цены аналогов в небольших выборках при индивидуальной оценки вообще не должны подчиняться никаким законам распределения.
Средняя по выборке цена хорошо хорошо приближается нормальным распределением при достаточно далеком от него (можно сказать, любом) распределении ген совокупности (цен на всем рынке).

Что за один из первых этапов анализа данных при оценке? Кем требуется, где описан, какую задачу решает? С этого надо начинать разговор.
За более чем четверть века в оценке не встречал такого требования к проведению анализа рыночных данных.

PS Давно не заходил сюда, привет тем, кто помнит!
В начало
 
Владимир Коломна
От: Thursday, December 01, 2022 9:52:36 AM Ссылка на сообщение

Ранг: Член сообщества
Группа: Участник

Зарегистрирован: 3/12/2017
Сообщений: 3,110
Местонахождение: Коломна
Olegovich сообщал(а):
хочется подойти, обнять за плечи, ласково заглянуть в глаза и спросить: "Ну как же ты живешь без мозгов-то, а?"...

А почему только хочется? Можно ведь и в реале (особенно интересно будет в судебном процессе))))

И почитайте пост NB
В начало
 
Пользователей, просматривающих тему
Guest

Перейти
Вы не можете создавать новые темы в этом форуме.
Вы не можете отвечать в этом форуме.
Вы не можете удалять Ваши сообщения в этом форуме.
Вы не можете редактировать Ваши сообщения в этом форуме.
Вы не можете создавать опросы в этом форуме.
Вы не можете голосовать в этом форуме.
 

Разработка и дизайн сайта
«ИнфоДизайн» © 2005