www.mylnikov.org Open in urlscan Pro
2606:4700:3033::6815:98b  Public Scan

Form analysis
2 forms found in the DOM

GET https://www.mylnikov.org

<form method="get" id="searchform" action="https://www.mylnikov.org"> <input type="text" value="" name="s" id="s"> <input type="submit" id="go" value="" alt="Search" title="Search"></form>

POST https://www.paypal.com/cgi-bin/webscr

<form action="https://www.paypal.com/cgi-bin/webscr" method="post" target="_top">
  <input type="hidden" name="cmd" value="_s-xclick">
  <input type="hidden" name="hosted_button_id" value="MPWMUU7CF32X8">
  <input type="image" src="https://www.paypalobjects.com/en_GB/i/btn/btn_donate_LG.gif" border="0" name="submit" alt="PayPal – The safer, easier way to pay online!">
  <img alt="" border="0" src="https://www.paypalobjects.com/en_US/i/scr/pixel.gif" width="1" height="1">
</form>

Text Content

ALEXANDER MYLNIKOV

Subscribe via RSS
 * Home
 * Контакты


22Oct/1514


PUBLIC WI-FI DATABASE. GEO-LOCATION API. PUBLIC API OF POSITION BY WI-FI (MAC,
BSSID).





I would like to introduce public API implementation of Wi-Fi
Geo-Location database. There are on the Internet a lot of sources of Wi-Fi
positions but all of them have disadvantages of small data sets
or inaccurate data.

This database could be interesting for any applications that have to
get accurate user location via Wi-Fi information.

Basis compilation has following open databases:

 * openBmap (Open Database License (ODbL) v1.0)
 * OpenWifi.su (GNU free documentation license)

At this moment database contains about 34M+ of records and it always getting new
data.

If you have any reliable source of Wi-Fi data, please share it with me
via e-mail alex@mylnikov.org.

API doesn't contains any hidden limitations or usage fees. All the data is
provided "as is" and free without any money contribution.

Specifications of Public Geo-Location API

Request paths:

http://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&bssid={wifi-bssid}

https://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&bssid={wifi-bssid}

{wifi-bssid} - BSSID of Wi-Fi AP (MAC address of network's AP card)

BSSID variants input:

 * A0:F3:C1:3B:6F:90
 * A0F3C13B6F90
 * a0f3c13b6f90
 * A0-F3-C1-3B-6F-90
 * a0-f3-c1-3b-6f-90

Example:

https://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&bssid=00:0C:42:1F:65:E9

Response example:

{"result":200, "data":{"range": 140, "lan": "60.05205150", "lon": "30.33848000",
"signal": "-80"}}
Field "result" contains 200 if Wi-Fi was found, otherwise it returns 404

Description of successful response:

 * lat - latitude
 * lon - longitude
 * range - accuracy of result in meters

Refined location (Beta) multiple Wi-Fis

This section describes opportunity to fetch geo-location by multiple amount of
Wi-Fi APs. It has the syntax: User sends the set of APs with them signal
straight levels and server returns location coordinate. The request string
should be wrapped with Base64

Request paths:

http://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&search={base64-search-string}

https://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&search={base64-search-string}

{base64-search-string} - Base64 encoded string with following properties:

Example of input string:

"28:28:5d:d6:39:8a,-76;90:94:e4:ac:12:26,-80"

bssid,SS;bssid1,SS1

SS - Signal Strength

https://api.mylnikov.org/geolocation/wifi?v=1.1&data=open&search=Mjg6Mjg6NWQ6ZDY6Mzk6OGEsLTc2OzkwOjk0OmU0OmFjOjEyOjI2LC04MA==

Demo

The web-site https://find-wifi.mylnikov.org/ has a demo visualisation API
results on map.

Demo of API https://find-wifi.mylnikov.org/

Licensing

Statements of the API project:

 * Open data Geo-Location API  that licensed with  MIT License. All the request
   should contain key "data=open" key. The data from comes from the open source
   written above.
 * Any data from Geo-Location API is presented "as is".
 * Any usage of Geo-Location API are done by a final user without any stated
   guarantees and specific condition.
 * Usage liable of any data fetched from API fully lies on a final user activity
   and could be never wired with Geo-Location API service.

API database contains about 34.5M+ records. Usage of API is fully free of
charge.

P.S.

I you need full database of Wi-Fi in CSV format you can download here. The
compilation has updated dump of all the sources of the API.

I'll be happy to give you any help via e-mail alex@mylnikov.org.

Here are some application that could let you view about accuracy of the API.
Feel free to install!

POC Application:


POC Application for Developers:




Filed under: Без рубрики 14 Comments


22Oct/150


ГЕОЛОКАЦИЯ БЕЗ GPS (ЧАСТЬ 2)



Здравствуйте! После предыдущей статьи (часть 1) я получил много отзывов о работе
открытого API геолокации по WiFi и вышкам мобильных сетей. В этот раз я хочу
представить свои исправления, лицензирование проекта, геопозиционирование по
нескольким точкам доступа, кейсы использования и самое главное - текущие
проблемы Сначала об исправленных ошибках:

 1. Исправлена грамматическая ошибка в ответе сервера (возвращался "lan" в место
    "lat") ключ "v=1.1"
 2. Добавлено лицензирование (об этом в конце)


МОБИЛЬНЫЕ СЕТИ

Открытые данные
Основной критикой в сторону моего API был вопрос: "Чем плох OpenCellID?" ответ:
ничем, кроме того что в этой базе мало данных. На данный момент у них 7,8 млн
вышек. Это хороший результат для полностью открытой базы, но главный минус - это
плохая точность. Сильно помогла база Mozilla Location Service для увеличения
карты покрытия открытых данных. Из всех открытых баз я выкинул недостоверные
данные, такие как радиус действия около 1200 км, либо же радиус действия 0. Т.е.
вышка была "замечена" всего единожды, а следовательно, положение по ней можно
оценить только качественно и по-хорошему точность 35 км как у средней соты
(максимальная дальность средней соты за городом). Открытые данные обновляются
автоматически раз в неделю. Т.е. база всегда актуальна. Сейчас в базе 13 млн.
записей. Это отличный результат покрытия по всему миру. Надеюсь, вопросов, чем
это лучше OpenCellID не будет. Важно отметить что в API нет никаких ограничений
за количество запросов. Пример:
http://api.mylnikov.org/geolocation/cell?v=1.1&mcc=250&mnc=02&cellid=200719106&lac=7840&data=open
Сколько данных: 13.8M+ открытых данных (уникальных вышек)
Данные "как есть"
Здесь данные, на которые не распространяются никакие лицензии. Источников много,
данные получаются достаточно достоверные. Скачать данные напрямую нельзя, но
возможно получить в любом количестве через API. Система работы проста. Как
только система получает запрос, на который не может ответить из текущей базы,
производятся запросы к источникам, которые потенциально могут знать о регионе
запроса. Важно заметить что "полученные" данные проходят полный цикл обновления
за месяц. Пример:
http://api.mylnikov.org/geolocation/cell?v=1.1&mcc=250&mnc=02&cellid=200719106&lac=7840
Развернутое описание работы с API геолокации по мобильным сетям
Уточненое местоположение
В документации описана функция геолокации по нескольким мобильным вышкам.
Большинство открытых сервисов делать это не умеют и функция в диапазоне GSM-EDGE
является крайне полезной, однако ответ API скорее носит качественную оценку
геоположения. Я буду рад, если кто-нибудь напишет мне (alex@mylnikov.org) и
поможет решить задачу "триангуляции" по нескольким мобильным вышкам.
Максимальное количество точек доступа: 12 Пример:
https://api.mylnikov.org/geolocation/cell?v=1.1&search=MjUwLDAyLDc4...
Потенциально, при работе некоторых телефонных аппаратов возможно получать данные
о вышках нескольких телефонных операторов (либо 2 симкарты, либо супер карты
телефонов, которые показывают все видимые вышки, примеров я не знаю).
Скачать данные


WIFI ТОЧКИ ДОСТУПА

Открытые данные
Главный вклад в открытые данные привнес великолепный проект OpenWLANMap данные
из данного проекта обновляются раз в неделю. Используются еще несколько
источников, о них описано в подробной документации. Пример:
https://api.mylnikov.org/geolocation/wifi?v=1.1&bssid=00:0C:42:1F:65:E9&data=open
Данные "как есть"
Источников мало. Скачать данные напрямую нельзя, но возможно получить в любом
количестве через API. Система работы идентична работе API для мобильных сетей.
Период обновления 1 месяц Пример:
https://api.mylnikov.org/geolocation/wifi?v=1.1&bssid=A0:F3:C1:3B:6F:90
Развернутое описание работы с API геолокации по WiFi точкам
Уточненое местоположение
В документации описана функция геолокации по нескольким мобильным вышкам. Для
точек доступа WiFi функция крайне полезная. Хотя и дает качественное положение,
однако обычно сетевой адаптер мобильного устройства чаще всего получает лист
всех точек доступа даже при отсутствии подключения к какой либо точке доступа. С
помощью этих данных за один запрос можно получить координату с точностью до 150
метров. Максимальное количество точек доступа: 20 Пояснение: Разумеется, данные
в базе есть не о всех точках вашей квартиры, однако, те, которые будут найдены
будут использованы для уточнения геопозиции. Пример:
https://api.mylnikov.org/geolocation/wifi?v=1.1&search=Mjg6Mjg6.. Скачать данные

Актуальные проблемы

 * Совершенно не ясно как выбирать данные при условии наличия более одного
   источника. О некоторых точках доступа известно нескольким сервисам, причем
   неизвестно у кого из них данные более свежие и точные.
 * Не известно где искать дополнительные источники данных. Буду благодарен
   любому источнику.
 * Нагрузка после первой статьи сильно не увеличилась. Возникает ощущение что
   сервис не слишком интересен, возможно это из-за недоверия или молодости
   проекта.
 * "Уточненная" геолокация работает мягко говоря плохо.

Кейсы использования
С моей точки зрения API может быть полезно различным приложениям от
геолокационых приложений до скрытого таргетинга контента приложений
Лицензирование
Лицензирование у проекта несколько хитрое. Через одно API (для мобильных вышек и
WiFi точек доступа соответственно) доступно два проекта.

 1. ключ data=open. Данный ключ дает гарантию, что данные из ответа были
    получены исключительно из открытых источников. Данные распространяются под
    лицензией MIT
 2. отсутствие ключа data=open не дает никаких гарантий об источниках данных, а
    также данная часть проекта не лицензируется вовсе.

Доступность
Работоспособность сервиса "почти" гарантирован в течении 3х лет, точнее до конца
2018 года при наличии высого количества запросов со стороны пользователей и 1
года при отсутствии нагрузки. Фактически работает два сервера в назависимых
дата-центрах. Средний показатель uptime за последний квартал 99,923% (по данным
Яндекс.Метрики). Обратная совместимость каждой версии API гарантирована через
ключ "v=" бессрочно.
Пояснение
Ни при каких обстоятельствах я не претендую на владение данными этого проекта. Я
лишь хочу, чтобы в интернете был достоверный обширный и доступный источник
геолокационных данных. Все данные принадлежат правообладателям. P.S. Я доступен
в любое время дня и ночи по электронной почте alex@mylnikov.org и готов
выслушать любую критику, пожелания и предложения.


Filed under: Без рубрики No Comments


22Jul/150


УСТАНОВКА VMWARE TOOLS НА DEBIAN



Мануалов много, решил просто скопировать себе на сайт.
Начинаетс все просто:

1. Входим в графическую консоль виртуальной машины и пробрасываем установочный
диск VMware Tools в систему

Скрины

Для  гипервизора (ESXi)



Для VMware Workstation


2. Логинимся под пользователем, который может запускать sudo

Обновляем систему (опционально)
sudo apt-get update && sudo apt-get dist-upgrade
sudo shutdown -r now

Устанавливаем нужный софт для тула
sudo apt-get update && sudo apt-get install build-essential linux-headers-$(uname -r) libglib2.0-0

Запускаем установку
sudo mount /dev/cdrom /mnt
tar xvfz /mnt/VMwareTools-*.tar.gz -C /tmp/
sudo perl /tmp/vmware-tools-distrib/vmware-install.pl

Перезапускаем
sudo shutdown -r now


Поздравляю, VMware Tools установлен.


Filed under: Без рубрики No Comments


19Apr/150


ГЕОЛОКАЦИЯ БЕЗ GPS



Здравствуйте!

Представляю публичную базу геопозиций телефонных вышек и Wi-Fi роутеров. Мне
понадобилась стабильная и безлимитная база для приложения Android в котором
нужна была точная геолокация из всех доступных источников (GPS, Wi-Fi,
Mobile). Пришлось создать базу данных положений сотовых вышек и Wi-Fi. Всех
заинтересовавшихся прошу под кат.


Filed under: Без рубрики Continue reading


15Apr/150


ОПРЕДЕЛЕНИЕ МЕСТОПОЛОЖЕНИЯ ПО WI-FI (MAC, BSSID) ОТКРЫТОЕ API



Сегодня я хочу представить публичный API для определения местоположения по
данным точки доступа Wi-Fi. В итернете достаточно много ресурсов предлагающих
определение местоположения по данным Wi-Fi, однако все они либо платные, либо
содержат ограничение на количество запросов, либо очень маленькие.

Данная база может быть интересна любым приложениям которые имеют географическую
привязку с помощью Wi-Fi.

В своей базе я собрал все доступные публичные источники:

 * Geomena: Wifi geolocation (CC BY-SA 3.0 Unported License)
 * openBmap (Open Database License (ODbL) v1.0)
 * OpenWifi.su (GNU free documentation license)

В данный момент база  содержит 10М Wi-Fi и постоянно наполняется новыми. Если у
вас обширная база Wi-Fi  или источники буду рад ее добавить в свою базу. Пишите
на alex@mylnikov.org.

API не содержит никаких скрытых лимитов или задержек. Данные предоставляются
"как есть".

Описание публичного API (Открытые источники)

Адреса обращения

http://api.mylnikov.org/geolocation/wifi?bssid={wifi-bssid}

https://api.mylnikov.org/geolocation/wifi?bssid={wifi-bssid}

{wifi-bssid} - Bssid точки доступа (MAC адрес сетевой карты точки доступа)

Варианты:

 * A0:F3:C1:3B:6F:90
 * A0F3C13B6F90
 * a0f3c13b6f90
 * A0-F3-C1-3B-6F-90
 * a0-f3-c1-3b-6f-90

Пример:

https://api.mylnikov.org/geolocation/wifi?bssid=00:0C:42:1F:65:E9&data=open&v=1.1

Варианты ответа:

{"result":200, "data":{"range": 140, "lan": "60.05205150", "lon": "30.33848000",
"signal": "-80"}}
Поле "result" содержит значение 200 если Wi-Fi найден, в противном случае
возвращается 404

Описание успешного ответа:

 * lat - широта
 * lon - долгота
 * signal - средний уровень сигнала
 * range - точность определения координаты в метрах

Реализация API (Данные "как есть")

https://api.mylnikov.org/geolocation/wifi?bssid=A0:F3:C1:3B:6F:90&v=1.1

При данном виде запроса данные представляются только в иследовательских целях.
Конечный пользователь использует данные на свой страх и риск

Уточненное местоположение

Вводится новая функция получения приблизительного пожложения точки
триангуляционного центра. Синтаксис следующий: на сервер передается набор точек
доступа, видимых приемником и силу сигналов точек, а сервер по имеющимся данным
получает приблизительное положение точки, качественно являющейся
трианглуляционным центром. все данныые запроса оборачиваются в base64

Пример исходной строки:

28:28:5d:d6:39:8a,-76;90:94:e4:ac:12:26,-80

bssid,SS;bssid1,SS1

SS - Signal Strength

https://api.mylnikov.org/geolocation/wifi?v=1.1&search=Mjg6Mjg6NWQ6ZDY6Mzk6OGEsLTc2OzkwOjk0OmU0OmFjOjEyOjI2LC04MA==

В данном моде так же работает тег data=open который сообщает серверу что данные
должны быть получены исключительно из открытых источников. К сожалению, в этом
случае часты ситуации с отрицательным результатом поиска.

Демо

По адресу https://find-wifi.mylnikov.org/ находится демо-визуализация
результатов поиска по сервису API.

Демо визуализация API https://find-wifi.mylnikov.org/

Лицензирование

Через одно API доступно, на самом деле, два проекта.

Первый и лицензируемый проект это все запросы к API с ключем "data=open" и он
работает под лицензией  MIT License.

Второй проект получает данные "как есть". Полностью законное получение данных не
оговаривается. И обращение к API без ключа open=data в принципе не
документируется и предоставляется как "пасхальное яйцо". Данные предоставляемые
используются конечным пользователем на свой страх и риск.

О любых ошибках или сложностях использования прошу писать мне
на почту alex@mylnikov.org.

Скачать данные

Раздел загрузок

Приложение для тестирования:



Приложение для тестирования (Верисия для разработчиков):




Filed under: Без рубрики No Comments


7Apr/154


PUBLIC MOBILE CELLS POSITION DATABASE. GEO-LOCATION API



Hereby the introduction of public Geo-Location API implementation for mobile
cells.

Compiled open sources:

 * OpenCellID (CC-BY-SA 3.0 unported)
 * openBmap.org (Open Database License (ODbL) v1.0)
 * Mozilla Location Service (CC0 1.0 Universal (CC0 1.0))

For this moment it contains about 26M+ records. With this size database becomes
world largest open source mobile cells position database.

This API is absolutely free of charge to use and have not hidden usage fees.
Also, there is no limitation for request amount per any period.

Download data

Download database in CSV format from Download database page

Location of cell (Open data)

API accept two request paths. Parameters should be send with GET request.

 * http://api.mylnikov.org/geolocation/cell?v=1.1&data=open
 * https://api.mylnikov.org/geolocation/cell?v=1.1&data=open

There are 4 required parameters for a request:

 1. mcc - Integer (Country code)
 2. mnc - Integer (Network operator code)
 3. cellid - Integer (Cell id)
 4. lac - Integer (Area or location code)

Example of usage:

https://api.mylnikov.org/geolocation/cell?v=1.1&data=open&mcc=250&mnc=2&lac=7840&cellid=200719106

Explanation of the request is that 250 stands for Russia, 2 - Megafon, 7840 -
area code, 200719106 - cell id number

If cell is found you would get 200 in field result or 404 if request is failed.

Example of response

{
  "result": 200,
  "data": {
    "lon": "30.378965994",
    "range": "1248.781274361",
    "time": 1431125998,
    "lat": "60.052802453"    
  }
}


{
  "result": 404,
  "data": {
    
  },
  "real": 6,
  "desc": "No information about location",
  "time": 1431126043
}

Description of successful response:

 * lat - latitude of tower
 * lon - longitude of tower
 * range - accuracy of result in meters

Refined location (Beta)
In version 1.1 I added new function of fetching refined location by number of
mobile cells.
The request path is
https://api.mylnikov.org/geolocation/cell?v=1.1&data=open&search={search string}

{search string} - Base64 of string
(mcc,mnc,lac,cellid,SS;mcc1,mnc1,lac1,cellid1,SS1;...)

Max amount of cells is 12 to request.

Example of search string:
250,02,7810,318,-81;250,02,4711,24208,-83;250,02,4711,24214,-89;250,02,4711,619,-95;250,02,4711,16627,-95

mcc,mnc,lac,cellid,SS;mcc1,mnc1,lac1,cellid1,SS1

SS - Signal Strength

Example request:

https://api.mylnikov.org/geolocation/cell?v=1.1&data=open&search=MjUwLDAyLDc4MTAsMzE4LC04MTsyNTAsMDIsNDcxMSwyNDIwOCwtODM7MjUwLDAyLDQ3MTEsMjQyMTQsLTg5OzI1MCwwMiw0NzExLDYxOSwtOTU7MjUwLDAyLDQ3MTEsMTY2MjcsLTk1

Demo

The web-site https://find-cell.mylnikov.org/ has a demo visualisation API
results on map.

Demo of API https://find-cell.mylnikov.org/

Licensing

Statements of the API Geo-Location project:

 * Open data Geo-Location API  that licensed with  MIT License. All the request
   should contain key "data=open" key. The data from comes from the open source
   written above.
 * Any data from Geo-Location API is presented "as is".
 * Any usage of Geo-Location API are done by a final user without any stated
   guarantees and specific condition.
 * Usage liable of any data fetched from API fully lies on a final user activity
   and could be never wired with Geo-Location API service.

API database contains about 32.5M+ records. Usage of API is free of charge.

P.S.

I you need full database of cells in CSV format you can download here.

If you have any sources that contains reliable data about cell towers location
please contact me via e-mail. I'll add them into API sources.

I'll be happy to give you any help via e-mail alex@mylnikov.org.

Here are some application that could let you view about accuracy of the API.
Feel free to install!

POC Application:


POC Application for Developers:




Filed under: Без рубрики 4 Comments


5Apr/152


ПУБЛИЧНАЯ БАЗА ТЕЛЕФОННЫХ СТАНЦИЙ МИРА. ПУБЛИЧНОЕ ОТКРЫТОЕ API



Сегодня я хочу представить всем желающим базу телефонных станций всего мира.

Это может быть полезно приложениям или сервисам, которые по идентификаторам
мобильной станции хотят получить ее геопозицию и тип. Данная база частично
является копией The OpenCellID map, однако в официальной реализации есть
ограничение на количество запросов и обязательно выпускать API ключ. В базе так
же собраны и другие источники данных.

Список открытых источников:

 * OpenCellID (CC-BY-SA 3.0 unported)
 * openBmap.org (Open Database License (ODbL) v1.0)
 * Mozilla Location Service (CC0 1.0 Universal (CC0 1.0))

В моей реализации нет не лимитов, ни ключей.

Данные обновляются еженедельно.

Реализация API (Открытые источники)

http://api.mylnikov.org/geolocation/cell адрес запросов передаются методом GET

Так же доступен по протоколу https://api.mylnikov.org/geolocation/cell

Для запроса есть 4 обязательных поля:

 1. mcc - Integer (Код страны)
 2. mnc - Integer (Код телефонного оператора)
 3. cellid - Integer (Код телефонной станции)
 4. lac - Integer (Код региона или Area, Location)
 5. v - Номер версии (Актуацльная версия 1.1)
 6. data=open  - указание, что данные полученные из API строго открытые

Пример:

https://api.mylnikov.org/geolocation/cell?data=open&mcc=250&mnc=02&cellid=200719106&lac=7840&v=1.1

Ответ:

Строка JSON имеющее обязательное поле result.

Если станция найдена в поле result приходит ответ 200, при ошибках возвращается
код 404.

{ 
"result":200,
"data":{ 
"lon":"30.385654398",
"mcc":250,
"lac": 7840,
"range":"869.994176272",
"radio":"UMTS",
"samples":49,
"time":1430577060,
"lat":"60.056594206",
"mnc":2,
"cellid":200719106
}
}


{ 
"result":404,
"data":{ 
},
"real":6,
"desc":"No information about location",
"time":1430579063
}

Описание успешного ответа:

 * lat - широта
 * lon - долгота
 * range - точность определения координаты в метрах
 * samples - количество измерений
 * mcc - код страны
 * mnc - код мобильного оператора
 * lac - код мобильного региона
 * cellid - Id базовой станции
 * radio - тим базовой стании

Реализация API (Данные "как есть")

Для запроса есть 4 обязательных поля:

 1. mcc - Integer (Код страны)
 2. mnc - Integer (Код телефонного оператора)
 3. cellid - Integer (Код телефонной станции)
 4. lac - Integer (Код региона или Area, Location)
 5. v - Номер версии (Актуацльная версия 1.1)

Пример:

https://api.mylnikov.org/geolocation/cell?mcc=250&mnc=02&cellid=200719106&lac=7840&v=1.1

Уточненное местоположение

Вводится новая функция получения приблизительного пожложения точки
триангуляционного центра. Синтаксис следующий: на сервер передается набор
базовых станций, видимых приемником и силу сигналов станций, а сервер по
имеющимся данным получает приблизительное положение точки, качественно
являющейся трианглуляционным центром. все данныые запроса оборачиваются base64

Пример исходной строки:

250,02,7810,318,-81;250,02,4711,24208,-83;250,02,4711,24214,-89;250,02,4711,619,-95;250,02,4711,16627,-95

mcc,mnc,lac,cellid,SS;mcc1,mnc1,lac1,cellid1,SS1

SS - Signal Strength

https://api.mylnikov.org/geolocation/cell?v=1.1&search=MjUwLDAyLDc4MTAsMzE4LC04MTsyNTAsMDIsNDcxMSwyNDIwOCwtODM7MjUwLDAyLDQ3MTEsMjQyMTQsLTg5OzI1MCwwMiw0NzExLDYxOSwtOTU7MjUwLDAyLDQ3MTEsMTY2MjcsLTk1

В данном моде так же работает тег data=open который сообщает серверу что данные
должны быть получены исключительно из открытых источников. К сожалению, в этом
случае часты ситуации с отрицательным результатом.

Важно заметить, что API позволяет геолоцироваться по разным операторам
одновременно, те если абонент слышить много сетей вокруг, то его местоположение
пожно определить достаточно достоверно.

Демо

По адресу https://find-cell.mylnikov.org/ находится демо-визуализация
результатов поиска по сервису API.

Демо визуализация API https://find-cell.mylnikov.org/

Лицензирование

Через одно API доступно, на самом деле, два проекта.

Первый и лицензируемый проект это все запросы к API с ключем "data=open" и он
работает под лицензией  MIT License.

Второй проект получает данные "как есть". Полностью законное получение данных не
оговаривается. И обращение к API без ключа open=data в принципе не
документируется и предоставляется как "пасхальное яйцо". Данные предоставляемые
используются конечным пользователем на свой страх и риск.

Скачать данные

Раздел загрузок

Приложение для тестирования:



Приложение для тестирования (Верисия для разработчиков):




Filed under: Без рубрики 2 Comments


15Nov/140


CSC БЫЗЫ ДАННЫХ, 9 ДЗ



Вам нужно посчитать некоторую статистику о багах в багтрекере. Статистику вы
хотите видеть в представлениях, соответственно основной задачей является
написание запросов, формирующих представления.

Во-первых, вам хочется для каждого проекта найти суммарное количество багов
каждого из имеющихся у вас статусов. Хочется видеть примерно такое:

SELECT * FROM BusSummaryPerProject;

project_id  | new  | assigned | fixed | verified | not reproducible
1001          45     24         3       0          10
1002          56     10         37      104        15

Для упрощения можете считать, что множество статусов известно и не собирается
меняться.

Во-вторых, для каждого статуса хочется видеть компоненту с максимальным,
минимальным и медианным количеством багов с таким статусом. Например, если у нас
7 компонент и количество багов со статусом “new” в них распределено так:

C1 | 10
C2 | 50
C3 | 15
C4 | 30
C5 | 20
C6 | 25
C7 | 35

то в строке представления для статуса new должно быть:

SELECT * FROM StatisticsPerStatus WHERE status='new';

status | max_component | max_value | min_component | min_value | median_component | median_value
new      C2              50          C1              10          C6                 25

Если число компонент четное, то считайте медианой большее из двух возможных
значений. Если медианное значение принадлежит нескольким компонентам, то
добавьте лексикографическую сортировку по названию компоненты (так, если бы в
примере выше в компоненте C4 было бы 25 багов, то медианой стала бы она, если бы
в компоненте C5 было 25 багов, то медианой осталась бы C6, а если бы и в C4 и в
C5 было бы 25 багов, то медианой стала бы C5)

Собсвтенно решение:

Пунт 1

Для вывода информаци по кадому проекту я построил впомогательно представление
которое получает отношение "проект  - статус  - количество"

-- View: statustoproject

-- DROP VIEW statustoproject;

CREATE OR REPLACE VIEW statustoproject AS 
 SELECT count(bug.status_id) AS count, bug.status_id AS status, component.project_id AS project
   FROM bug
   JOIN bugcomponent ON bug.num = bugcomponent.bug_num
   JOIN component ON bugcomponent.component_id = component.id
  GROUP BY component.project_id, bug.status_id
  ORDER BY component.project_id, bug.status_id;

ALTER TABLE statustoproject
  OWNER TO postgres;



Далее, собственно, выбираю из вспомогательной выбоки и строю нужное отношение.

-- View: bussummaryperproject

-- DROP VIEW bussummaryperproject;

CREATE OR REPLACE VIEW bussummaryperproject AS 
 SELECT project.id AS project_id, COALESCE(( SELECT statustoproject.count
           FROM statustoproject
          WHERE statustoproject.project = project.id AND statustoproject.status = 1), 0::bigint) AS new, COALESCE(( SELECT statustoproject.count
           FROM statustoproject
          WHERE statustoproject.project = project.id AND statustoproject.status = 2), 0::bigint) AS assigned, COALESCE(( SELECT statustoproject.count
           FROM statustoproject
          WHERE statustoproject.project = project.id AND statustoproject.status = 3), 0::bigint) AS fixed, COALESCE(( SELECT statustoproject.count
           FROM statustoproject
          WHERE statustoproject.project = project.id AND statustoproject.status = 4), 0::bigint) AS verified, COALESCE(( SELECT statustoproject.count
           FROM statustoproject
          WHERE statustoproject.project = project.id AND statustoproject.status = 5), 0::bigint) AS "not reproducible"
   FROM project;

ALTER TABLE bussummaryperproject
  OWNER TO postgres;

Пункт 2

Самым сложным для меня было создать функцию медианы

CREATE OR REPLACE FUNCTION array_median(numeric[])
  RETURNS numeric AS
$$
    SELECT CASE WHEN array_upper($1,1) = 0 THEN null ELSE asorted[ceiling(array_upper(asorted,1)/2.0)] END
    FROM (SELECT ARRAY(SELECT ($1)[n] FROM
generate_series(1, array_upper($1, 1)) AS n
    WHERE ($1)[n] IS NOT NULL
            ORDER BY ($1)[n]
) As asorted) As foo ;
$$
  LANGUAGE 'sql' IMMUTABLE;
CREATE  AGGREGATE median(numeric) (
                  SFUNC=array_append,
                  STYPE=numeric[],
                  FINALFUNC=array_median
                );

Далее как и в первом примере я строю вспомогательное представление.

-- View: statustocomponent

-- DROP VIEW statustocomponent;

CREATE OR REPLACE VIEW statustocomponent AS 
 SELECT DISTINCT count(bug.status_id) AS count, bug.status_id AS status, component.id, component.title AS componentname
   FROM bug
   JOIN bugcomponent ON bug.num = bugcomponent.bug_num
   JOIN component ON bugcomponent.component_id = component.id
  GROUP BY component.id, bug.status_id
  ORDER BY component.id, bug.status_id;

ALTER TABLE statustocomponent
  OWNER TO postgres;

Далее строю нужно отношение.

-- View: statisticsperstatus

-- DROP VIEW statisticsperstatus;

CREATE OR REPLACE VIEW statisticsperstatus AS 
 SELECT bugstatus.value AS status, COALESCE(( SELECT statustocomponent.componentname
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id
          ORDER BY statustocomponent.count DESC, statustocomponent.componentname
         LIMIT 1), 'null'::character varying) AS max_component, COALESCE(( SELECT max(statustocomponent.count) AS max
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id), 0::bigint) AS max_value, COALESCE(( SELECT statustocomponent.componentname
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id
          ORDER BY statustocomponent.count, statustocomponent.componentname
         LIMIT 1), 'null'::character varying) AS min_component, COALESCE(( SELECT min(statustocomponent.count) AS min
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id), 0::bigint) AS min_value, COALESCE(( SELECT statustocomponent.componentname
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id AND statustocomponent.count::numeric = (( SELECT median(statustocomponent.count::numeric) AS median
                   FROM statustocomponent
                  WHERE statustocomponent.status = bugstatus.id))
          ORDER BY statustocomponent.componentname
         LIMIT 1), 'null'::character varying) AS median_component, COALESCE(( SELECT median(statustocomponent.count::numeric) AS median
           FROM statustocomponent
          WHERE statustocomponent.status = bugstatus.id), 0::numeric) AS median_value
   FROM bugstatus;

ALTER TABLE statisticsperstatus
  OWNER TO postgres;

Работет все это достаточно шутсро, поэтому решиние претендует быть верным.
Вомозможно я неверно лексиграфически упрорячиваю названия компонент

Дамп базы dbhw9.sql


Filed under: CSC No Comments


   Older Entries »


PAGES

 * Geo-Location API download section
 * Контакты
 * Мыльные новости
 * Новые


ARCHIVES

 * October 2015
 * July 2015
 * April 2015
 * November 2014
 * March 2014
 * February 2014
 * January 2014
 * December 2013
 * November 2013
 * October 2013
 * August 2013
 * June 2013
 * April 2013
 * December 2012
 * July 2012
 * March 2012
 * January 2012
 * December 2011
 * November 2011
 * September 2011
 * July 2011
 * June 2011
 * April 2011
 * March 2011


CATEGORIES

 * CSC
 * Web
 * Без рубрики
 * ГДЗ


Copyright © 2009 - 2022 Alexander Mylnikov · Powered by M7A.ru
Go to top ↑