Анализ данных с сервиса Autochartist

 

У меня скопились данные в виде почтовых рассылок от сервиса Autochartist начиная с 11-Apr-2016, всего 1631 письмо.

Необходимо перевести это всё дело в табличный вид для анализа. Сохранять все необходимые данные, такие как время прихода письма, компания(откуда рассылка) и всё что относится к форексу. Картинки не везде есть из-за того, что некоторые из них берутся со внешнего источника, они не нужны.

Есть желающие))?

Для этого необходимы знания в программировании, навыки в парсинге текста.

Почтовые рассылки имеют следующий вид:



Анализировать надо будет следующий текст, он соответствует последней картинке:

Delivered-To: МОЯПОЧТА@gmail.com
Received: by 10.37.45.15 with SMTP id t15csp834737ybt;
        Thu, 16 Mar 2017 12:09:40 -0700 (PDT)
X-Received: by 10.55.197.219 with SMTP id k88mr9084572qkl.248.1489691380805;
        Thu, 16 Mar 2017 12:09:40 -0700 (PDT)
Return-Path: <0100015ad88689bd-60d668d1-06fb-4794-9ebf-2dd746d71a8a-000000@amazonses.com>
Received: from a11-92.smtp-out.amazonses.com (a11-92.smtp-out.amazonses.com. [54.240.11.92])
        by mx.google.com with ESMTPS id 94si4621629qkx.57.2017.03.16.12.09.40
        for <МОЯПОЧТА@gmail.com>
        (version=TLS1 cipher=ECDHE-RSA-AES128-SHA bits=128/128);
        Thu, 16 Mar 2017 12:09:40 -0700 (PDT)
Received-SPF: pass (google.com: domain of 0100015ad88689bd-60d668d1-06fb-4794-9ebf-2dd746d71a8a-000000@amazonses.com designates 54.240.11.92 as permitted sender) client-ip=54.240.11.92;
Authentication-Results: mx.google.com;
       dkim=pass header.i=@amazonses.com;
       spf=pass (google.com: domain of 0100015ad88689bd-60d668d1-06fb-4794-9ebf-2dd746d71a8a-000000@amazonses.com designates 54.240.11.92 as permitted sender) smtp.mailfrom=0100015ad88689bd-60d668d1-06fb-4794-9ebf-2dd746d71a8a-000000@amazonses.com
DKIM-Signature: v=1; a=rsa-sha256; q=dns/txt; c=relaxed/simple; s=224i4yxa5dv7c2xz3womw6peuasteono; d=amazonses.com; t=1489691380; h=From:To:Subject:MIME-Version:Content-Type:Content-Transfer-Encoding:Message-ID:Date:Feedback-ID; bh=bbSA2M7Zdjl1aCnS8aXWiTYfAx0mWQcaxhIiQhLMuwE=; b=R6nT17PkZ4/gYcIHyRF3ag0UaocniJfU1ejFknhXex/dygU6I8UXOhcMZErXAEnb DL5Ff8AkkVhjkHxvLvLfk3rPpsRkReMnvsRmmmDBdjsbXx7g3DoGD8doMPuYMFXCeEF APoyuJXrNrwqo4ooZ6Ibgo+3+rZq8hT8uO54wzFw=
From: alerts@autochartist.com
To: МОЯПОЧТА@gmail.com
Subject:        Оповещение о совпадении: USDILS

MIME-Version: 1.0
Content-Type: text/html; charset=UTF-8
Content-Transfer-Encoding: quoted-printable
Message-ID: <0100015ad88689bd-60d668d1-06fb-4794-9ebf-2dd746d71a8a-000000@email.amazonses.com>
Date: Thu, 16 Mar 2017 19:09:40 +0000
X-SES-Outgoing: 2017.03.16-54.240.11.92
Feedback-ID: 1.us-east-1.TWcJ2Xw8pZmJOr1AjiElS/QcgLCrB82krlcdXYEs0m8=:AmazonSES

=09

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.=
w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns=3D"http://www.w3.org/1999/xhtml" =09=09DIR=3D"LTR"=20
>
<head>
<meta http-equiv=3D"Content-Type" content=3D"text/html; charset=3DUTF-8" />
<title>=09=D0=9E=D0=BF=D0=BE=D0=B2=D0=B5=D1=89=D0=B5=D0=BD=D0=B8=D0=B5 =D0=
=BE =D1=81=D0=BE=D0=B2=D0=BF=D0=B0=D0=B4=D0=B5=D0=BD=D0=B8=D0=B8: USDILS
</title>
</head>

.........................//много всего

"display:block"/>
=09  =09</td>
=09  </tr>
</table>
</body>
</html>
 
Aliaksandr Hryshyn:

У меня скопились данные в виде почтовых рассылок от сервиса Autochartist начиная с 11-Apr-2016, всего 1631 письмо.

Необходимо перевести это всё дело в табличный вид для анализа. Сохранять все необходимые данные, такие как время прихода письма, компания(откуда рассылка) и всё что относится к форексу. Картинки не везде есть из-за того, что некоторые из них берутся со внешнего источника, они не нужны.

Есть желающие))?

Для этого необходимы знания в программировании, навыки в парсинге текста.

Почтовые рассылки имеют следующий вид:



Анализировать надо будет следующий текст, он соответствует последней картинке:


Прежде, чем писать в какой-то раздел,

посмотрите его НАЗВАНИЕ!

Желаюшие могут найтись здесь

https://www.mql5.com/ru/job

Фриланс-сервис на MQL5.com
Фриланс-сервис на MQL5.com
  • www.mql5.com
Заказы на разработку программ для трейдинга
 
На добровольных началах, для общего пользования.
 
Не трать деньги, Алгоритм отрисовки параметры "засекречены", и владелец Авточартиста может его завтра изменить, при этом не уведомив никого, а ты будешь собирать думая, что все одно и то же...
 

Никто не собирается тратить деньги). И параметры отрисовки не нужны, важен только прогноз, насколько он актуален, запаздывание... На почте Гугла есть фильтры для автоматического сбора/сортировки писем, там проблем нету.

Собрал архив, писем 1610.

Файлы:
Autochartist.zip  6305 kb
 

Сконвертировал сообщения в более читаемый вид, архив выше обновил.

   From: alerts@autochartist.com
     To: МОЯПОЧТА@gmail.com
   Date: 12.04.2016 5:13:26
Subject:        Оповещение о со впадении: GBPAUD

-------------------------------------------
        

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/1999/xhtml"              DIR="LTR" 
>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
<title> Оповещение о совпадении: GBPAUD
</title>
</head>

<body           DIR="LTR" 
>
<table width="94%" border="0" align="center" cellpadding="0" cellspacing="0" style="max-width:770px;">
      <tr>
          <td style="padding: 10px 5px;">
              <table style="width: 100%;;">
                  <tbody>
                  <tr>
                      <td style="vertical-align: bottom;">
                          <a href="http://www.autochartist.com/"><img src="http://www.autochartist.com/wordpress/images/autochartist-logo.png" width="265" height="40" border="0" style="max-width:478px;"></a>
                      </td>
                      <td style="text-align: right; vertical-align: bottom;">
                      </td>
                  </tr>
                  </tbody>
              </table>
          </td>
      </tr>
      <tr bgcolor="#0F7F12">
          <td style="padding: 21px 26px; color: #FFFFFF; font-family: Arial, Helvetica, sans-serif; font-size: 14px;">
                Autochartist выявил следующие горизонтальные уровни и графические модели, которые совпали с его прогнозом о потенциальном движении рынка.

          </td>
      </tr>
  <tr>
    <td bgcolor="#EEEEEE"><br />
      <table width="94%" border="0" align="center" cellpadding="0" cellspacing="0">
        <tr>
          <td colspan="3" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="10" /></td>
        </tr>
        <tr>
          <td width="17" height="28" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="1" height="7" /><br />
            <br />
            <img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="7" /></td>
          <td width="693" bgcolor="#D3D3D3" style="font-family: Arial, Helvetica, sans-serif; font-size: 12px; color: #000000; line-height:1.4em;">
                <strong>        Были сделаны следующие предположения:
</strong> <br />
                -       Прогноз с точностью до 20 пипсов
<br />
                -       Ключевые уровни и графические фигуры отличались на момент выявления не более, чем на 5 свечей

            </td>
          <td width="10" height="28" bgcolor="#D3D3D3">&nbsp;</td>
        </tr>
        <tr>
          <td colspan="3" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="10" /></td>
        </tr>
      </table>
      <br />
      <table width="94%" border="0" align="center" cellpadding="0" cellspacing="0">
        <tr>
          <td colspan="3" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="10" /></td>
        </tr>
        <tr>
          <td width="17" height="28" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="1" height="7" /><br />
            <br />
            <img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="7" />
          </td>
          <td width="693" bgcolor="#D3D3D3" style="font-family: Arial, Helvetica, sans-serif; font-size: 23px; color: #000000;">
                Символ
: GBPAUD&nbsp;          <img src="http://direct.autochartist.com/aclite/icons/Down.PNG" />

          </td>
          <td width="10" height="28" bgcolor="#D3D3D3">&nbsp;</td>
        </tr>
        <tr>
          <td colspan="3" bgcolor="#D3D3D3"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="10" /></td>
        </tr>
        
      </table>
      <br />
      <table width="94%" border="0" align="center" cellpadding="0" cellspacing="0">
        <tr>
          <td valign="top" style="font-family:Arial, Helvetica, sans-serif; line-height:1.3em; font-size:12px;">
              <strong>  Направление
:</span></strong>               <img src="http://direct.autochartist.com/aclite/icons/Down.PNG" />
<br>
              <strong>  Время идентификации
:</strong> <span DIR="LTR">2016-04-12 05:00 FET</span> 
<br/>
              <strong>  Цена прорыва
:</strong> 1.86794<br/>
              <strong>  Прогнозная цена
:</strong> 1.86325<br/>
                <strong>        Прогнозные пипсы
:</strong> -47<br/>
              <strong>  Bероятность
:</strong> <span dir="ltr">65.06 %</span><br/>
              <br>
          </td>
        </tr>
        <tr>
            <td>
  <table width="100%" style="font-family:Arial, Helvetica, sans-serif; line-height:1.3em; font-size:12px;">
    <tr>
      <td>
      <strong>  Фигура
:</strong>      Треугольник
<br/>
      <strong>  Интервал
:</strong>              30      Мин

</span><br/>
      <img src="http://direct.autochartist.com/aclite/imageViewer?type=CPPatternImage&uid=573804087&brokerid=24&w=357&h=204&priceadjustment=0.0&instrumentid=0&offset=3" width="100%">
      <br /><br/>
          </td>
          <td>
      <strong>  Фигура
: </strong>     Поддержка
<br>
      <strong>  Интервал
:</strong>              60      Мин

<br/>
      <img src="http://direct.autochartist.com/aclite/imageViewer?type=HRSPatternImage&uid=32639181&brokerid=24&w=357&h=204&priceadjustment=0.0&instrumentid=0&offset=3" width="100%">
      <br/><br/>
          </td>
          <td>
        </td>
      </tr>
    </table>
      <p>&nbsp;</p>
    </td>
  </tr>
  <tr>
    <td bgcolor="#777777">&nbsp;</td>
  </tr>
  <tr>
    <td bgcolor="#777777"><table width="94%" border="0" align="center" cellpadding="0" cellspacing="0">
        <tr>
          <td height="28" style="color: #FFF;font-size: 10px; line-height:normal; font-family: Arial, Helvetica, sans-serif;"><img src="http://www.autochartist.com/images/responsive/spacer.png" width="1" height="7" /><br />
        Отказ от ответственности: Autochartist — это автоматизированный сервис анализа финансового рынка. Существуют потенциальные риски, связанные с инвестированием и торговлей. Вы должны быть в курсе таких рисков, ознакомиться с ними и получить независимую консультацию, касающуюся них. Вы не должны торговать на деньги, которые не можете позволить себе потерять. Сервис Autochartist и его содержание не должно быть истолковано как навязчивое предложение инвестировать и/или торговать. Вы должны обратиться за независимой консультацией по данному вопросу. Прошлые успехи не указывают на возможность добиться успеха в будущем. Не делается никаких заявлений о том, что будут достигнуты любые результаты, которые обсуждаются в рамках сервиса и связанного с ним медиа-содержания. Все мнения, новости, исследования, анализы, цены и другая информация предоставляются в качестве общего комментария по рынкам, а не в качестве совета по инвестированию. Autochartist, компания MDIO Software, ее участники, акционеры, сотрудники, агенты, представители и реселлеры не гарантируют полноту, точность и своевременность предоставленной информации и не несут ответственности за какой-либо ущерб или какие-либо убытки, косвенные или иные, которые могут возникнуть в результате использования сервиса Autochartist и его содержания, а также в результате уверенности в их надежности. © 2012 Autochartist
            <img src="http://www.autochartist.com/images/responsive/spacer.png" width="2" height="7" /></td>
        </tr>
      </table></td>
  </tr>
  <tr>
    <td bgcolor="#777777">&nbsp;</td>
  </tr>
          <tr>
                <td style="font-family: Arial, Helvetica, sans-serif; font-size:11px; text-align: center; line-height:16px">
                        <a href="http://www.autochartist.com/ssresearch/unsubscribecs?userid=55560e52e3d667c0fbb868f7&amp;email=МОЯПОЧТА@gmail.com&amp;type=FOREX">     Чтобы отписаться нажмите здесь
</a>

<img src="http://messaging.autochartist.com/mailer/log/open/041204132555560e52e3d667c0fbb868f7.png?mT=CorrelatingSignal&u=8272493&bId=322&demo=0&e=МОЯПОЧТА%40gmail.com&l=ru_RU" width="1" height="1" style="display:block"/>
                </td>
          </tr>
</table>
</body>
</html>

Удачи)).

 
Aliaksandr Hryshyn:

У меня скопились данные в виде почтовых рассылок от сервиса Autochartist начиная с 11-Apr-2016, всего 1631 письмо.

Необходимо перевести это всё дело в табличный вид для анализа. Сохранять все необходимые данные, такие как время прихода письма, компания(откуда рассылка) и всё что относится к форексу. Картинки не везде есть из-за того, что некоторые из них берутся со внешнего источника, они не нужны.

Есть желающие))?

Для этого необходимы знания в программировании, навыки в парсинге текста.

Почтовые рассылки имеют следующий вид:



Анализировать надо будет следующий текст, он соответствует последней картинке:

Первая проблема!

через год два три четыре - форматы поменяются

даже если автоматизировать все это, вы столкнетесь в будущем  с проблемами изменения форматов

и весь красиво настроенный  автоматический парсинг ляжет в день изменения форматов


вторая проблема - зачем это все нужно ?

 
Yuriy Zaytsev:

вторая проблема - зачем это все нужно ?

Как зачем? Чтобы научиться парсить текст )) От Авточартиста все равно толку 0.0
 
Alexey Volchanskiy:
Как зачем? Чтобы научиться парсить текст )) От Авточартиста все равно толку 0.0

неее, ну это понятно

любая подобная задача - может родить гениальный алгоритм

а вот цель задачи - в таком контексте уже не так важна  :-)))

главное  парсинг будет гениален!!!

 
Yuriy Zaytsev:

неее, ну это понятно

любая подобная задача - может родить гениальный алгоритм

а вот цель задачи - в таком контексте уже не так важна  :-)))

главное  парсинг будет гениален!!!


Тут главное процесс!


 
Alexey Volchanskiy:


Тут главное процесс!


+++ :-))) да да

удовольствие от реализации

Причина обращения: