Скрыть объявление
Здравствуйте Гость! Не нашли ответа на свой вопрос? Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества и задайте свой вопрос! Вам обязательно помогут!

Где брать текст для дорвея?

Тема в разделе "Сайтостроение, настройка и технические вопросы", создана пользователем Vasiaka, 22 сен 2017.

  1. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    59 747кб это нормально для скрипта или много? А то что-то ошибку выдает
     

  2. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    Наконец-то скриптик дубасит, а дальше то, что делать? Шаблон там или еще что?
    Чтобы все было чинно и по порядку))
     
  3. itasw

    itasw Пользователь

    Сообщения:
    6.655
    Симпатии:
    0
    Поставь побольше выделения памяти для php. Я ставил 1024М (1Г.). По дэфолту стоит 128М. Если не ошибаюсь.
    Для скрипта нормально 100-110 МБ. (102 400-112 640 КБ т.е )

    Хз как на счет оно на счет дописывает в файл или заменяет.
    Я делал кажись так. Закинул в папку со скриптом файлы (по 100-110М)в формате
    input_1.txt , input_2.txt и т.д.
    Потом только менял имя входного и выходного файла
    соответственно input_1.txt и output_1.txt, input_2.txt и output_2.txt и.т.д
    После склеил файлы output в один.

    Вот , здесь описано как указать сколько памяти выделять для php.
     
  4. Vasiaka

    Vasiaka Пользователь

    Сообщения:
    14.478
    Симпатии:
    0
    Ключи и шаблон.
     
  5. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    Блин, спасибо огромное за такие ответы.
     
  6. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    Ключи уже есть, значит перебираюсь в тему по шаблонам.

    PS а дело то - идет)))
     
  7. itasw

    itasw Пользователь

    Сообщения:
    6.655
    Симпатии:
    0
    медленно но уверенно
     
  8. KOKA7770

    KOKA7770 Guest

    ок, будем пробовать
     
  9. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    Когда скрипт работает комп подтормаживает, интересно, у всех так или у меня борода какая-то?
     
  10. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    ага))

    И еще вопросик по тексту. Как думаете немного ли удаляет скрипт - из 195 094 предложений удалил 134 435. Может к примеру не удалять предложения в которых меньше 4-х слов или еще какую настройку сделать?
     
  11. eksin

    eksin Пользователь

    Сообщения:
    162
    Симпатии:
    0
    да забей ты на эти строчки, сколько оставил, сколько удалил , ты главное больше текста изначально найди для чистки...
    я вот к примеру взял 9 гигов в fb2 книжек прогнал через скрипт и осталось ~3 гига текста чистого
     
  12. Vasiaka

    Vasiaka Пользователь

    Сообщения:
    14.478
    Симпатии:
    0
    От компа зависит. Если оперативки мало, а ты накрутил в настройках чтобы обрабатывать большие файлы, то нечего удивляться.
     
  13. itasw

    itasw Пользователь

    Сообщения:
    6.655
    Симпатии:
    0
    Я примерно неделю назад задавал этот же вопрос. У меня оставалось 35-40 % от исходного (в Кб).

    PS ''ты же ее не сам пишешь'
     
  14. itasw

    itasw Пользователь

    Сообщения:
    6.655
    Симпатии:
    0
    Память для php = 1Г (1024М)
    Кидать по 100-110М
    .... надо эту фразу в подпись поставить
     
  15. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    Понятно, нужно на комп зарабатывать подороже
     
  16. sergeevich

    sergeevich Пользователь

    Сообщения:
    1.998
    Симпатии:
    0
    Спасибо большое за ответы и за темку такую, очень даже полезно))) Всё, на сёрч забиваю и перехожу сюда, здесь хоть объясняют и в рот кладут)
     
  17. antoha487

    antoha487 Пользователь

    Сообщения:
    793
    Симпатии:
    0
    ок, все понял
     
  18. rementese

    rementese Guest

    FB2Any v0.1 как её заставить преобразовывать не по одному файлу, а все сразу??
     
  19. KOKA7770

    KOKA7770 Guest

    А не заметили, что скрипт удаляет все тире в тексте? И слова, которые пишутся через тире получаются слитными (например: когдато, гденибудь, изза ).
    Как думаете - ничего страшного или стоит как-то подправить фильтры скрипта?
     
  20. Ganad

    Ganad Пользователь

    Сообщения:
    3.253
    Симпатии:
    0
    Заранее извиняюсь что немного не по теме. Подскажите пожалуйста как можно массово поменять кодировку, в множестве txt файлов, с ansi на utf-8?
     
Черновик сохранён Черновик удалён
Загрузка...