GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.3 (4)<< < Пред. | След. > >>   Поиск:  
 Автор Тема: На: IBM
Misteryest
Сообщений: 998
На: IBM
Добавлено: 18 мар 20 3:02
Цитата:
Автор: Ilya Geller

Хотите почитать идиота? Пожалуйста!

M. Tim Jones
Published June 13, 2017
Speaking out loud
An introduction to natural language processing

Посмотрите что он предлагает?
The first step in parsing is to tokenize the sentence—that is, simply breaking down the sentence into its individual parts (or tokens). The tokens that make up my simple sentence are The, other, boy, runs, and the ending period (.). Tokenization yields the complete set of individual words that make up the sentence.

The next step is called stop word removal. The goal of stop word removal is to remove commonly used words in the language to permit focus on the important words in the sentence. There is no single definition of the stop word set, but there are common words that are easily removed.

After removing the stop words, I focus on removing punctuation. Punctuation in this context refers not only to commas and periods but also to the variety of special symbols used (parentheses, apostrophes, quotation marks, exclamation points, and so on).

Now that I’ve cleaned up my sentence, I’ll focus on the process of lemmatization (also called stemming). The goal of lemmatization is to reduce the words to their stem, or root form. For example, walking would be reduced to walk. In some cases, the algorithm changes the word choice to use the correct lemma (for example, changing better to good). In this example, I reduce runs to its root form, run.

The final phase in the parse is called part-of-speech (POS) tagging. In this process, I mark up the words as they correspond to a part of speech based on their context. I identify my remaining word tokens that correspond to a determiner, a noun, and a verb.

Варварство! Пусть он сделает ЭТО для текста и попробует его прочитать? Что он сумеет понять после ЭТОГО?

Местами хороший подход. Это называется "адаптация текста" и все зависит от задач, которые он решает. Удаление пунктуации, удаление наиболее частоупотребимых слов, приведение одних значений к другим - может решать ряд задач. Объясняю специально для Геллера.
Атомным реактором можно освещать поселок или сжечь Хиросиму, но им пока нельзя открыть портал в другое измерение.
Так вот, в голове у автора - освещение поселка, тогда как у Илюши, конечно же - открытие 4-го измерения, параллельной вселенной, червоточины. Соизмеряйте ваши задачи с методами реализации, товарищи.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 18 мар 20 3:49
Изменено: 18 мар 20 3:57
Цитата:
Автор: Misteryest


Местами хороший подход. Это называется "адаптация текста" и все зависит от задач, которые он решает. Удаление пунктуации, удаление наиболее частоупотребимых слов, приведение одних значений к другим - может решать ряд задач. Объясняю специально для Геллера.
Атомным реактором можно освещать поселок или сжечь Хиросиму, но им пока нельзя открыть портал в другое измерение.
Так вот, в голове у автора - освещение поселка, Бтогда как у Илюши, конечно же - открытие 4-го измерения, параллельной вселенной, червоточины. Соизмеряйте ваши задачи с методами реализации, товарищи.


давай говорю нормализованный текст например знак препинания разбиения части искусственно меняет текст когда каждый знак буква жизненно важно
[Ответ][Цитата]
Misteryest
Сообщений: 998
На: IBM
Добавлено: 18 мар 20 3:56
Цитата:
Автор: Ilya Geller

давай я говорю нормализованный текст например знак препинания разбиения части искусственно меняет текст когда каждый знак буква жизненно важно


Когда речь идет о том, чтобы найти близкий фрагмент по смыслу строки, детали не имеют значения. Дождь или дождик, дочь или дочерний, мамочка или материнский - совершенно спокойно игнорируемые в данном случае вещи.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 18 мар 20 4:00
Цитата:
Автор: Misteryest



Когда речь идет о том, чтобы найти близкий фрагмент по смыслу строки, детали не имеют значения. Дождь или дождик, дочь или дочерний, мамочка или материнский - совершенно спокойно игнорируемые в данном случае вещи.


подход совершенный правильный потому смысл текста стал понятен совершено сочетание передает
[Ответ][Цитата]
Misteryest
Сообщений: 998
На: IBM
+1
Добавлено: 18 мар 20 4:16
Цитата:
Автор: Ilya Geller
подход совершенный правильный потому смысл текста стал понятен совершено сочетание передает


Есть определенные правила написания текста, и это не только правила языка, но и отчасти интуитивно понятные вещи, например, не повторять одно и тоже слово несколько раз в коротком фрагменте текста, - предпочтительно использовать синоним; не использовать некоторые слова в определенных контекстах и другие, - эти штуки происходят из языковой культуры и формата повествования. Так деловой стиль отличается от публицистики, юридический документ от рассказа, и т.д. Следуя "в потоке" жанра, стилистики, культуры важно уметь его определять и оперировать им сообразно обстоятельствам и социальному контексту. То есть, мы имеем кратно более значительную задачу чем уметь разбираться в смысле скороговорки "Карл у Клары украл кораллы" и в этом круге задач автор, конечно, несколько не догоняет всего объема сложности проблемы.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 18 мар 20 4:39
Изменено: 18 мар 20 5:16
Цитата:
Автор: Misteryest



Есть определенные правила написания текста, и это не только правила языка, но и отчасти интуитивно понятные вещи, например, не повторять одно и тоже слово несколько раз в коротком фрагменте текста, - предпочтительно использовать синоним; не использовать некоторые слова в определенных контекстах и другие, - эти штуки происходят из языковой культуры и формата повествования. Так деловой стиль отличается от публицистики, юридический документ от рассказа, и т.д. Следуя "в потоке" жанра, стилистики, культуры важно уметь его определять и оперировать им сообразно обстоятельствам и социальному контексту. То есть, мы имеем кратно более значительную задачу чем уметь разбираться в смысле скороговорки "Карл у Клары украл кораллы" и в этом круге задач автор, конечно, несколько не догоняет всего объема сложности проблемы.


есть определенное правила писания текст только правило язык часть интуитивно понять вещь пример повторил одно тоже слова несколько раз коротко фрагмент текст предпочтительно использовать синоним использовать некоторую слова определенным контекст другие эта штука происходит язык культура формат повествование деловой стиль отличить публикация юридическая документ рассказ следует поток жанр стилистика культура важно уметь определять оперировать сообразно обстоятельство социальный контекст есть иметь кратно более значительное задача чем уметь разбираться смысл скороговорка карл украл украдено коралл круг задача автор конечно несколько догонять всего объем сложный проблема
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 29 мар 20 11:00
https://www.youtube.com/watch?v=J5IlKj7H8T8
IBM Watson Natural Language Understanding analyzes text to extract meta-data from content such a concepts, entities, keywords, categories, sentiment, emotion, relations, and semantic roles. With custom annotation models developed using Watson Knowledge studio you can tailor your solution towards industry / domain specific entities and relations in unstructured text. For more information, visit: https://ibm.co/2s995MY
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 02 апр 20 14:53
https://www.ibm.com/cloud/watson-discovery
Traditional enterprise search and search engines don’t provide employees and customers with exact answers. They can’t understand the nuances of phrases and acronyms in your industry and accurately search through your complex documents in a timely manner.
Watson Discovery solves these challenges. It is enterprise search that delivers specific answers to your queries while also serving up the entire document and supporting links, allowing your employees and customers to make informed decisions with confidence.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 03 апр 20 6:28
https://www.ibm.com/watson/advantage-reports/cognitive-business-lessons/productivity.html

Вот гады? Точно говорю, Virginia M. Rometty преднамеренно не допускала чтобы IBM сделало этот поиск 10 лет назад! За взятку от Хуйгля? Вполне возможно.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 06 апр 20 14:21
Watson is IBM’s natural-language-processing (NLP) computer system. And this voice to text speech processing platform system is available through the IBM cloud. One can use this feature to process up to 500 minutes of audio for free per month. Although you do need to create an IBM Bluemix account (free registration).
https://www.analyticsinsight.net/ibm-watson-traversing-across-gaps-of-ai-communication/
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 07 апр 20 2:06
Then it swings into visionary gear: “I believe we can make IBM the most trusted technology partner of the 21st century,” Krishna wrote. “For this to happen, we have to ensure that IBM continues to innovate and lead in the transformational journeys our clients are on. Hybrid cloud and AI are two dominant forces driving change for our clients and must have the maniacal focus of the entire company.”
https://www.theregister.co.uk/2020/04/07/arvind_krishna_becomes_ibm_ceo_letter_to_staff/

Будем посмотреть? Уже много громких и совершено пустых заявлений было сделано...
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 24 апр 20 16:06
Это то что я запатентовал и хотел сделать 10 лет назад:

Natural Language Classifier allows developers to quickly and easily build custom text classification models without the need for a data science or machine learning background. Simply upload your training data in a .csv file and you are ready to go! Natural Language Classifier will return the best matching classes for a sentence, phrase, or paragraph.
Identify next best actions, organize your data, or analyze your data for trends and new insights. Building custom machine learning models should not be something that only data scientists and machine learning experts can do. Start classifying your data today!
https://www.ibm.com/cloud/watson-natural-language-classifier
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 26 апр 20 15:13
Изменено: 26 апр 20 15:14
Те кто создал

HOW TO CREATE YOUR FIRST CHATBOT USING IBM WATSON IN 30 MINUTES
https://www.analyticsinsight.net/how-to-create-your-first-chatbot-using-ibm-watson-in-30-minutes/?fbclid=IwAR2QwIRfZMZiw9A9wKDRQM3kU2tKqv505AJvRqQrqrRV-2ovgqJTpKUiNgU

совершенно не понимают что они делают, отнеслись к делу топорно и чрезвычайно глупо. Вместо создания ИИ вручную нужно собрать тексты, относящиеся к делу. После чего обучить ИИ просто поговорив с ним. Технология дана мной в патенте.

Видимо IBM слишком старая и бюрократическая компания, ей не по зубам ИИ. IBM умирает.
[Ответ][Цитата]
Ilya Geller
Сообщений: 3379
На: IBM
Добавлено: 27 апр 20 2:50
Видимо IBM слишком большая компания, одна рука не знает что делает другая?

https://www.ibm.com/watson/services/personality-insights/
Predict personality characteristics, needs and values through written text. Understand your customers’ habits and preferences on an individual level, and at scale.

https://personality-insights-demo.ng.bluemix.net/?_ga=2.32956030.133880136.1587972967-876585459.1583945767&_gac=1.49425426.1587685562.EAIaIQobChMIrrr3yN3_6AIVEV8NCh06QwLyEAAYASAAEgJUs_D_BwE&cm_mc_uid=08789853047915839457675&cm_mc_sid_50200000=34061661587972966243&cm_mc_sid_52640000=96056501587972966255
You need text written by the person whose personality you're interested in. It should contain words about every day experiences, thoughts, and responses.
[Ответ][Цитата]
Валентин
Сообщений: 4207
На: IBM
Добавлено: 27 апр 20 4:36
"Видимо IBM слишком старая и бюрократическая компания, ей не по зубам ИИ. IBM умирает."
Уже много лет умирает, умирает и никак не умрёт: В 1943 году началась история компьютеров IBM: был создан «Марк I» массой около 4,5 тонны. Но уже в 1952 году появился «IBM 701[en]», первый большой компьютер, работавший на лампах. В 1956 году сын Томаса Уотсона Томас Уотсон-младший сменил отца на посту главы IBM, ознаменовав начало эры компьютеров для жизни. Под его руководством доходы компании выросли до $8 млрд, а число сотрудников — до 270 тыс. человек. 1981 год прочно вошёл в историю человечества как год появления Персонального Компьютера «IBM PC». 640 килобайт оперативной памяти и одного или двух флоппи-дисководов вполне хватало, чтобы исполнять операционную систему DOS, предложенную небольшой в то время компанией Microsoft, и некоторое количество приложений. Уже в 1990-х годах в бизнесе IBM всё отчётливее стало прослеживаться стремление сместить фокус бизнеса в сторону поставки услуг, в первую очередь консалтинга. Наиболее ярко это проявилось в 2002 году, когда «голубой гигант» приобрёл консалтинговое подразделение аудиторской компании PricewaterhouseCoopers за $3,5 млрд. В настоящее время этот бизнес, влившийся в подразделение IBM Global Services, является самым доходным в структуре IBM, приносящим больше половины дохода компании. Вместо производства «железа», IBM теперь стремится стать мировым лидером в сфере информационной безопасности, постоянно расширяя своё подразделение IBM Security. Одним из крупнейших приобретений в этой области стала покупка в 2006 году за $1,3 млрд компании Internet Security Systems (ISS), а в феврале 2017 года IBM объявила о приобретении уже 20-й по счёту компании в области IT-безопасности — Agile 3 Solutions, разработчика программного обеспечения для управления рисками, связанными с уязвимыми данными в корпоративной среде. В ноябре того же 2017 года учёные IBM успешно построили и измерили прототип процессора с 50-квантовыми разрядами. А в январе 2019 года на выставке CES подразделение IBM Research анонсировало первую в мире квантовую систему IBM Q System One состоящую из 20 кубитов, пригодную для коммерческого применения.
И: На конференции IBM Think 2018 представители компании презентовали самый маленький компьютер в мире на сегодняшний день. Этот компьютер имеет размер 1 на 1 миллиметр, что сопоставимо с размером крупинки поваренной соли. Стоимость производства одного такого компьютера оценивается меньше, чем в 10 центов. ))
[Ответ][Цитата]
 Стр.3 (4)1  2  [3]  4<< < Пред. | След. > >>